写一个抓取网页内信息的代码
时间: 2024-03-18 18:43:14 浏览: 44
好的,以下是一个使用 Python 的示例代码,可以抓取指定网页的标题和文本内容:
```
import requests
from bs4 import BeautifulSoup
url = 'https://www.example.com'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
title = soup.title.text.strip()
text = soup.get_text().strip()
print('Title:', title)
print('Text:', text)
```
在这个示例中,我们使用 requests 库发送 HTTP 请求获取网页内容,然后使用 BeautifulSoup 库解析 HTML 文档,从中提取标题和文本内容,并打印输出。可以将 `url` 替换为任何你想要抓取内容的网页的 URL。
阅读全文