编一个python爬取网页信息的程序
时间: 2023-03-31 16:01:49 浏览: 44
python 爬取网页
下面是一个简单的爬取网页信息的 Python 程序:
```
import requests
from bs4 import BeautifulSoup
url = "https://www.example.com"
response = requests.get(url)
soup = BeautifulSoup(response.text, "html.parser")
print(soup.prettify())
```
这段代码使用了 `requests` 库来请求网页的内容,并使用 `BeautifulSoup` 库将请求到的内容解析为一个可操作的 `soup` 对象。最后,我们使用 `prettify` 方法格式化输出网页内容。
请注意,上面的代码仅仅是爬取网页内容的简单示例,如果您需要爬取特定的数据,您可能需要更多的代码和处理。
阅读全文