Python爬虫实例
时间: 2023-02-22 19:58:33 浏览: 15
python 爬虫实例
下面是一个使用 Python 爬虫爬取网页信息的简单实例:
```python
import requests
from bs4 import BeautifulSoup
url = "https://www.example.com"
response = requests.get(url)
soup = BeautifulSoup(response.text, "html.parser")
print(soup.prettify())
```
这段代码使用 `requests` 库发送了一个 GET 请求,将网页的 HTML 内容获取到并用 `BeautifulSoup` 解析。然后使用 `soup.prettify()` 方法将解析后的内容打印出来。
根据需求可以添加更多的代码,筛选出需要的信息。
阅读全文