python爬虫案例代码
时间: 2023-10-04 07:06:39 浏览: 143
Python爬虫示例代码
3星 · 编辑精心推荐
当然,我可以为您提供一个简单的Python爬虫案例代码。以下是一个爬取网页标题的示例:
```python
import requests
from bs4 import BeautifulSoup
# 要爬取的网页链接
url = "https://example.com"
# 发送请求并获取页面内容
response = requests.get(url)
# 使用BeautifulSoup解析页面内容
soup = BeautifulSoup(response.text, "html.parser")
# 提取网页标题
title = soup.title.text
# 打印网页标题
print("网页标题:", title)
```
此代码使用了`requests`库来发送HTTP请求,并使用`BeautifulSoup`库解析HTML内容。它发送GET请求到指定的URL,获取页面内容,然后使用BeautifulSoup解析页面,并从中提取出标题信息。
请注意,这只是一个简单的示例,实际的爬虫代码可能会更复杂,具体取决于您要爬取的网站和需要提取的数据。爬虫行为应符合法律和道德规范,请确保您的爬虫代码遵循相关规定。
阅读全文