python爬虫抓取网页指定信息

Python爬虫可以使用第三方库BeautifulSoup和requests来抓取网页指定信息。下面是一个简单的示例：

import requests
from bs4 import BeautifulSoup

# 发送请求，获取网页内容
url = 'https://www.example.com'
response = requests.get(url)
html = response.text

# 使用BeautifulSoup解析网页
soup = BeautifulSoup(html, 'html.parser')

# 查找指定信息
title = soup.title.string
links = [link.get('href') for link in soup.find_all('a')]

# 输出结果
print('Title:', title)
print('Links:', links)

在上面的示例中，我们首先使用requests库发送请求并获取网页内容，然后使用BeautifulSoup库解析网页。通过查找标签和属性，我们可以轻松地获取网页中的指定信息，并将其存储在变量中。最后，我们使用print语句输出结果。

需要注意的是，爬虫需要遵守网站的robots协议和爬虫规则，否则可能会引起法律问题。此外，爬虫也应该注意不要对网站造成过大的负载，以避免对网站的正常运行造成影响。