python爬虫爬取百度代码
时间: 2023-12-05 15:05:10 浏览: 141
python 代码爬虫
Python爬虫可以用来爬取百度搜索结果中的内容,包括文本和图片等。以下是一个简单的示例代码:
```
import requests
from bs4 import BeautifulSoup
# 搜索关键词
keyword = 'Python'
# 构造搜索链接
url = 'https://www.baidu.com/s?wd=' + keyword
# 发送请求并获取响应
response = requests.get(url)
# 解析响应内容
soup = BeautifulSoup(response.text, 'html.parser')
# 获取搜索结果列表
results = soup.find_all('div', class_='result')
# 遍历搜索结果并输出标题和链接
for result in results:
title = result.h3.text
link = result.a['href']
print(title, link)
```
这段代码可以爬取百度搜索结果中与关键词“Python”相关的内容,并输出每个搜索结果的标题和链接。如果需要爬取图片,可以使用类似的方法,先获取图片链接,再下载图片并保存到本地。
阅读全文