Python爬虫百度代码

Python 爬虫可以使用 requests 库来发送 HTTP 请求获取网页内容，然后使用 Beautiful Soup 库或 lxml 库等解析 HTML 页面内容，从而实现爬取百度搜索结果的功能。以下是一个简单的 Python 爬虫百度搜索结果的代码示例：

import requests
from bs4 import BeautifulSoup

def baidu_search(keyword):
    url = 'https://www.baidu.com/s?wd=' + keyword
    headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36 Edge/16.16299'}
    response = requests.get(url, headers=headers)
    soup = BeautifulSoup(response.text, 'lxml')
    results = soup.find_all('div', class_='result')
    for result in results:
        title = result.find('a').text.strip()
        link = result.find('a').get('href')
        print(title + '\n' + link + '\n')

# 调用函数进行百度搜索
baidu_search('Python 爬虫')