编写程序，用Requests抓取搜索Python关键词页面数据¶

当你想要使用Python的requests库抓取网页数据时，首先需要安装这个库，如果你还没有安装，可以使用pip命令安装：

pip install requests

以下是一个简单的示例，展示如何编写程序抓取包含特定Python关键词（比如"Python教程"）的搜索结果页面的数据：

import requests
from bs4 import BeautifulSoup  # 使用BeautifulSoup解析HTML

# 定义你要抓取的搜索引擎URL，这里假设是Google搜索
search_url = "https://www.google.com/search?q=Python%E6%95%99%E7%A8%8B"

# 发送GET请求获取网页内容
response = requests.get(search_url)

# 检查请求是否成功，状态码200表示成功
if response.status_code == 200:
    # 解析响应内容为HTML
    soup = BeautifulSoup(response.text, 'html.parser')
    
    # 使用BeautifulSoup查找相关的搜索结果元素，例如标题或链接
    results = soup.find_all('div', class_='g')  # 这里假设搜索结果在class为"g"的div标签内
    
    for result in results:
        title = result.find('h3', class_='r').text  # 找到每个结果的标题
        link = result.find('a')['href']  # 找到每个结果的链接
        
        print(f'Title: {title}\nLink: {link}\n')  # 打印抓取的信息
else:
    print("Failed to fetch the page. Status code:", response.status_code)

请注意，实际的HTML结构可能会变化，所以`find_all()`和`find()`函数后面的参数可能会因网站而异。在抓取过程中，你也可能需要处理反爬虫机制，如验证码、用户代理设置等。