requests库如何爬取数据

requests库是Python中常用的第三方库之一，用于向网页发送HTTP请求。

要使用requests库爬取数据，通常需要以下几个步骤：

1. 导入requests库：在代码的开头使用import语句导入requests库。

2. 发送HTTP请求：使用requests库中的get或post方法向目标网站发送HTTP请求。

3. 获取响应内容：使用requests库中的text方法获取服务器返回的HTML文本。

4. 解析HTML文本：使用Python的HTML解析库（如BeautifulSoup）对获取到的HTML文本进行解析，从中提取所需的数据。

下面是一个简单的例子，演示了如何使用requests库爬取百度首页的HTML文本：

import requests

# 发送HTTP请求
response = requests.get('https://www.baidu.com')

# 获取响应内容
html_text = response.text

# 输出HTML文本
print(html_text)

需要注意的是，爬取数据时需要遵守相关法律法规和网站的使用协议，不得进行非法爬取。