requests 库 BeautifulSoup库配置

`requests` 和 `BeautifulSoup` 都是 Python 中非常常用的库，它们分别用于网络请求和HTML解析。

首先，安装这两个库：

pip install requests beautifulsoup4

对于`requests`库，它是发送HTTP请求的基础工具。你可以使用它来获取网页内容，例如：

import requests

url = "https://www.example.com"
response = requests.get(url)
html_content = response.text

然后，`BeautifulSoup`库用于解析这个HTML内容，提取你需要的信息。导入并创建一个BeautifulSoup实例：

from bs4 import BeautifulSoup

soup = BeautifulSoup(html_content, 'lxml')  # 使用'lxml'解析器（如果需要其他如html.parser，替换'lxml'）

为了配置`BeautifulSoup`，通常不需要特别设置，但如果遇到编码问题，可以指定`response.encoding`属性。比如：

if response.encoding is not None:
    html_content = response.content.decode(response.encoding)
else:
    # 如果响应不包含编码信息，可能需要尝试自动检测或手动指定编码
    html_content = response.content.decode('iso-8859-1')