python如何解析html

在Python中，可以使用BeautifulSoup库来解析HTML文档。下面是一个示例，展示如何从URL抓取HTML并解析它：

首先，导入所需的库[^1]:

from bs4 import BeautifulSoup
import requests

然后设置请求头和URL:

url = 'https://blog.csdn.net/xyh2004/article/details/139481315'
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/125.0.0.0 Safari/537.36'
}

接着发送GET请求并获取HTML内容:

response = requests.get(url=url, headers=headers)
html_doc = response.text

创建BeautifulSoup对象，指定解析器（如`html.parser`或`lxml`）[^2]:

soup = BeautifulSoup(html_doc, 'html.parser')

最后，你可以使用CSS选择器或者其他BeautifulSoup的方法来查找和操作HTML元素:

# 示例：查找所有class为"example-class"的p标签
results = soup.select('.example-class p')
for result in results:
    print(result.text)