实用python爬取亚马逊网站商店商品评论

您好！要使用Python爬取亚马逊网站商店的商品评论，您可以使用以下步骤：

1. 安装必要的库：您可以使用`pip`命令安装`requests`和`beautifulsoup4`库。

2. 发送请求并获取页面内容：使用`requests`库发送GET请求，获取亚马逊网站商店商品页面的HTML内容。

import requests

url = "https://www.amazon.com/dp/商品编号"  # 替换为您要爬取评论的商品链接
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.82 Safari/537.36"
}  # 添加User-Agent头部，模拟浏览器请求

response = requests.get(url, headers=headers)
html_content = response.text

请注意替换`url`变量为您要爬取评论的实际商品链接，并根据需要修改`headers`中的User-Agent。

3. 解析HTML内容：使用`beautifulsoup4`库来解析HTML内容，提取商品评论信息。

from bs4 import BeautifulSoup

soup = BeautifulSoup(html_content, "html.parser")

# 根据页面结构和CSS选择器提取评论信息
comments = soup.select("选择器")  # 用合适的CSS选择器替换 "选择器"

for comment in comments:
    # 处理每条评论的相关信息
    # 提取评论内容、评分等信息并进行处理
    pass

在`comments`中，您可以使用合适的CSS选择器来提取评论信息。请根据实际情况替换选择器，并在循环中处理每条评论的相关信息。

需要注意的是，亚马逊网站对爬取行为有一定限制，请确保您的爬取行为符合亚马逊的使用政策和规定。

希望对您有所帮助！如果您有任何问题，请随时提问。