python爬虫爬取商品评论并显示
时间: 2023-09-11 10:06:20 浏览: 123
利用Python网络爬虫对京东商城中指定商品下的用户评论进行爬取,对数据预处理操作后进行文本情感分析并可视化显示。.zip
5星 · 资源好评率100%
好的,您可以使用Python中的requests库来发送请求,使用BeautifulSoup库来解析HTML页面,使用re库来提取评论信息。以下是一个简单的示例代码:
```python
import requests
from bs4 import BeautifulSoup
import re
url = 'https://www.jd.com'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
comment_list = soup.find_all('div', {'class': 'comment'})
for comment in comment_list:
comment_text = comment.find('div', {'class': 'text'}).text
comment_text = re.sub(r'\s+', ' ', comment_text).strip()
print(comment_text)
```
这个示例代码会爬取京东首页的商品评论,并且只显示评论内容。您可以根据自己的需求修改代码。
阅读全文