如何爬取京东手机评论数
时间: 2023-10-11 22:09:48 浏览: 92
要爬取京东手机评论数,可以通过以下步骤实现:
1. 打开京东手机页面,例如:https://list.jd.com/list.html?cat=9987,653,655&ev=exbrand_Apple%5E&page=1
2. 打开浏览器开发者工具,切换到 Network 选项卡,勾选 Preserve log 选项
3. 在页面中找到评论数显示的元素,例如:<strong class="J_commentCount">xxxx</strong>
4. 点击 Network 选项卡中的 XHR 过滤器,刷新页面,找到请求评论数的接口,例如:https://club.jd.com/comment/productCommentSummaries.action?referenceIds=100003045021
5. 复制接口链接,并使用 Python 代码发送请求,解析接口返回的 JSON 数据,即可获取评论数
以下是示例代码:
```python
import requests
import json
url = 'https://club.jd.com/comment/productCommentSummaries.action?referenceIds=100003045021'
response = requests.get(url).text
data = json.loads(response)
comment_count = data['CommentsCount'][0]['CommentCount']
print(comment_count)
```
其中,referenceIds 参数需要替换成你要爬取的商品 ID。
阅读全文