python爬虫爬取猫眼电影评论
时间: 2023-06-29 13:17:11 浏览: 124
Python爬虫项目之爬取流浪地球电影猫眼评论和评分.zip
好的,您想了解如何使用Python爬虫爬取猫眼电影评论,是吗?以下是一个简单的示例代码,可以帮助您开始:
```
import requests
import json
# 请求头
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
# 爬取数据的网址
url = 'https://m.maoyan.com/mmdb/comments/movie/1299372.json?_v_=yes&offset=0&startTime=0'
# 发送请求
response = requests.get(url, headers=headers)
# 解析json数据
comments = json.loads(response.text)['cmts']
for comment in comments:
print(comment['content'])
```
这个代码将会向猫眼电影的评论网址发送请求,获取电影《误杀》的评论,并将评论的内容打印出来。
需要注意的是,这只是一个简单的示例代码。如果您想要爬取更多评论,需要修改offset和startTime参数,通过多次请求来获取更多的评论数据。同时,需要遵守网站的爬虫规则,不要过于频繁地发送请求,以免被网站屏蔽。
阅读全文