python爬取流浪地球_Scrapy爬取猫眼流浪地球影评2----- 获取数据

好的，下面是我的回答：

首先，我们需要安装Scrapy，可以使用以下命令进行安装：

pip install scrapy

接下来，我们需要创建一个Scrapy项目，可以使用以下命令：

scrapy startproject movie_comments

然后，我们需要进入项目的目录，并创建一个Spider，可以使用以下命令：

cd movie_comments
scrapy genspider maoyan_comments maoyan.com

这里的 maoyan_comments 是我们自己定义的 Spider 名称，maoyan.com 是我们要爬取的网站。

接下来，我们需要在 Spider 中定义要爬取的数据，可以参考以下代码：

import scrapy

class MaoyanCommentsSpider(scrapy.Spider):
    name = 'maoyan_comments'
    allowed_domains = ['maoyan.com']
    start_urls = ['https://maoyan.com/films/1212592/comments']

    def parse(self, response):
        comments = response.xpath('//div[@class="comment-content"]')
        for comment in comments:
            yield {'comment': comment.xpath('string(.)').extract_first().strip()}

这段代码的作用是爬取猫眼电影《流浪地球》的影评，并将评论内容保存到一个字典中。

最后，我们可以使用以下命令运行 Spider 并将数据保存到一个文件中：

scrapy crawl maoyan_comments -o comments.json

这里的 comments.json 是我们要保存的文件名。运行完毕后，我们就可以得到一个包含所有评论内容的 JSON 文件。