scrapy爬取微博评论简书

scrapy是一个用于网站抓取和数据提取的Python框架，而微博和简书分别是一个社交媒体平台和一个知识分享平台。要使用scrapy爬取微博评论简书，可以按照以下步骤进行：

首先，需要安装好Python和scrapy框架。可以通过安装Python的pip包管理工具，并使用pip安装scrapy。

然后，对于微博，可以通过登录微博开放平台，注册一个开发者账号，并创建一个应用。获取到应用的App Key和Secret Key，以便进行API调用。在scrapy项目的settings.py文件中添加好相应的key。

接下来，使用scrapy创建一个新的项目。可以使用命令行工具执行以下命令：scrapy startproject weibo

在项目的spiders目录下，创建一个新的spider。可以使用命令行工具执行以下命令：scrapy genspider weibo_spider "weibo.com"

编辑新创建的spider，编写爬取微博评论的代码。可以使用weibo API提供的接口进行评论的爬取。

然后，启动爬虫，执行以下命令：scrapy crawl weibo_spider

在简书的情况下，可以使用简书提供的API接口进行评论的抓取。首先，需要注册一个账号，并通过简书的开发者平台获取到相应的API Key。然后，使用获取到的API Key进行API调用。

创建一个新的spider来实现对简书评论的爬取，类似于上述微博的爬虫。

最后，启动爬虫，执行相应的命令来抓取简书评论。

总之，使用scrapy爬取微博评论简书可以通过利用它提供的网页抓取和数据提取功能，结合微博和简书的API进行相应的数据获取。通过上述步骤的操作，可以简单实现这个目标。