scrapy中怎么设置cookie

Scrapy是一个强大的Python网络爬虫框架，它支持自动处理网站登录、cookies等功能。要设置cookies，在Scrapy中你可以按照以下步骤操作：

1. **创建一个新的Scrapy项目**（如果还没有的话）：

   scrapy startproject my_spider
   cd my_spider

2. **打开`settings.py`文件**，这是Scrapy项目的配置文件，找到`DOWNLOADER_MIDDLEWARES`部分，添加或修改`CookieMiddleware`的位置，使其生效。默认情况下，`CookieMiddleware`位于中间件堆栈的较后位置，通常是在其他处理HTTP头的中间件之后。

   DOWNLOADER_MIDDLEWARES = {
       'scrapy.downloadermiddlewares.cookies.CookiesMiddleware': 700,
       # ...其他中间件...
   }

3. **设置cookie**：
- 如果你有一个预先准备好的cookies字典，可以像这样将其设置为全局变量`COOKIES`：

     COOKIES = {
         'your_cookie_key': 'your_cookie_value',
         # 更多cookies...
     }

- 如果你需要动态设置cookies，可以在请求发送前通过`Response`对象的`cookies`属性设置：

     def process_request(self, request, spider):
         if spider.name == 'your_spider_name':
             cookies = {'your_cookie_key': 'your_cookie_value'}
             request.cookies = cookies

4. **启用cookie保存**：
Scrapy默认会在会话之间保存cookies。如果你需要在项目结束后保留cookies，你可以在`SPIDER_MIDDLEWARES`中配置`CookiesMiddleware`，例如：

   SPIDER_MIDDLEWARES = {
       'scrapy.contrib.downloadermiddleware.cookies.CookiesMiddleware': 800,
       # ...其他中间件...
   }

5. **运行爬虫**：

   scrapy crawl your_spider_name

记得替换上述代码中的`your_cookie_key`, `your_cookie_value`和`your_spider_name`为你实际的cookies值和爬虫名称。