爬虫显示{"code":"010013","msg":"鉴权失败"}
时间: 2023-11-30 18:05:03 浏览: 98
CDG测试中的鉴权失败
爬虫显示{"code":"010013","msg":"鉴权失败"}通常是因为网站进行了反爬虫处理。其中可能包括以下两种情况:
1. 通过编码格式进行反爬:网站可能使用了非默认编码格式,导致爬虫在解码时出现乱码或报错,从而无法正常获取数据。此时可以尝试更改编码格式进行解码。
2. 通过蜜罐(陷阱)获取爬虫ip(或者代理ip):网站可能设置了陷阱url,这些url会被提取规则获取,但是正常用户无法获取,从而可以有效地区分爬虫和正常用户。此时可以尝试更改请求头信息,使用代理IP等方式进行反反爬虫处理。
阅读全文