selenium反爬 小红书
时间: 2023-09-03 07:12:26 浏览: 831
防自动化检测反爬,防止selenium等自动化工具运行的检测代码
Selenium是一个常用的爬虫工具,但是在使用Selenium进行爬取时,有时会遇到反爬措施。关于Selenium被拦截的问题,有一个解决方法是使用execute_cdp_cmd函数来绕过反爬机制。这个函数可以在JS代码执行前执行一些命令,从而绕过一些对Selenium的检测。具体操作可以参考中提到的方法一,其中关键部分是使用driver.execute_cdp_cmd函数。通过加上这个函数后面的命令,可以绕过一些对Selenium的监测,从而解决被拦截的问题。这种方法在一些网站上可能会有效,但并不保证适用于所有情况。因此,在使用Selenium进行爬取时,还需要根据具体的网站反爬机制来选择合适的解决方案。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* [xiaohongshuSpider_python爬虫_python小红书_python](https://download.csdn.net/download/weixin_42696271/22384621)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"]
- *2* *3* [Selenium 突破网站反爬虫](https://blog.csdn.net/ZJ_11701/article/details/110100406)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"]
[ .reference_list ]
阅读全文