python爬虫 js
时间: 2023-09-12 11:04:02 浏览: 96
Python爬虫中可以使用Js逆向技术来处理一些涉及到JavaScript的网页。在引用中提到了一个案例,介绍了如何通过Js逆向实战来进行关键词搜索接口的爬取。在这个案例中,作者建议先看上一篇文章《Python爬虫之Js逆向案例(1)-某乎搜索》,因为里面包含了一些对新手有帮助的总结和调试技巧。引用中给出了一个高能总结,其中提到了一些技巧,比如使用curl版接口来进行请求,逐步减少请求头参数,以及使用Python的request包进行请求时可能会有一些字段差异。引用提到了如何获取翻页数据的方法。总的来说,Python爬虫可以使用Js逆向技术来处理JavaScript网页,并通过一些技巧和方法来实现爬取所需数据。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* *2* *3* [Python爬虫之Js逆向案例(2)-某乎搜索](https://blog.csdn.net/li11_/article/details/125056095)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"]
[ .reference_list ]
阅读全文