网易云音乐评论抓取实战:Python实现AES加密
在本篇综合训练中,我们将学习如何使用Python编程技术从网易云音乐抓取数据。具体步骤涉及网络请求、加密解密技术和API交互。以下是详细的知识点解析: 1. **网络请求与参数设置**: - 使用`requests`库发送POST请求到`https://music.163.com/weapi/comment/resource/comments/get`,这是一个评论获取接口。`url`变量包含完整的URL,而`data`字典包含了API调用所需的参数,如`cursor`、`offset`、`orderType`等,用于分页查询评论。 2. **CSRF Token处理**: - 提供的代码中提及`csrf_token`,这可能是跨站请求伪造令牌,确保请求的安全性。在实际操作时,可能需要动态获取或通过其他方式提供这个token。 3. **AES加密**: - 函数`get_encSecKey()`的目的是获取`encSecKey`,这是对敏感数据进行加密的关键。使用了`pycrypto`库中的`AES`模块,它提供了高级加密标准(AES)的加密和解密功能。`f`和`g`字符串似乎用于构建加密所需的数据,`e`参数可能是填充模式。 4. **Base64编码**: - `b64encode`函数可能用于对某些数据进行Base64编码,这有助于在网络传输过程中保护或隐藏原始数据。 5. **解密过程**: - 代码中的`encSecText`和`i`可能是加密后的文本,通过`c()`方法解密后得到`1b5c4`。这里的解密过程可能涉及到AES算法,具体步骤包括获取正确的密钥(`encSecKey`),根据`e`参数选择合适的加密模式(可能是ECB或CBC),然后解密。 6. **循环和重复调用**: - 由于请求参数中的`cursor`和`offset`递增,可以推测代码会实现一个循环,不断发送请求,直到获取所有页面的评论数据。每一页最多20条评论,通过调整`pageNo`和`pageSize`参数来控制。 7. **加密算法应用**: - 在网易云音乐的API交互中,数据可能需要经过加密处理以保护用户隐私。这里的加密过程展示了在Python中如何使用`pycrypto`库实现AES加密,这对于理解网站数据安全机制非常有帮助。 本篇训练着重于网络爬虫技术,特别是如何使用Python对网易云音乐的API进行安全的请求,处理加密数据,并通过循环获取多页评论信息。熟练掌握这些技术对于数据分析、网站开发以及网络安全分析都有重要意义。
![](https://csdnimg.cn/release/download_crawler_static/86276728/bg1.jpg)
下载后可阅读完整内容,剩余5页未读,立即下载
![.zip](https://img-home.csdnimg.cn/images/20210720083646.png)
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://profile-avatar.csdnimg.cn/d1c51dac5b7443d3bdc74d40de949690_weixin_35756892.jpg!1)
- 粉丝: 180
- 资源: 255
我的内容管理 展开
我的资源 快来上传第一个资源
我的收益
登录查看自己的收益我的积分 登录查看自己的积分
我的C币 登录后查看C币余额
我的收藏
我的下载
下载帮助
![](https://csdnimg.cn/release/wenkucmsfe/public/img/voice.245cc511.png)
最新资源
- Hadoop生态系统与MapReduce详解
- MDS系列三相整流桥模块技术规格与特性
- MFC编程:指针与句柄获取全面解析
- LM06:多模4G高速数据模块,支持GSM至TD-LTE
- 使用Gradle与Nexus构建私有仓库
- JAVA编程规范指南:命名规则与文件样式
- EMC VNX5500 存储系统日常维护指南
- 大数据驱动的互联网用户体验深度管理策略
- 改进型Booth算法:32位浮点阵列乘法器的高速设计与算法比较
- H3CNE网络认证重点知识整理
- Linux环境下MongoDB的详细安装教程
- 压缩文法的等价变换与多余规则删除
- BRMS入门指南:JBOSS安装与基础操作详解
- Win7环境下Android开发环境配置全攻略
- SHT10 C语言程序与LCD1602显示实例及精度校准
- 反垃圾邮件技术:现状与前景
![](https://img-home.csdnimg.cn/images/20220527035711.png)
![](https://img-home.csdnimg.cn/images/20220527035111.png)
![](https://csdnimg.cn/release/wenkucmsfe/public/img/green-success.6a4acb44.png)