网页内源代码模板如下： <html> <meta http-equiv="Content=-Type" content="text/html; charset=utf-8"> <head> <link href="http://192.167.1.101/hint.css" rel="stylesheet"></link> </head> <body>[talkid:138031370]2014年4月20日 03:55:45 , <span class="hint-success" data-hint"">111222</span> 向 <span class="hint-success" data-hint="">232323</span> 发送 我们已经是好友了，开始聊天吧！ <p> ()</p> [talkid:138031371]2014年4月20日 04:45:45 , <span class="hint-success" data-hint"">111222</span> 向 <span class="hint-success" data-hint="">123456</span> 发送 音频 :[<ahref="files/f/f123fsasfsfsjdfrhf_n.m4a"]>音频</a> <p> ()</p> [talkid:138031372]2014年4月20日 04:55:45 , <span class="hint-success" data-hint"">111222</span> 向 <span class="hint-success" data-hint="">123456</span> 发送 音频 :[<ahref="files/f/f123fsasfsfsjdfrhf_n.jpg"]>图片</a> <p> ()</p> [talkid:138031373]2014年4月20日 05:55:45 , <span class="hint-success" data-hint"">111222</span> 向 <span class="hint-success" data-hint="">3234221</span> 发送 我们已经是好友了，开始聊天吧！ <p> ()</p> [talkid:138031374]2014年4月20日 06:55:45 , <span class="hint-success" data-hint"">111222</span> 向 <span class="hint-success" data-hint="">1359075</span> 发送 我们已经是好友了，开始聊天吧！ <p> ()</p> </body> </html> 利用python爬虫，打开C:/Users/test/Desktop/DIDItest文件夹下多个文件夹内的html文件源代码，并爬取源代码中的ID、时间、发送号码、接收号码、发送内容，如果发送内容为音频则提取音频所在位置，反之则保留发送内容，并将爬取的内容写入csv中
时间: 2023-08-14 11:58:17 浏览: 63
以下是一个示例的Python爬虫代码，用于打开指定文件夹下的多个HTML文件，并从源代码中提取ID、时间、发送号码、接收号码和发送内容，并将结果写入CSV文件。
```python
import os
import csv
from bs4 import BeautifulSoup
# 设置文件夹路径
folder_path = 'C:/Users/test/Desktop/DIDItest'
# 创建CSV文件并写入表头
csv_file = open('output.csv', 'w', newline='', encoding='utf-8')
csv_writer = csv.writer(csv_file)
csv_writer.writerow(['ID', '时间', '发送号码', '接收号码', '发送内容'])
# 遍历文件夹中的所有文件
for root, dirs, files in os.walk(folder_path):
for file_name in files:
if file_name.endswith('.html'):
file_path = os.path.join(root, file_name)
# 打开HTML文件并读取源代码
with open(file_path, 'r', encoding='utf-8') as file:
html_content = file.read()
# 使用BeautifulSoup解析HTML源代码
soup = BeautifulSoup(html_content, 'html.parser')
# 提取ID、时间、发送号码、接收号码和发送内容
talk_id = soup.find('body').find('span', class_='hint-success').text.strip()
time = talk_id.split(',')[0][1:]
send_phone = soup.find('body').find_all('span', class_='hint-success')[0].text.strip()
receive_phone = soup.find('body').find_all('span', class_='hint-success')[1].text.strip()
content_tag = soup.find('body').find('p')
if content_tag.find('a'):
content = content_tag.find('a')['href']
else:
content = content_tag.text.strip()
# 将提取的数据写入CSV文件
csv_writer.writerow([talk_id, time, send_phone, receive_phone, content])
# 关闭CSV文件
csv_file.close()
```
请注意，此代码使用了`BeautifulSoup`库来解析HTML源代码，因此您需要确保已经安装了该库。可以使用`pip install beautifulsoup4`命令来安装它。另外，该代码只处理了提取数据的部分，如果需要进一步处理音频文件或其他内容，请根据实际需求进行修改。
相关推荐
网页内源代码模板如下： <html> <meta http-equiv="Content=-Type" content="text/html; charset=utf-8"> <head> </head> <body> [talkid:138031379]2014年4月20日 06:55:45 , 111222 向 342112 发送 我们已经是好友了，开始聊天吧！ [talkid:137031381]2014年4月20日 03:55:45 , 2323234 在群 20011 中发言 我们已经是好友了，开始聊天吧！ [talkid:137031382]2014年4月22日 04:45:45 , 2323234 在群 20011 中发言 音频 :[音频 [talkid:137031383]2014年4月23日 04:55:45 , 2323234 在群 20011 中发言 图片 :[图片 [talkid:138031387]2014年4月20日 04:45:45 , 2323234 向 543521 发送 音频 :[音频 </body> </html> 利用python爬虫，提取消息发送内容、文件名称，发送内容提取‘ 发送’后或中发言后的内容，如果有[<a href则设置为默认空值，文件名称则提取如果有[<a href则提取文件所在位置，反之则填写默认空值
网页内源代码模板如下： <html> <meta http-equiv="Content=-Type" content="text/html; charset=utf-8"> <head> </head> <body>[talkid:138031370]2014年4月20日 03:55:45 , 111222 向 232323 发送 我们已经是好友了，开始聊天吧！ () [talkid:138031371]2014年4月20日 04:45:45 , 111222 向 123456 发送 音频 :[<ahref="files/f/f123fsasfsfsjdfrhf_n.m4a"]>音频
() [talkid:138031372]2014年4月20日 04:55:45 , 111222 向 123456 发送 图片 :[<ahref="files/f/f123fsasfsfsjdfrhf_n.jpg"]>图片 () </body> </html> 利用python爬虫，打开C:/Users/test/Desktop/DIDItest文件夹下多个文件夹内的html文件源代码，并爬取源代码中的ID、时间、发送号码、接收号码、发送内容，如果发送内容不为文本，则提取文件所在链接地址，并将爬取的内容写入csv中
最新推荐
基于白冠鸡优化算法COOT-Kmean-Transformer-GRU实现数据回归预测算法研究Matlab代码.rar
1.版本：matlab2014/2019a/2021a
2.附赠案例数据可直接运行matlab程序。
3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。
4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
5.作者介绍：某大厂资深算法工程师，从事Matlab算法仿真工作10年；擅长智能优化算法、神经网络预测、信号处理、元胞自动机等多种领域的算法仿真实验，更多仿真源码、数据集定制私信+。
替换数据可以直接使用，注释清楚，适合新手
源代码-wap站长论坛 手机建站程序.zip
源代码-wap站长论坛 手机建站程序.zip
【SCI1区】Matlab实现鱼鹰优化算法OOA-Transformer-GRU故障诊断算法研究.rar
1.版本：matlab2014/2019a/2021a
2.附赠案例数据可直接运行matlab程序。
3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。
4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
5.作者介绍：某大厂资深算法工程师，从事Matlab算法仿真工作10年；擅长智能优化算法、神经网络预测、信号处理、元胞自动机等多种领域的算法仿真实验，更多仿真源码、数据集定制私信+。
替换数据可以直接使用，注释清楚，适合新手
【创新发文无忧】Matlab实现侏儒猫鼬优化算法DMO-Kmean-Transformer-GRU故障诊断算法研究.rar
1.版本：matlab2014/2019a/2021a
2.附赠案例数据可直接运行matlab程序。
3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。
4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
5.作者介绍：某大厂资深算法工程师，从事Matlab算法仿真工作10年；擅长智能优化算法、神经网络预测、信号处理、元胞自动机等多种领域的算法仿真实验，更多仿真源码、数据集定制私信+。
替换数据可以直接使用，注释清楚，适合新手
06-肖勇-云南铝业能源管理中心项目案例分享与商机分析.pptx
06-肖勇-云南铝业能源管理中心项目案例分享与商机分析.pptx
计算机系统基石：深度解析与优化秘籍
深入理解计算机系统（原书第2版）是一本备受推崇的计算机科学教材，由卡耐基梅隆大学计算机学院院长，IEEE和ACM双院院士推荐，被全球超过80所顶级大学选作计算机专业教材。该书被誉为“价值超过等重量黄金”的无价资源，其内容涵盖了计算机系统的核心概念，旨在帮助读者从底层操作和体系结构的角度全面掌握计算机工作原理。
本书的特点在于其起点低但覆盖广泛，特别适合大三或大四的本科生，以及已经完成基础课程如组成原理和体系结构的学习者。它不仅提供了对计算机原理、汇编语言和C语言的深入理解，还包含了诸如数字表示错误、代码优化、处理器和存储器系统、编译器的工作机制、安全漏洞预防、链接错误处理以及Unix系统编程等内容，这些都是提升程序员技能和理解计算机系统内部运作的关键。
通过阅读这本书，读者不仅能掌握系统组件的基本工作原理，还能学习到实用的编程技巧，如避免数字表示错误、优化代码以适应现代硬件、理解和利用过程调用、防止缓冲区溢出带来的安全问题，以及解决链接时的常见问题。这些知识对于提升程序的正确性和性能至关重要，使读者具备分析和解决问题的能力，从而在计算机行业中成为具有深厚技术实力的专家。
《深入理解计算机系统（原书第2版）》是一本既能满足理论学习需求，又能提供实践经验指导的经典之作，无论是对在校学生还是职业程序员，都是提升计算机系统知识水平的理想读物。如果你希望深入探究计算机系统的世界，这本书将是你探索之旅的重要伴侣。
管理建模和仿真的文件
管理Boualem Benatallah引用此版本：布阿利姆·贝纳塔拉。管理建模和仿真。约瑟夫-傅立叶大学-格勒诺布尔第一大学，1996年。法语。NNT：电话：00345357HAL ID：电话：00345357https://theses.hal.science/tel-003453572008年12月9日提交HAL是一个多学科的开放存取档案馆，用于存放和传播科学研究论文，无论它们是否被公开。论文可以来自法国或国外的教学和研究机构，也可以来自公共或私人研究中心。L’archive ouverte pluridisciplinaire
PHP数据库操作实战：手把手教你掌握数据库操作精髓，提升开发效率
# 1. PHP数据库操作基础**
PHP数据库操作是使用PHP语言与数据库交互的基础，它允许开发者存储、检索和管理数据。本章将介绍PHP数据库操作的基本概念和操作，为后续章节奠定基础。
vue-worker
Vue Worker是一种利用Web Workers技术的 Vue.js 插件，它允许你在浏览器的后台线程中运行JavaScript代码，而不影响主线程的性能。Vue Worker通常用于处理计算密集型任务、异步I/O操作（如文件读取、网络请求等），或者是那些需要长时间运行但不需要立即响应的任务。
通过Vue Worker，你可以创建一个新的Worker实例，并将Vue实例的数据作为消息发送给它。Worker可以在后台执行这些数据相关的操作，然后返回结果到主页面上，实现了真正的非阻塞用户体验。
Vue Worker插件提供了一个简单的API，让你能够轻松地在Vue组件中管理worker实例
《ThinkingInJava》中文版：经典Java学习宝典
《Thinking in Java》中文版是由知名编程作家Bruce Eckel所著的经典之作，这本书被广泛认为是学习Java编程的必读书籍。作为一本面向对象的编程教程，它不仅适合初学者，也对有一定经验的开发者具有启发性。本书的核心目标不是传授Java平台特定的理论，而是教授Java语言本身，着重于其基本语法、高级特性和最佳实践。
在内容上，《Thinking in Java》涵盖了Java 1.2时期的大部分关键特性，包括Swing GUI框架和新集合类库。作者通过清晰的讲解和大量的代码示例，帮助读者深入理解诸如网络编程、多线程处理、虚拟机性能优化以及与其他非Java代码交互等高级概念。书中提供了320个实用的Java程序，超过15000行代码，这些都是理解和掌握Java语言的宝贵资源。
作为一本获奖作品，Thinking in Java曾荣获1995年的Software Development Jolt Award最佳书籍大奖，体现了其在业界的高度认可。Bruce Eckel不仅是一位经验丰富的编程专家，还是C++领域的权威，他拥有20年的编程经历，曾在世界各地教授对象编程，包括C++和Java。他的著作还包括Thinking in C++，该书同样广受好评。
作者不仅是一位技术导师，还是一位教育家，他善于用易于理解的方式阐述复杂的编程概念，使读者能够领略到编程中的“智慧”。与其他Java教材相比，《Thinking in Java》以其成熟、连贯、严谨的风格，赢得了读者的一致赞誉，被誉为最全面且实例恰当的编程指南，是学习Java过程中不可或缺的参考资料。
此外，本书还提供了配套的CD，包含15小时的语音授课，以及可以从Bruce Eckel的官方网站www.BruceEckel.com免费获取的源码和电子版更新，确保读者能够跟随最新的技术发展保持同步。无论你是Java新手还是进阶者，《Thinking in Java》都是一次深入探索Java世界的重要旅程。