python3.9版本下编程一个例子用tkinter设计系统界面,将所输入的网站进行数据爬取(例如标题与链接),并将所爬取到的内容存入数据库中,从数据库中读取数据进行处理,用matplotlib实现数据绘图

时间: 2024-02-06 10:12:43 浏览: 22
好的,以下是一个基于Python 3.9、tkinter、BeautifulSoup、sqlite3和matplotlib的例子,实现了从指定网站爬取标题和链接,并将其存储到sqlite3数据库中,最后使用matplotlib库实现数据绘图。请注意,此例子仅供参考,具体的实现可能因网站和需求不同而有所不同。 ```python import tkinter as tk from tkinter import messagebox import requests from bs4 import BeautifulSoup import sqlite3 import matplotlib.pyplot as plt # 创建一个tkinter窗口 window = tk.Tk() window.geometry('400x300') window.title('网站数据爬取和绘图系统') # 创建标签和输入框 url_label = tk.Label(window, text='请输入网站URL:', font=('Arial', 12)) url_label.pack() url_entry = tk.Entry(window, font=('Arial', 12)) url_entry.pack() # 创建按钮和事件处理程序 def crawl_data(): # 获取用户输入的网站URL url = url_entry.get() if not url: messagebox.showerror('错误', '请输入网站URL!') return try: # 发送GET请求,获取网站内容 response = requests.get(url) response.encoding = 'utf-8' html = response.text # 解析HTML内容,获取标题和链接 soup = BeautifulSoup(html, 'html.parser') titles = [title.text for title in soup.find_all('a')] links = [link.get('href') for link in soup.find_all('a')] # 将标题和链接存储到sqlite3数据库中 conn = sqlite3.connect('data.db') c = conn.cursor() c.execute('CREATE TABLE IF NOT EXISTS website_data (title text, link text)') for i in range(len(titles)): c.execute('INSERT INTO website_data VALUES (?, ?)', (titles[i], links[i])) conn.commit() conn.close() messagebox.showinfo('提示', '成功爬取数据并存储到数据库!') except: messagebox.showerror('错误', '爬取数据失败!') def plot_data(): try: # 从sqlite3数据库中读取数据,并进行处理 conn = sqlite3.connect('data.db') c = conn.cursor() data = c.execute('SELECT * FROM website_data').fetchall() conn.close() # 统计标题出现的次数 title_counts = {} for item in data: title = item[0] if title in title_counts: title_counts[title] += 1 else: title_counts[title] = 1 # 绘制柱状图 plt.bar(range(len(title_counts)), list(title_counts.values()), align='center') plt.xticks(range(len(title_counts)), list(title_counts.keys()), rotation=90) plt.ylabel('标题出现次数') plt.title('网站数据统计') plt.show() except: messagebox.showerror('错误', '绘制数据图表失败!') crawl_button = tk.Button(window, text='爬取数据', font=('Arial', 12), command=crawl_data) crawl_button.pack() plot_button = tk.Button(window, text='绘制数据图表', font=('Arial', 12), command=plot_data) plot_button.pack() # 启动窗口 window.mainloop() ``` 在这个例子中,我们首先创建了一个tkinter窗口,并添加了一个标签和一个输入框,用于让用户输入要爬取的网站URL。然后,我们创建了两个按钮,分别用于爬取数据和绘制数据图表。 在按钮的事件处理程序中,我们首先获取用户输入的网站URL,并发送GET请求,获取网站内容。然后,我们使用BeautifulSoup库解析HTML内容,获取标题和链接,并将其存储到sqlite3数据库中。 在绘制数据图表时,我们首先从sqlite3数据库中读取数据,并进行处理。在这个例子中,我们使用一个字典来统计每个标题出现的次数,并使用matplotlib库绘制了一个柱状图。 最后,我们启动了tkinter窗口,让用户输入网站URL,并可以通过按钮来爬取数据和绘制数据图表。 希望这个例子对你有所帮助!

相关推荐

rar
rar

最新推荐

recommend-type

基于python的Tkinter编写登陆注册界面

主要为大家详细介绍了基于python的Tkinter编写登陆注册界面,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
recommend-type

Python3.7+tkinter实现查询界面功能

主要介绍了Python3.7+tkinter实现查询界面功能,本文通过实例代码给大家介绍的非常详细,具有一定的参考借鉴价值,需要的朋友可以参考下
recommend-type

解决python tkinter界面卡死的问题

今天小编就为大家分享一篇解决python tkinter界面卡死的问题,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
recommend-type

Python使用tkinter库实现文本显示用户输入功能示例

主要介绍了Python使用tkinter库实现文本显示用户输入功能,结合实例形式分析了tkinter库获取用户输入及控件显示相关操作技巧,需要的朋友可以参考下
recommend-type

在python tkinter界面中添加按钮的实例

今天小编就为大家分享一篇在python tkinter界面中添加按钮的实例,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
recommend-type

zigbee-cluster-library-specification

最新的zigbee-cluster-library-specification说明文档。
recommend-type

管理建模和仿真的文件

管理Boualem Benatallah引用此版本:布阿利姆·贝纳塔拉。管理建模和仿真。约瑟夫-傅立叶大学-格勒诺布尔第一大学,1996年。法语。NNT:电话:00345357HAL ID:电话:00345357https://theses.hal.science/tel-003453572008年12月9日提交HAL是一个多学科的开放存取档案馆,用于存放和传播科学研究论文,无论它们是否被公开。论文可以来自法国或国外的教学和研究机构,也可以来自公共或私人研究中心。L’archive ouverte pluridisciplinaire
recommend-type

【实战演练】MATLAB用遗传算法改进粒子群GA-PSO算法

![MATLAB智能算法合集](https://static.fuxi.netease.com/fuxi-official/web/20221101/83f465753fd49c41536a5640367d4340.jpg) # 2.1 遗传算法的原理和实现 遗传算法(GA)是一种受生物进化过程启发的优化算法。它通过模拟自然选择和遗传机制来搜索最优解。 **2.1.1 遗传算法的编码和解码** 编码是将问题空间中的解表示为二进制字符串或其他数据结构的过程。解码是将编码的解转换为问题空间中的实际解的过程。常见的编码方法包括二进制编码、实数编码和树形编码。 **2.1.2 遗传算法的交叉和
recommend-type

openstack的20种接口有哪些

以下是OpenStack的20种API接口: 1. Identity (Keystone) API 2. Compute (Nova) API 3. Networking (Neutron) API 4. Block Storage (Cinder) API 5. Object Storage (Swift) API 6. Image (Glance) API 7. Telemetry (Ceilometer) API 8. Orchestration (Heat) API 9. Database (Trove) API 10. Bare Metal (Ironic) API 11. DNS
recommend-type

JSBSim Reference Manual

JSBSim参考手册,其中包含JSBSim简介,JSBSim配置文件xml的编写语法,编程手册以及一些应用实例等。其中有部分内容还没有写完,估计有生之年很难看到完整版了,但是内容还是很有参考价值的。