利用Python爬取虎扑球员信息使用openpyxl库储存至execl及可视化
时间: 2024-01-26 20:01:40 浏览: 111
好的,我可以回答你的问题。首先,你需要使用Python爬取虎扑网站上的球员信息。你可以使用requests和BeautifulSoup库来完成这个任务。具体地,你需要发送HTTP请求获取虎扑网站上的球员信息页面,然后使用BeautifulSoup库解析HTML页面,提取出需要的球员信息。
接下来,你需要使用openpyxl库将球员信息储存至Excel文件中。你可以创建一个新的Excel文件,并在其中添加一个工作表,然后使用openpyxl库提供的API将球员信息逐行写入Excel文件中。
最后,你可以使用Matplotlib库来可视化球员信息。你可以根据需要绘制各种图表,例如直方图、散点图等。
下面是一个简单的示例代码,它可以爬取虎扑网站上的NBA球员信息,并将其储存至Excel文件和可视化:
```python
import requests
from bs4 import BeautifulSoup
from openpyxl import Workbook
import matplotlib.pyplot as plt
# 发送HTTP请求获取虎扑网站上的NBA球员信息页面
url = 'https://nba.hupu.com/players'
response = requests.get(url)
# 解析HTML页面,提取出需要的球员信息
soup = BeautifulSoup(response.text, 'html.parser')
table = soup.find('table', class_='players_table')
rows = table.find_all('tr')[1:]
# 创建一个新的Excel文件,并在其中添加一个工作表
workbook = Workbook()
worksheet = workbook.active
worksheet.title = 'NBA Players'
# 将球员信息逐行写入Excel文件中
for row in rows:
cells = row.find_all('td')
player = cells[0].text.strip()
team = cells[1].text.strip()
age = int(cells[2].text.strip())
height = int(cells[3].text.strip())
weight = int(cells[4].text.strip())
worksheet.append([player, team, age, height, weight])
# 保存Excel文件
workbook.save('nba_players.xlsx')
# 可视化球员信息
ages = worksheet['C'][1:]
heights = worksheet['D'][1:]
weights = worksheet['E'][1:]
plt.subplot(2, 2, 1)
plt.hist(ages, bins=20)
plt.title('Age Distribution')
plt.subplot(2, 2, 2)
plt.scatter(heights, weights)
plt.title('Height vs Weight')
plt.subplot(2, 2, 3)
plt.boxplot(ages)
plt.title('Age Boxplot')
plt.subplot(2, 2, 4)
plt.boxplot([heights, weights])
plt.title('Height and Weight Boxplot')
plt.tight_layout()
plt.show()
```
注意,这只是一个简单的示例代码,你需要根据实际需求进行修改和完善。另外,为了避免被反爬虫机制封禁,你需要添加合适的请求头和延时等措施。
阅读全文