使用python中requests和BeautifulSoup库对玉林当地8-15天的天气进行爬取
时间: 2024-06-08 09:09:58 浏览: 79
python天气数据的爬取
好的,下面是一个简单的示例代码:
```python
import requests
from bs4 import BeautifulSoup
# 设置请求头,模拟浏览器访问
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
# 构造请求url
url = 'http://www.tianqihoubao.com/weather/yulin-2423/'
# 发送请求
response = requests.get(url, headers=headers)
# 解析响应内容
soup = BeautifulSoup(response.text, 'html.parser')
# 获取天气信息表格
table = soup.find('table', class_='b')
# 遍历表格中的每一行,获取每天的天气信息
for tr in table.find_all('tr'):
# 获取日期
date = tr.find('td', class_='tc').text.strip()
# 获取天气状况
weather = tr.find('td', class_='tc').find_next_sibling('td').text.strip()
# 获取最高温度和最低温度
temperature = tr.find_all('td', class_='tr')
max_temperature = temperature[0].text.strip()
min_temperature = temperature[1].text.strip()
# 打印每天的天气信息
print(date, weather, max_temperature, min_temperature)
```
以上代码中,我们首先通过requests库发送请求,然后使用BeautifulSoup库对响应内容进行解析。接着,我们找到天气信息表格,并遍历表格中的每一行,获取每天的天气信息。最后,我们打印出每天的天气信息。你可以根据自己的需要对代码进行修改,例如获取更多的天气信息等。
阅读全文