python爬取全国天气
时间: 2023-10-09 22:17:15 浏览: 103
以下是使用Python爬取全国天气的代码示例:
```python
import requests
from bs4 import BeautifulSoup
# 请求url
url = 'http://www.weather.com.cn/weather1d/101010100.shtml'
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
response.encoding = 'utf-8'
html = response.text
# 解析html
soup = BeautifulSoup(html, 'html.parser')
# 获取需要的数据
city = soup.select('.crumbs fl')[0].text.strip() # 城市
weather = soup.select('#hidden_title')[0].text # 天气
temperature = soup.select('.tem span')[0].text + '/' + soup.select('.tem i')[0].text # 温度
wind_direction = soup.select('.win span')[0].text # 风向
wind_strength = soup.select('.win i')[0].text # 风力
# 打印获取到的数据
print(city, weather, temperature, wind_direction, wind_strength)
```
以上代码中,我们首先请求了全国某个城市的天气页面,然后使用BeautifulSoup库解析html,最后通过CSS选择器获取需要的数据。在这个示例中,我们获取了城市、天气、温度、风向和风力等数据。
阅读全文