python爬取途牛旅游网景点信息
时间: 2023-06-22 13:38:47 浏览: 337
好的,您可以使用 Python 爬取途牛旅游网景点信息。以下是一个简单的爬虫示例代码,可以帮助您进行参考:
```python
import requests
from bs4 import BeautifulSoup
url = 'https://s.tuniu.com/search_complex/whole-sichuan-0-%E6%97%85%E6%B8%B8%E6%99%AF%E7%82%B9/1/'
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
soup = BeautifulSoup(response.text, 'html.parser')
items = soup.select('.search-list .item')
for item in items:
title = item.select_one('.title a').text.strip()
price = item.select_one('.price em').text.strip()
print(title, price)
```
这段代码会爬取途牛旅游网四川省的旅游景点信息。您需要根据您需要爬取的信息的具体位置和标签来修改代码。同时,注意爬虫的合法性,不要频繁请求网站,避免对网站造成负担。
阅读全文