用python爬取二手车数据

爬取二手车数据需要先确定要爬取的网站。一些常见的二手车网站包括：

- 淘车网：https://www.taoche.com/
- 瓜子二手车：https://www.guazi.com/
- 优信二手车：https://www.xin.com/
- 车易拍：https://www.cheyipai.com/

下面以爬取瓜子二手车的数据为例，介绍如何用 Python 实现爬取。

1. 准备工作

需要安装 requests 和 BeautifulSoup 库，可以使用 pip 进行安装。

2. 发送请求获取页面源码

import requests

url = 'https://www.guazi.com/www/buy'
response = requests.get(url)
html = response.text

3. 解析页面源码

使用 BeautifulSoup 库解析页面源码，可以方便地提取数据。

from bs4 import BeautifulSoup

soup = BeautifulSoup(html, 'html.parser')

# 获取车辆信息列表
car_list = soup.find_all('div', class_='carlist')

for car in car_list:
    # 获取车辆详细信息
    title = car.find('h2', class_='t').text.strip()
    price = car.find('div', class_='t-price').find('p', class_='t-price-new').text.strip()
    mileage = car.find('div', class_='t-i').find_all('p')[1].text.strip()
    year = car.find('div', class_='t-i').find_all('p')[0].text.strip()

    # 输出车辆信息
    print(title, price, mileage, year)

4. 翻页

瓜子二手车的数据是分页的，需要翻页才能获取更多的数据。可以通过修改 URL 中的参数实现翻页。

import requests
from bs4 import BeautifulSoup

for page in range(1, 11):
    url = f'https://www.guazi.com/www/buy/o{page}/#bread'
    response = requests.get(url)
    html = response.text
    soup = BeautifulSoup(html, 'html.parser')

    car_list = soup.find_all('div', class_='carlist')

    for car in car_list:
        # ...

这样就可以爬取瓜子二手车的数据了。不过需要注意的是，爬取网站数据时需要遵守网站的 robots.txt 规定，不要过于频繁地请求数据，否则可能会被网站封禁 IP。