python爬虫，爬取贝壳网数据简单案例

Python爬虫是一种通过自动化的方式从网站上抓取数据的技术。针对贝壳网这样的房产信息平台，我们可以使用Python的requests库获取网页内容，然后BeautifulSoup或Scrapy等库解析HTML，提取我们需要的数据。

下面是一个简单的Python爬虫示例，用于爬取贝壳网（beijia.com）上的房源列表页信息，比如房屋标题、价格和地址。请注意，实际操作时需要遵守网站的robots.txt规则，并尊重版权政策：

import requests
from bs4 import BeautifulSoup

# 定义目标URL
url = 'https://bj.beijia.com/'

# 发送GET请求
response = requests.get(url)

# 使用BeautifulSoup解析HTML
soup = BeautifulSoup(response.text, 'html.parser')

# 找到包含房源信息的元素（这通常是class或id特定的部分）
houses = soup.find_all('div', class_='list-item')  # 根据实际情况调整选择器

# 遍历每个房源，提取并打印相关信息
for house in houses:
    title = house.find('h3', class_='title').text.strip()
    price = house.find('span', class_='price').text.strip()
    address = house.find('p', class_='location').text.strip()

    print(f"标题：{title}\n价格：{price}\n地址：{address}\n---")

# 提醒：实际操作时请确保合法性，不要对网站造成过大负担