用python爬取安房客的一页网页
时间: 2024-10-16 09:09:43 浏览: 19
用python爬取网页并导出为word文档.docx
在Python中爬取网页,通常我们会使用一些常见的库,如requests用于发送HTTP请求获取网页内容,BeautifulSoup或 lxml 用于解析HTML文档。下面是一个简单的示例,演示如何使用这些工具从安房客(anzufang.com)网站上抓取一页房源信息:
```python
import requests
from bs4 import BeautifulSoup
# 目标网页URL
url = 'https://www.anzufang.com/loupan/'
# 发送GET请求
response = requests.get(url)
# 检查请求是否成功
if response.status_code == 200:
# 解析HTML响应
soup = BeautifulSoup(response.text, 'lxml')
# 找到包含房源信息的部分,这可能会依赖于具体的网页结构
housing_info_blocks = soup.find_all('div', class_='housing-item') # 这里假设有特定class名
for block in housing_info_blocks:
title = block.find('h3', class_='title').text # 房源标题
price = block.find('span', class_='price').text # 房价
location = block.find('p', class_='location').text # 地址
print(f"标题: {title}\n价格: {price}\n地址: {location}\n")
else:
print("请求失败,状态码:", response.status_code)
阅读全文