用python爬取数据代码
时间: 2023-06-20 17:06:06 浏览: 130
爬虫抓取网页数据
以下是一个简单的 Python 网络爬虫示例,它使用 BeautifulSoup 库来解析 HTML 页面:
```python
import requests
from bs4 import BeautifulSoup
# 发送 HTTP 请求
url = 'https://www.example.com'
response = requests.get(url)
# 解析 HTML 页面
soup = BeautifulSoup(response.text, 'html.parser')
# 查找特定元素
title = soup.title
links = soup.find_all('a')
# 输出结果
print(title)
for link in links:
print(link.get('href'))
```
在这个例子中,我们使用 requests 库发送 HTTP 请求,获取网页内容。然后,使用 BeautifulSoup 库解析 HTML 页面,查找特定元素(标题和链接),最后输出结果。
阅读全文