能帮我用python写一个网页爬取程序吗
时间: 2023-05-27 07:02:16 浏览: 100
Python编写网页爬虫
当然可以,以下是一个简单的网页爬取程序:
```
import requests
url = 'https://www.example.com' # 要爬取的网页地址
r = requests.get(url) # 发送请求获取网页数据
print(r.text) # 输出网页内容
```
这个程序使用了 `requests` 库来发送请求并获取网页数据,然后将网页内容输出。当然,这只是一个简单的示例,实际爬取需要更多的处理和解析。如果您需要更复杂的爬虫程序,可以考虑使用 `BeautifulSoup` 等库来解析网页内容。
阅读全文