写一个python爬去网页的数据存到本地桌面txt文件中
时间: 2024-06-08 07:12:53 浏览: 66
爬取壁纸网站爬虫python源码+可直接执行的exe
好的,以下是一个简单的Python爬虫程序,使用requests库获取网页内容,使用BeautifulSoup库解析网页内容,并将结果存储到本地桌面的txt文件中。
```python
import requests
from bs4 import BeautifulSoup
import os
# 目标网页的URL
url = "https://www.example.com"
# 发送请求,获取网页内容
response = requests.get(url)
# 解析网页内容
soup = BeautifulSoup(response.text, "html.parser")
# 将解析后的内容存储到txt文件中
desktop_path = os.path.join(os.path.expanduser("~"), "Desktop")
file_path = os.path.join(desktop_path, "result.txt")
with open(file_path, "w", encoding="utf-8") as f:
f.write(soup.prettify())
```
运行此程序后,将在桌面上创建一个名为result.txt的文件,并将网页内容存储到该文件中。要修改目标网页的URL,请将url变量的值更改为您要抓取的网页的URL。
阅读全文