使用python 爬取网页标题并设为文本文档标题
时间: 2023-12-29 12:06:14 浏览: 104
Python爬取博客的所有文章并存为带目录的word文档.rar
可以使用Python中的requests库和BeautifulSoup库来爬取网页标题,并将其设置为文本文档标题。
首先,需要安装requests库和BeautifulSoup库。可以使用以下命令进行安装:
```
pip install requests
pip install beautifulsoup4
```
然后,可以使用以下代码来实现:
```python
import requests
from bs4 import BeautifulSoup
# 发送请求
url = 'https://www.example.com'
response = requests.get(url)
# 解析网页内容
soup = BeautifulSoup(response.text, 'html.parser')
# 获取网页标题
title = soup.title.string
# 创建文本文档并将标题设置为文件名
with open(title + '.txt', 'w') as f:
f.write('This is ' + title + ' document')
```
这段代码先发送请求获取网页内容,然后使用BeautifulSoup库解析网页内容。接着,获取网页标题并将其赋值给变量title。最后,使用open函数创建一个文本文档,并将标题设置为文件名。将文本写入文件中,完成操作。
阅读全文