python爬虫写入文件
时间: 2023-07-27 12:06:47 浏览: 151
python爬虫python-file-transfer.rar
在 Python 中,可以使用 `open()` 函数创建文件并写入数据。下面是一个简单的示例代码,演示如何将爬取到的数据写入到文件中:
```python
import requests
# 爬取数据
response = requests.get('https://www.example.com')
data = response.text
# 将数据写入文件
with open('data.txt', 'w', encoding='utf-8') as f:
f.write(data)
```
在上面的代码中,我们使用 `requests` 库获取了一个网站的数据,并将数据保存在了 `data` 变量中。接着,我们使用 `open()` 函数创建一个名为 `data.txt` 的文件,并将 `data` 写入到文件中。最后,使用 `with` 语句来自动关闭文件。
注意,在使用 `open()` 函数时,我们指定了第二个参数为 `'w'`,表示以写入模式打开文件。如果文件不存在,则会新建一个文件。如果文件已经存在,则会覆盖原来的文件内容。同时,我们还指定了第三个参数为 `'utf-8'`,表示使用 UTF-8 编码来写入文件。
希望这个示例能够对你有所帮助。
阅读全文