python爬取数据写入txt文件 代码实现

您好，以下是回答您的问题：

Python 爬取数据并写入 txt 文件的代码实现：

import requests

url = 'http://example.com'  # 网页地址
response = requests.get(url)  # 发送 GET 请求
content = response.text  # 获取网页内容

with open('data.txt', 'w', encoding='utf-8') as f:
    f.write(content)  # 将网页内容写入 txt 文件

以上代码会将指定网页的内容爬取下来，并写入名为 `data.txt` 的 txt 文件中。您可以根据实际需求修改代码中的网页地址和文件名。

相关问题

python爬取网站数据写入TXT，并循环爬取

好的，可以参考以下代码实现：

import requests
from bs4 import BeautifulSoup
import time

# 定义爬取的URL
url = "https://www.example.com"

# 循环爬取5次
for i in range(5):
    # 发送请求
    response = requests.get(url)
    # 使用BeautifulSoup解析网页内容
    soup = BeautifulSoup(response.text, 'html.parser')
    # 获取需要爬取的数据
    data = soup.find_all('div', class_='data')
    # 将数据写入TXT文件中
    with open('data.txt', 'a', encoding='utf-8') as f:
        for d in data:
            f.write(d.text + '\n')
    # 间隔一秒再进行下一次爬取
    time.sleep(1)

在上述代码中，我们定义了一个URL，然后循环爬取5次。在每次爬取中，我们发送请求并使用BeautifulSoup解析网页内容，获取需要爬取的数据。然后将数据写入TXT文件中，并间隔一秒再进行下一次爬取。你可以根据自己的需要修改代码中的URL、数据获取方式、循环次数等参数。

python爬取网站数据写入TXT,并循环爬取

好的，我可以帮您解决这个问题。

首先，您需要使用Python中的requests和beautifulsoup库，requests库用于爬取网站数据，beautifulsoup库用于解析网站数据。

下面是一个简单的示例代码，可以爬取一个网站的数据并将其写入txt文件中：

import requests
from bs4 import BeautifulSoup

url = 'http://example.com'
response = requests.get(url)
soup = BeautifulSoup(response.content, 'html.parser')

# 将网站数据写入txt文件中
with open('example.txt', 'w', encoding='utf-8') as f:
    f.write(soup.prettify())

# 循环爬取
while True:
    # 在此处编写您的代码，可以使用time库控制爬取数据的时间间隔
    pass

在以上代码中，我们首先使用requests库获取网站数据，然后使用beautifulsoup库解析网站数据。接着，我们将网站数据写入txt文件中。最后，我们使用一个无限循环来实现循环爬取网站数据的功能。您可以在循环中添加您需要的代码，例如控制爬取数据的时间间隔等。

希望这可以帮助您解决问题。