python爬虫案例源代码

以下是一个Python爬虫案例的源代码，可以用于爬取某吧某帖子全部内容：

import requests
import re

# 定义爬取函数
def crawl_post(url):
    response = requests.get(url)
    # 使用正则表达式提取帖子内容
    pattern = r'<div class="post-content">(.*?)</div>'
    content = re.findall(pattern, response.text, re.S)
    # 保存内容到文本文件
    with open('post_content.txt', 'w', encoding='utf-8') as f:
        for c in content:
            f.write(c.strip() + '\n')

# 设置帖子的url地址
url = 'http://example.com/post/1'
crawl_post(url)

以上代码使用了requests库发送请求，并通过正则表达式提取了帖子的内容。然后将提取的内容保存到文本文件中。你可以根据实际需求修改代码中的url和文件保存路径。这只是一个简单的案例，你还可以根据需要使用其他库和方法来进行更复杂的爬取操作。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* *2* *3* [7个经典python爬虫案例代码分享](https://blog.csdn.net/BlueSocks152/article/details/131145868)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 100%"]
[ .reference_list ]