Python爬取豆瓣电影Top250

要爬取豆瓣电影Top250，可以按照以下步骤进行操作：

首先，需要搭建程序的主体框架。可以导入必要的库，如requests用于发送请求，re用于正则表达式匹配等。然后定义一个函数get_page(url)，用于获取指定URL的网页内容；另外定义一个函数get_movie_list(html)，用于解析网页内容，获取电影列表；再定义一个函数get_content(movie_url)，用于获取每部电影的详细内容。接下来就可以在主程序中使用循环来爬取每一页的电影数据了。具体实现如下所示：

import requests
from requests.exceptions import RequestException
import re

def get_page(url):
    # 发送请求，获取响应
    response = requests.get(url)
    if response.status_code == 200:
        return response.text
    return None

def get_movie_list(html):
    # 解析响应，获取电影列表
    pattern = re.compile('<a href="(.*?)".*?<span class="title">(.*?)</span>.*?'
                         '<span class="rating_num" property="v:average">(.*?)</span>', re.S)
    movie_list = re.findall(pattern, html)
    return movie_list

def get_content(movie_url):
    # 获取每部电影的详细内容
    # 这里可以继续编写代码，根据电影详情页的URL获取需要的信息

if __name__ == '__main__':
    for i in range(10):
        url = 'https://movie.douban.com/top250?start=' + str(i*25)  # 根据页数拼接URL
        html = get_page(url)  # 获取网页内容
        movie_list = get_movie_list(html)  # 解析网页内容，获取电影列表
        for movie in movie_list:
            get_content(movie<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
-  *1* *2* *3* [Python爬虫实战 | (3) 爬取豆瓣电影Top250](https://blog.csdn.net/sdu_hao/article/details/96114862)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"]
[ .reference_list ]