用Python爬取大量豆瓣电影数据代码

在Python中，使用`requests`库获取网页内容，然后利用如`BeautifulSoup`或`lxml`解析HTML，可以编写一段基本的代码来抓取豆瓣电影数据。以下是一个简单的示例，演示了如何抓取电影名称和链接：

import requests
from bs4 import BeautifulSoup

# 定义目标URL
url = "https://movie.douban.com/top250"

# 发送GET请求
response = requests.get(url)

# 检查请求是否成功
if response.status_code == 200:
    # 使用BeautifulSoup解析HTML
    soup = BeautifulSoup(response.text, 'lxml')

    # 找到电影列表元素
    movie_list = soup.select('.grid_view li div.hd')

    for movie in movie_list:
        title = movie.find('a', class_='title').text  # 电影名称
        link = movie.find('a', class_='title')['href']  # 电影链接
        print(f"电影名：{title}\n链接：{link}\n")
else:
    print("请求失败")

# 提醒：实际操作时需要遵守网站Robots协议，并可能需要处理反爬虫机制

这个例子只抓取了电影标题和链接，如果你需要更多数据，比如影评、评分等，你需要找到相应的HTML标签并解析它们。