爬取豆瓣电影Top250的电影名称、评分和电影链接:将结果保存到本地
时间: 2024-05-18 10:17:05 浏览: 158
您可以使用 Python 中的文件操作,将爬取的结果保存到本地文件中。以下是示例代码:
```python
import requests
from bs4 import BeautifulSoup
url = 'https://movie.douban.com/top250'
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
soup = BeautifulSoup(response.text, 'html.parser')
movies = soup.find_all('div', class_='info')
with open('douban_top250.txt', 'w', encoding='utf-8') as f:
for movie in movies:
title = movie.find('span', class_='title').text
rating = movie.find('span', class_='rating_num').text
link = movie.find('a')['href']
f.write(f'{title} {rating} {link}\n')
```
这个代码将结果保存到名为 `douban_top250.txt` 的文件中,使用 `with` 关键字可以自动关闭文件。在循环中,使用 `f.write()` 方法将每部电影的名称、评分和链接写入文件中,通过添加换行符 `\n` 可以保证每个电影信息单独占一行。
请注意,如果您的操作系统使用的是 GBK 编码,需要将 `utf-8` 改为 `gbk`。
阅读全文