python爬虫爬取电影信息一页
时间: 2023-05-25 11:01:27 浏览: 116
python爬虫,爬取网上电影资源
A:
可以使用Python的requests库和BeautifulSoup库,以下是一个示例代码:
```python
import requests
from bs4 import BeautifulSoup
url = "https://movie.douban.com/top250"
response = requests.get(url)
soup = BeautifulSoup(response.text, "html.parser")
movies = soup.find_all("div", class_="hd")
for movie in movies:
title = movie.a.span.text.strip()
link = movie.a["href"]
print(title, link)
```
该代码可以爬取豆瓣电影排行榜top250的电影名称和链接,输出结果如下:
```
肖申克的救赎 https://movie.douban.com/subject/1292052/
控方证人 https://movie.douban.com/subject/1296141/
美丽人生 https://movie.douban.com/subject/1292063/
阿甘正传 https://movie.douban.com/subject/1292720/
霸王别姬 https://movie.douban.com/subject/1291546/
...
```
阅读全文