用selenium写爬虫爬取https://bangumi.tv/subject/317613
时间: 2023-06-19 10:06:15 浏览: 202
好的,以下是用Python和Selenium爬取https://bangumi.tv/subject/317613的示例代码:
首先,安装Selenium库:
```python
pip install selenium
```
然后,你需要下载chromedriver。可以通过以下链接下载对应版本的chromedriver:
https://sites.google.com/a/chromium.org/chromedriver/downloads
下载完成后,将chromedriver.exe文件放在你的Python项目目录下(或者你可以指定chromedriver.exe文件的路径)。
接下来就是代码部分了:
```python
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
# 创建selenium的webdriver
driver = webdriver.Chrome() # 如果你指定了chromedriver.exe文件的路径,需要传入executable_path参数。
# 打开网页
driver.get("https://bangumi.tv/subject/317613")
# 获取标题
title = driver.find_element_by_css_selector("#headerSubject h1").text
print("标题:", title)
# 获取评分
rating = driver.find_element_by_css_selector(".global_score .number").text
print("评分:", rating)
# 获取简介
description = driver.find_element_by_css_selector("#subject_summary .subject_summary").text
print("简介:", description)
# 关闭浏览器
driver.quit()
```
这段代码会打开Chrome浏览器,并访问https://bangumi.tv/subject/317613。然后,它会使用Selenium的find_element_by_css_selector方法来找到网页中的标题、评分和简介,并输出到控制台中。最后,它会关闭浏览器。
当然,这只是一个简单的示例,你可以根据需要对代码进行修改。
阅读全文