python爬取网易云课堂
时间: 2023-11-09 15:00:14 浏览: 277
python爬取网易云课堂在线课程并保存到Excel 源码
可以使用Python中的requests和BeautifulSoup库来爬取网易云课堂的数据。首先,需要使用requests库发送HTTP请求获取网页内容,然后使用BeautifulSoup库解析网页内容,提取所需的数据。
以下是一个简单的示例代码,可以爬取网易云课堂中的课程名称和价格:
```python
import requests
from bs4 import BeautifulSoup
url = 'https://study.163.com/category/480000003065009'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
courses = soup.find_all('div', class_='j-href ga-click')
for course in courses:
name = course.find('h3', class_='g-bd f-thide2').text.strip()
price = course.find('span', class_='shoujia').text.strip()
print(name, price)
```
阅读全文