爬取网易公开课的课程列表并且将数据导入一个表格

爬取网易公开课的课程列表并将其导入表格，通常涉及网络抓取技术，可以使用Python的库如BeautifulSoup、requests等配合pandas来进行操作。以下是大致步骤：

1. **获取网页内容**：
- 使用`requests.get('https://open.163.com/' + 部分课程URL)`请求目标页面，获取HTML源码。

2. **解析HTML**：
- 使用BeautifulSoup解析HTML，找到包含课程信息的部分。例如，课程标题、链接等可能会在特定class或id下。

from bs4 import BeautifulSoup
import requests

url = 'https://open.163.com/course/list?catId=1'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

3. **提取数据**：
- 根据解析后的HTML结构，提取出需要的信息，如课程名称、链接等，并存储到list或字典中。

4. **创建表格**：
- 使用pandas DataFrame来构建表格，将提取的数据列名设置为标题，然后添加数据。

import pandas as pd

data = []  # 存放课程信息的容器
for course_element in soup.find_all('div', class_='course-item'):  # 或者其他选择器
    title = course_element.find('h3').text
    link = course_element.find('a')['href']
    data.append({'课程名': title, '链接': link})

df = pd.DataFrame(data)

5. **保存表格**：
- 最后，使用pandas的to_csv()函数将DataFrame保存为CSV文件，或者其他格式如Excel。

df.to_csv('网易公开课课程列表.csv', index=False)