Python爬取招聘数据
时间: 2024-01-10 17:20:18 浏览: 30
Python可以通过爬虫技术来爬取招聘数据。以下是一个简单的爬取智联招聘网站招聘信息的示例:
```python
import requests
import json
import csv
# 设置请求头
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
# 设置请求参数
params = {
'jl': '北京',
'kw': '数据分析师',
'p': '1',
}
# 发送请求
response = requests.get('https://fe-api.zhaopin.com/c/i/sou', headers=headers, params=params)
# 解析JSON数据
data = json.loads(response.text)
# 获取招聘信息列表
job_list = data['data']['results']
# 将招聘信息写入CSV文件
with open('job.csv', 'w', newline='', encoding='utf-8') as f:
writer = csv.writer(f)
writer.writerow(['岗位名称', '公司名称', '薪水', '所在城市', '所属行业', '学历要求', '工作年限'])
for job in job_list:
writer.writerow([job['jobName'], job['company']['name'], job['salary'], job['city']['display'], job['industryName'], job['eduLevel']['name'], job['workingExp']['name']])
# 输出结果
print('招聘信息已保存到job.csv文件中。')
```