编写程序使用python爬取boss招聘信息
时间: 2023-11-18 20:05:53 浏览: 85
数据爬虫+python+爬取招聘网站有关信息+帮助更好的搜索求职信息
可以使用Python中的requests和BeautifulSoup库来爬取BOSS招聘信息。以下是一个简单示例:
```python
import requests
from bs4 import BeautifulSoup
url = 'https://www.zhipin.com/c100010000/?query=python&page=1&ka=page-1'
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
soup = BeautifulSoup(response.text, 'html.parser')
job_list = soup.find_all('div', class_='job-primary')
for job in job_list:
job_name = job.find('div', class_='job-title').text.strip()
job_salary = job.find('span', class_='red').text.strip()
job_company = job.find('div', class_='company-text').a.text.strip()
job_location = job.find('div', class_='job-tags').span.text.strip()
print(job_name, job_salary, job_company, job_location)
```
上述代码将爬取BOSS招聘中关于Python的第一页招聘信息,并输出职位名称、薪资、公司名称、工作地点。你可以根据自己的需求修改代码以爬取更多信息。
阅读全文