Python笔记-使用requests获取网页数据及re中用正则表达式获取指定数据_头歌requests获取网页数据 - CSDN文库

5星 · 超过95%的资源 133 浏览量更新于2023-05-04 收藏 85KB PDF 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源推荐

Python笔记笔记-使用使用requests获取网页数据及获取网页数据及re中用正则表达式获取指定数据中用正则表达式获取指定数据

如下代码：

import re

import requests

class HandleLaGou(object):

def __init__(self):

self.laGou_session = requests.session()

self.header = {

'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36'

}

self.city_list = ""

#获取全国城市列表

def handle_city(self):

city_search = re.compile(r'zhaopin/">(.*?)')

city_url = "https://www.lagou.com/jobs/allCity.html"

city_result = self.handle_request(method = "GET", url = city_url)

self.city_list = city_search.findall(city_result)

def handle_request(self, method, url, data = None, info = None):

if method == "GET":

response = self.laGou_session.get(url = url, headers = self.header)

return response.text

if __name__ == '__main__':

laGou = HandleLaGou()

laGou.handle_city()

print(laGou.city_list)

pass

运行截图如下：

从中可以学到如下的知识点：

把网页数据后，可以使用notepad++先模拟下正则表达式匹配：

这里是这样的正则表达式：

zhaopin/">(.*?)

(.*?)匹配这里面任意数据，但只匹配一次。

这里的re.conpile(r'')这个r就是指Regular expression。

作者：IT1995

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余0页未读，立即下载

weixin_38737565

粉丝: 7
资源: 902

会员权益专享

图片转文字

全年可省5，000元立即开通

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈