plt = re.findall(r'\"view_price\"\:\"[\d\.]*\"',html) tlt = re.findall(r'\"raw_title\"\:\".*?\"',html)
时间: 2023-08-22 12:09:22 浏览: 91
在给定的代码中,使用re.findall()函数和正则表达式从一个名为html的字符串中提取特定模式的数据。
1. 对于变量plt,使用正则表达式r'\"view_price\"\:\"[\d\.]*\"'。该正则表达式匹配以"view_price":"开头,后面跟着0个或多个数字或小数点(.)的字符串。在给定的html字符串中,该正则表达式会提取所有符合该模式的数据,并返回一个包含所有匹配项的列表。
2. 对于变量tlt,使用正则表达式r'\"raw_title\"\:\".*?\"'。该正则表达式匹配以"raw_title":"开头,后面跟着任意字符(除换行符)的字符串,并以"结尾。使用非贪婪模式.*?确保尽可能少地匹配字符。在给定的html字符串中,该正则表达式会提取所有符合该模式的数据,并返回一个包含所有匹配项的列表。
最终,plt和tlt将分别包含所有匹配到的"view_price"和"raw_title"字段的数据。
相关问题
plt = re.findall(r'\"view_price\"\:\"[\d\.]*\"', html)
plt = re.findall(r'\"view_price\"\:\"[\d\.]*\"', html)这句话是用来从html中提取出价格的。它使用了正则表达式r'\"view_price\"\:\"[\d\.]*\"',这个表达式可以匹配到以"view_price":"数字"的形式表示的价格信息。其中,[\d\.]表示数字和小数点的任意组合,*表示匹配0个或多个该组合。通过该正则表达式,可以提取出所有的价格信息并放入plt列表中。
import requests # 导入网页请求库 from bs4 import BeautifulSoup # 导入网页解析库 import pandas as pd import numpy as np import re import matplotlib.pyplot as plt from pylab import mpl danurl=[]; def get_danurl(surl): r=requests.get(surl) r.encoding='utf-8' demo=r.text soup=BeautifulSoup(demo,"html.parser") wangzhi=soup.find_all('a',string=re.compile('杭州市小客车增量指标竞价情况')) list3=' '.join('%s' %id for id in wangzhi) res_url=r'href="(.*?)"' alink = re.findall(res_url, list3, re.I | re.S | re.M) return alink def get_page(url): mydict={} r=requests.get(url) r.encoding='utf-8' demo=r.text #print(demo) soup=BeautifulSoup(demo,"html.parser") try: duan2=soup.find_all('p',class_="p")[0].text duan3=soup.find_all('p',class_="p")[2].text pattern3 = re.compile(r'(?<=个人)\d+.?\d*') gerenbj=pattern3.findall(duan2)[0] jingjiariqi=soup.find_all('p',class_="p")[0].text.split('。')[0] except IndexError: duan2=soup.find_all('p',class_="p")[2].text duan3=soup.find_all('p',class_="p")[4].text pattern3 = re.compile(r'(?<=个人)\d+.?\d*') gerenbj=pattern3.findall(duan2)[0] jingjiariqi=soup.find_all('p',class_="p")[2].text.split('。')[0] duan1=soup.find_all('p')[1].text pattern1 = re.compile(r'(?<=个人增量指标)\d+.?\d*') gerenzb=pattern1.findall(duan1)[0] pattern2 = re.compile(r'(?<=单位增量指标)\d+.?\d*') danweizb=pattern2.findall(duan1)[0] pattern4 = re.compile(r'(?<=单位)\d+.?\d*') danweibj=pattern4.findall(duan2)[0] pattern5 = re.compile(r'(?<=个人)\d+.?\d*') mingerencjj=pattern5.findall(duan3)[0] avegerencjj=pattern5.findall(duan3)[1] pattern6 = re.compile(r'(?<=单位)\d+.?\d*') mindanweicjj=pattern6.findall(duan3)[0] avedanweicjj=pattern6.findall(duan3)[1] pattern7 = re.compile(r'(?<=成交)\d+.?\d*') mingerencjs=pattern7.findall(duan3)[0] mindanweicjs=pattern7.findall(duan3)[1] 解释代码
这段代码是用来爬取杭州市小客车增量指标竞价情况的数据。首先导入了requests库和BeautifulSoup库,用于进行网页请求和解析。然后定义了一个函数`get_danurl`,用于获取竞价情况网页的链接。函数中首先发送一个GET请求获取网页内容,然后使用BeautifulSoup进行解析,找到所有包含"杭州市小客车增量指标竞价情况"文本的链接,并通过正则表达式提取出链接地址。接下来是`get_page`函数,用于获取具体页面的数据。函数中同样发送一个GET请求获取网页内容,并使用BeautifulSoup进行解析。然后通过一些规则提取出所需的数据,如个人增量指标、单位增量指标、个人竞价、单位竞价、个人成交、单位成交等。最后返回一个包含这些数据的字典。
阅读全文