Python使用使用requests及及BeautifulSoup构建爬虫实例代码构建爬虫实例代码
主要介绍了Python使用requests及BeautifulSoup构建爬虫,介绍了具体操作步骤和实例代码等相关内容,小编
觉得还是挺不错的,这里分享给大家,需要的朋友可以参考下
本文研究的主要是Python使用requests及BeautifulSoup构建一个网络爬虫,具体步骤如下。
功能说明功能说明
在Python下面可使用requests模块请求某个url获取响应的html文件,接着使用BeautifulSoup解析某个html。
案例案例
假设我要http://maoyan.com/board/4猫眼电影的top100电影的相关信息,如下截图:
获取电影的标题及url。
安装安装requests和和BeautifulSoup
使用pip工具安装这两个工具。
pip install requests
评论0