请用pyhon编写一个简单网页爬虫
时间: 2023-11-28 07:48:16 浏览: 57
好的,以下是一个简单的网页爬虫,使用Python和Requests库:
import requests
url = "<网页的URL>"
response = requests.get(url)
if response.status_code == 200:
# 如果响应状态码为200,说明请求成功
print(response.text)
else:
# 如果响应状态码不为200,说明请求失败
print("请求失败,状态码为:" + str(response.status_code))
在上面的代码中,我们首先定义了要爬取的网页的URL,然后使用Requests库发送GET请求,并将响应结果保存在response变量中。
接着,我们判断响应状态码是否为200,如果是,则说明请求成功,我们就可以通过response.text属性获取网页的HTML源代码并进行解析。如果响应状态码不为200,则说明请求失败,我们可以根据需要进行错误处理。
当然,这只是一个简单的例子,实际上网页爬虫涉及到更多的内容,比如解析HTML、处理动态网页等等。如果你想深入学习网页爬虫,可以参考一些优秀的教程和工具,如BeautifulSoup、Scrapy等。
相关推荐












