用python写一个爬取网页文件的代码

要用Python编写一个简单的网页文件爬取代码，你可以使用`requests`库来发送网络请求，以及`BeautifulSoup`库来解析HTML。以下是一个基本的示例代码，展示了如何爬取一个网页并打印其HTML内容。

首先，确保你已经安装了所需的库。如果没有安装，可以使用pip来安装：

pip install requests beautifulsoup4

然后，你可以使用以下Python代码来爬取网页：

import requests
from bs4 import BeautifulSoup

# 目标URL
url = 'http://example.com/'

# 发送GET请求
response = requests.get(url)

# 检查请求是否成功
if response.status_code == 200:
    # 使用BeautifulSoup解析HTML内容
    soup = BeautifulSoup(response.text, 'html.parser')
    
    # 打印整个页面的HTML内容
    print(soup.prettify())
    
    # 可以进一步提取页面中的特定信息，比如所有的段落
    paragraphs = soup.find_all('p')
    for p in paragraphs:
        print(p.text)
else:
    print('请求失败，状态码：', response.status_code)

这个示例代码首先发送一个GET请求到指定的URL，然后检查响应状态码确认请求是否成功。如果成功，它将使用BeautifulSoup解析HTML内容，并打印出整个页面的HTML。此外，它还演示了如何提取并打印出页面中所有段落元素的文本。