python爬虫抓取网页数据实例代码

Python爬虫抓取网页数据通常使用requests库获取HTML内容，然后使用BeautifulSoup库解析提取所需信息。以下是一个简单的Python爬虫示例，用于从网站上抓取页面标题：

import requests
from bs4 import BeautifulSoup

# 目标URL
url = 'https://www.example.com'

# 使用requests获取网页内容
response = requests.get(url)

# 判断请求是否成功
if response.status_code == 200:
    # 如果成功，解析HTML内容
    soup = BeautifulSoup(response.text, 'html.parser')

    # 找到并打印页面标题
    title = soup.title.string
    print('Page Title:', title)
else:
    print(f"Failed to fetch the page with status code: {response.status_code}")