python3爬虫 下一页

在 Python3 中，你可以使用爬虫库（如 requests、BeautifulSoup）来爬取网页数据，并通过解析 HTML 查找和访问下一页的链接。以下是一个示例代码：

import requests
from bs4 import BeautifulSoup

# 设置初始页面的 URL
url = "https://example.com/page1"

while url:
    # 发送 GET 请求获取页面内容
    response = requests.get(url)

    # 解析 HTML
    soup = BeautifulSoup(response.text, "html.parser")

    # 处理当前页面的数据
    # ...

    # 查找下一页的链接
    next_link = soup.find("a", text="下一页")

    if next_link:
        # 构造下一页的完整 URL
        next_url = "https://example.com" + next_link["href"]
        url = next_url
    else:
        url = None

上述代码通过循环爬取每一页的数据，直到没有下一页为止。你可以根据网页的具体结构和下一页链接的标识进行适当的修改。在处理当前页面的数据部分，你可以根据需要提取所需的信息。

请注意，这只是一个示例，实际的网页结构和爬取逻辑可能会有所不同。另外，要确保你遵守网站的使用规范和法律法规。

希望这对你有帮助！如果还有其他问题，请随时提问。