用python写一个爬虫，用于爬取去年今天的网页数据

好的，下面是一个简单的 Python 爬虫示例，可以获取去年今天的网页数据：

import requests
from datetime import datetime, timedelta

# 获取去年今天的日期
today = datetime.now()
last_year_today = today - timedelta(days=365)
date_str = last_year_today.strftime("%Y-%m-%d")

# 构造需要爬取的 URL
url = f"https://www.example.com/{date_str}"

# 发送 GET 请求获取网页数据
response = requests.get(url)

# 打印获取到的网页内容
print(response.text)

请将 `https://www.example.com/` 替换为您要爬取的网站的域名，上面的代码会自动构造出类似 `https://www.example.com/2021-10-01` 的 URL，并发送 GET 请求获取该页面的网页内容。

相关问题

用Python写一个爬虫，爬取网页文字

以下是一个简单的Python爬虫程序，可以爬取指定网页的文字并输出到控制台。

import requests
from bs4 import BeautifulSoup

url = "https://www.example.com"    # 替换为要爬取的网页地址

response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

# 找到网页中的所有文本内容
text = soup.get_text()

# 输出到控制台
print(text)

这个程序使用了`requests`库来获取网页内容，使用`BeautifulSoup`库来解析HTML文档，然后使用`soup.get_text()`方法提取文本内容，并输出到控制台。需要注意的是，这个程序只能爬取静态网页的内容，如果要爬取动态网页或者需要登录的网页，需要使用其他方法。

用python写一个爬虫，爬取网页的网址信息

当然可以！以下是一个简单的示例，使用Python的requests和BeautifulSoup库来爬取网页的网址信息：

import requests
from bs4 import BeautifulSoup

def crawl_webpage(url):
    # 发送HTTP GET请求
    response = requests.get(url)
    
    # 检查请求是否成功
    if response.status_code == 200:
        # 使用BeautifulSoup解析网页内容
        soup = BeautifulSoup(response.content, 'html.parser')
        
        # 查找所有的<a>标签
        links = soup.find_all('a')
        
        # 提取每个链接的网址信息
        for link in links:
            href = link.get('href')
            if href:
                print(href)
    else:
        print("请求失败")

# 输入要爬取的网页URL
url = input("请输入网页URL：")
crawl_webpage(url)

你可以运行这段代码，输入一个网页的URL，它会打印出该网页中所有链接的网址信息。

请注意，这只是一个简单的示例，实际的爬虫可能需要更多的处理和异常处理逻辑。此外，在爬取网页数据时，请确保你遵守网站的使用条款和法律法规，不要滥用爬虫功能。