如何使用爬虫技术将网页上的图片下载并保存到本地计算机？

使用爬虫技术下载网页上的图片通常涉及以下几个步骤：

1. **选择合适的库**：Python有许多库可以帮助我们完成这个任务，比如BeautifulSoup（用于解析HTML文档）和requests（发送HTTP请求）。PIL（Python Imaging Library）或其分支Pillow也用于处理图片。

2. **分析网页结构**：使用`requests.get(url)`获取网页内容，然后用BeautifulSoup解析HTML，找到所有包含图片链接的元素。常见的图片标签是`<img>`，它的`src`属性通常指向图片地址。

3. **提取图片URL**：从HTML解析结果中提取出图片的URL，这通常是每个`<img>`标签的`src`属性值。

4. **下载图片**：对于每个图片URL，使用`response = requests.get(img_url)`获取图片数据，然后使用PIL的`Image.open()`方法加载图片，并设置目标保存路径，调用`save()`方法保存图片。

5. **批量处理**：如果有多张图片，可以将上述过程放入循环中，对每一张图片都进行同样的操作。

6. **异常处理**：网络请求可能会失败，所以要添加适当的错误处理，如检查是否成功获取响应、图片是否存在等。

7. **组织文件名**：为了方便管理，可以根据需要给图片命名，例如取自网页标题、URL的一部分或者自增序号。

import requests
from bs4 import BeautifulSoup
from PIL import Image

def download_images(url):
    response = requests.get(url)
    soup = BeautifulSoup(response.text, 'html.parser')
    
    img_tags = soup.find_all('img') # 找到所有的<img>标签
    
    for img_tag in img_tags:
        img_url = img_tag['src']
        try:
            with requests.get(img_url, stream=True) as img_response:
                img_content = img_response.content
                filename = f"image_{img_tag['alt'] or img_url.split('/')[-1]}" # 使用alt属性作为默认名称，如果没有则使用URL
                with open(filename, 'wb') as file:
                    file.write(img_content)
        except Exception as e:
            print(f"Error downloading {img_url}: {e}")

# 使用函数
download_images("http://example.com")  # 替换为你想要抓取图片的网站地址