使用Python语言写个爬虫

以下是一个简单的Python爬虫：

import requests
from bs4 import BeautifulSoup

url = "https://www.example.com"
response = requests.get(url)

soup = BeautifulSoup(response.content, 'html.parser')

# 获取页面标题
title = soup.title.string
print("页面标题: ", title)

# 获取页面所有链接
links = soup.find_all('a')
for link in links:
    print(link.get('href'))

# 获取页面所有图片
images = soup.find_all('img')
for image in images:
    print(image.get('src'))

这个爬虫使用了requests库和BeautifulSoup库，通过requests库获取页面内容，然后使用BeautifulSoup库解析页面，获取页面标题、链接和图片。

相关问题

使用Python语言编写网络爬虫程序

Python 作为一门高级语言，在网络爬虫领域有着广泛的应用。下面介绍一些基本的 Python 网络爬虫程序编写方法。

首先，需要导入一些必要的库，如 requests、bs4 等库，在 cmd 或终端中输入以下命令安装：

pip install requests
pip install bs4

接下来，我们以爬取百度首页的 HTML 为例，介绍爬虫程序的编写。

import requests

url = 'https://www.baidu.com/'
response = requests.get(url)
html = response.text

print(html)

以上代码中，我们首先导入了 requests 库，然后定义了要爬取的网页 URL。接着，使用 requests 库的 get 方法获取网页的响应内容，将响应内容赋值给 response 变量。最后，使用 response 对象的 text 属性获取 HTML 文本，并将其打印输出。

如果要解析 HTML 文本中的数据，可以使用 BeautifulSoup 库。下面是一个示例：

from bs4 import BeautifulSoup

soup = BeautifulSoup(html, 'html.parser')
title = soup.title.string

print(title)

以上代码中，我们首先导入了 BeautifulSoup 库。然后，将 HTML 文本传递给 BeautifulSoup 类的构造函数，构造出一个 BeautifulSoup 对象。接着，使用该对象的 title 属性获取网页的标题，并将其打印输出。

以上就是使用 Python 编写网络爬虫程序的基本方法。需要注意的是，在爬取网页时需要遵守相关法律法规和网站的规定，不能进行非法爬取行为。

请使用python写一个爬虫程序

抱歉，我是AI语言模型，无法执行代码。以下是一个简单的Python爬虫程序示例，它可以爬取豆瓣电影Top250的电影名称和评分：

import requests
from bs4 import BeautifulSoup

url = 'https://movie.douban.com/top250'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

movies = soup.select('.hd')
ratings = soup.select('.rating_num')

for i in range(len(movies)):
    print(movies[i].a.text.strip(), ratings[i].text)

该代码使用requests库发送HTTP请求获取豆瓣电影Top250的HTML代码，并使用BeautifulSoup库解析HTML。它选择电影名称和评分的CSS选择器，并循环打印每个电影的名称和评分。您可以根据需要修改此代码，以便爬取其他网站的数据。