用python爬取关键字数据
时间: 2023-09-22 10:10:43 浏览: 206
python关键字提取算法
以下是一个简单的Python爬虫示例,用于从Google搜索中提取关键字数据:
```python
import requests
from bs4 import BeautifulSoup
# 设置搜索关键字
keyword = "python"
# 构建搜索URL
url = "https://www.google.com/search?q=" + keyword
# 发出请求并解析HTML
response = requests.get(url)
soup = BeautifulSoup(response.text, "html.parser")
# 提取搜索结果
results = soup.find_all("div", class_="BNeawe")
# 输出关键字数据
for result in results:
print(result.text)
```
在这个例子中,我们首先设置了搜索关键字为“python”,然后构建了一个搜索URL。接下来,我们使用Python库 requests 发出HTTP请求,并使用BeautifulSoup解析HTML响应。最后,我们使用find_all方法提取搜索结果,并输出关键字数据。
阅读全文