pycharm爬虫代码案例
时间: 2023-10-15 15:28:51 浏览: 135
Python爬虫示例代码
3星 · 编辑精心推荐
以下是一个使用 PyCharm 编写的简单爬虫代码案例:
```python
import requests
from bs4 import BeautifulSoup
# 发送 HTTP 请求获取数据
url = 'https://www.example.com'
response = requests.get(url)
# 解析 HTML 数据
soup = BeautifulSoup(response.text, 'html.parser')
links = soup.find_all('a')
# 遍历所有链接并打印
for link in links:
print(link.get('href'))
```
这个代码会向指定的 URL 发送 HTTP 请求,然后使用 BeautifulSoup 库解析 HTML 数据。最后,它会遍历所有的链接并打印它们的地址。在 PyCharm 中运行这个代码非常简单,只需要创建一个 Python 项目,然后将这个代码复制到 main.py 文件中。然后点击运行按钮即可执行代码。
阅读全文