python爬取链接
时间: 2023-11-17 21:07:05 浏览: 116
python爬取携程网评论.zip
5星 · 资源好评率100%
以下是使用Python爬取链接的示例代码:
```python
import requests
from bs4 import BeautifulSoup
url = 'https://www.example.com' # 替换为你要爬取的网站链接
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
links = soup.find_all('a') # 获取所有a标签
for link in links:
print(link.get('href')) # 输出链接
```
这段代码使用requests库发送HTTP请求获取网页内容,然后使用BeautifulSoup库解析HTML文档,最后获取所有a标签并输出链接。你可以将代码中的url替换为你要爬取的网站链接,然后运行代码即可。
阅读全文