我需要一段Python爬虫的通用代码
时间: 2023-09-05 17:13:57 浏览: 84
python 爬虫代码
好的,这是一段通用的Python爬虫代码,可以根据需求进行修改:
``` python
import requests
from bs4 import BeautifulSoup
url = "https://www.example.com"
response = requests.get(url)
soup = BeautifulSoup(response.content, "html.parser")
#查找需要的标签
tags = soup.find_all("a")
for tag in tags:
# 查找标签的文本内容
print(tag.text)
```
请问这符合您的要求吗?
阅读全文