给我一个完整的python爬取天猫数据
时间: 2024-04-22 15:27:06 浏览: 103
tamll_spider:天猫商城数据爬取,python简单无框架源码附带数据库
好的,以下是爬取天猫数据的Python代码:
```python
import requests
from bs4 import BeautifulSoup
url = "https://list.tmall.com/search_product.htm?q=手机"
html = requests.get(url).text
soup = BeautifulSoup(html, "html.parser")
items = soup.find_all("div", {"class": "product-item"})
for item in items:
name = item.find("p", {"class": "product-title"}).text.strip()
price = item.find("p", {"class": "product-price"}).text.strip()
print(name + " - " + price)
```
这段代码是爬取天猫搜索页面中手机产品的名称和价格,你可以根据自己的需求修改URL和解析HTML的规则。但需要注意的是,爬取网站数据需要遵守法律法规,不要对网站造成过大的压力,以及不要用于商业用途。
阅读全文