python爬虫小红书
时间: 2023-07-14 15:58:01 浏览: 128
爬取小红书数据的python项目
爬取小红书的数据一般可以使用 Python 中的 requests 和 BeautifulSoup 库来实现。以下是一个简单的爬取小红书的示例代码:
```python
import requests
from bs4 import BeautifulSoup
url = "https://www.xiaohongshu.com/discovery/item/5ffeb8b0000000000100e8d7"
response = requests.get(url)
soup = BeautifulSoup(response.content, 'html.parser')
# 获取标题
title = soup.find('h1', class_='title').text
print(title)
# 获取正文
content = soup.find('div', class_='content').text
print(content)
# 获取评论
comments = soup.find_all('div', class_='comment')
for comment in comments:
print(comment.text)
```
需要注意的是,爬取小红书的数据是有风险的,需要遵守相关法律法规和小红书的规定,不要进行非法爬取和数据滥用。
阅读全文