python爬虫获取div中的内容，不要div中其他div的信息

可以使用BeautifulSoup库来实现。

假设我们要获取以下HTML代码中的div中的文本内容：

<div class="main">
  <div class="header">头部信息</div>
  <div class="content">正文内容</div>
  <div class="footer">底部信息</div>
</div>

可以使用以下代码来提取div中的文本内容：

from bs4 import BeautifulSoup

html = '''
<div class="main">
  <div class="header">头部信息</div>
  <div class="content">正文内容</div>
  <div class="footer">底部信息</div>
</div>
'''

soup = BeautifulSoup(html, 'html.parser')
div = soup.find('div', class_='main')
text = div.get_text(strip=True, separator='\n')

print(text)

输出结果为：

头部信息
正文内容
底部信息

在上述代码中，首先使用BeautifulSoup库将HTML代码解析成一个文档对象。然后使用find方法找到class为“main”的div元素。最后使用get_text方法获取该div元素中的文本内容，strip=True表示去除空白字符，separator='\n'表示使用换行符作为文本内容的分隔符。