用python爬取百度文库中的文档

首先，我们需要了解百度文库的网页结构。每个文档都有一个唯一的文档ID，可以在文档的URL中找到。我们可以使用Python的requests库来发送HTTP请求，然后使用BeautifulSoup库来解析HTML页面。

以下是一个基本的Python代码示例，可以爬取百度文库中的文档：

import requests
from bs4 import BeautifulSoup

# 设置请求头，伪装成浏览器访问
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}

# 文档ID
doc_id = 'xxxxxxxx'

# 构造URL
url = 'https://wenku.baidu.com/view/' + doc_id + '.html'

# 发送HTTP请求
response = requests.get(url, headers=headers)

# 解析HTML页面
soup = BeautifulSoup(response.content, 'html.parser')

# 获取文档内容
content = soup.find('div', class_='content')

# 输出文档内容
print(content.text.strip())

在上面的代码中，我们首先设置了一个请求头，以伪装成浏览器访问。然后，我们构造了文档的URL，并发送了HTTP请求。接下来，我们使用BeautifulSoup解析HTML页面，并找到文档内容。最后，我们输出了文档内容。

注意：由于百度文库对于文档的访问有一定的限制，因此，上述代码可能无法直接运行。需要先通过其他方式获取到文档内容的HTML页面，然后再进行解析。