python爬虫天眼查

您好！要使用Python进行天眼查爬虫，您可以按照以下步骤进行操作：

1. 安装所需的库：首先，确保您已经安装了Python，并使用pip安装了必要的库，如requests、beautifulsoup4和lxml。您可以使用以下命令进行安装：

   pip install requests beautifulsoup4 lxml

2. 发送请求并获取HTML：使用requests库发送GET请求到天眼查网站，获取返回的HTML页面。您可以使用以下代码实现：

   import requests

   url = 'https://www.tianyancha.com/'
   headers = {
       'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.71 Safari/537.36'
   }

   response = requests.get(url, headers=headers)
   html = response.text

3. 解析HTML并提取数据：使用beautifulsoup4库解析HTML页面，并提取所需的数据。您可以根据天眼查网站的页面结构和需要爬取的信息进行相应的解析操作。以下是一个简单的示例，提取公司名称和注册资本：

   from bs4 import BeautifulSoup

   soup = BeautifulSoup(html, 'lxml')
   company_name = soup.select_one('.name').text
   registered_capital = soup.select_one('.regCapital').text

4. 处理反爬措施：天眼查网站可能会采取一些反爬措施，如验证码、IP封锁等。您可能需要在爬取过程中处理这些反爬措施，例如使用代理IP、设置请求头、处理验证码等。根据具体情况进行相应的处理。

请注意，根据天眼查网站的使用条款，未经授权爬取天眼查数据可能违反相关规定，请确保您的爬取行为合法合规，并遵守网站的使用规定。