python爬取软科院校排名

要使用Python爬取软科院校排名，你可以按照以下步骤进行操作：

1. 导入所需的库：

import requests
from bs4 import BeautifulSoup

2. 使用requests库向网页发送HTTP请求并获取响应：

url = 'https://www.shanghairanking.cn/rankings'
response = requests.get(url)

3. 使用BeautifulSoup库解析网页内容：

soup = BeautifulSoup(response.text, 'html.parser')

4. 找到包含排名信息的HTML元素，并提取相应的数据：

ranking_table = soup.find('table', class_='rk-table')
rows = ranking_table.find_all('tr')
for row in rows:
    cells = row.find_all('td')
    if len(cells) > 0:
        university = cells

相关问题

爬取软科大学排名前100

爬取软科大学排名前100需要以下步骤：

1. 打开软科大学排名网站，找到大学排名的页面。

2. 发送HTTP请求，获取页面的HTML代码。

3. 使用解析HTML的库（如BeautifulSoup）解析页面，提取需要的信息。

4. 将提取的信息存储到本地文件或数据库中。

以下是一个Python代码示例，可以爬取软科大学排名前100并将其保存到本地文件中：

import requests
from bs4 import BeautifulSoup

url = 'http://www.zuihaodaxue.cn/zuihaodaxuepaiming2021.html'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

table = soup.find('table', attrs={'class': 'tableList'})
tbody = table.find('tbody')
rows = tbody.find_all('tr')

with open('university_ranking.txt', 'w', encoding='utf-8') as f:
    for row in rows[:100]:
        cols = row.find_all('td')
        rank = cols[0].string.strip()
        name = cols[1].string.strip()
        location = cols[2].string.strip()
        category = cols[3].string.strip()
        score = cols[4].string.strip()
        f.write(f'{rank}\t{name}\t{location}\t{category}\t{score}\n')

在上述代码中，我们使用requests库发送HTTP请求获取网页内容，并使用BeautifulSoup库解析HTML代码。我们找到包含大学排名的表格，并遍历表格的每一行（排除表头），提取每个学校的排名、名称、地区、类别和得分，然后将它们写入到本地文件中。

python爬取亚马逊排名

你可以使用Python来爬取亚马逊的排名数据。下面是一个简单的示例代码，可以获取给定商品在指定类别下的排名：

import requests
from bs4 import BeautifulSoup

def get_amazon_ranking(product_url):
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'
    }
    
    response = requests.get(product_url, headers=headers)
    soup = BeautifulSoup(response.content, 'html.parser')
    
    ranking = soup.find('span', {'class': 'zg-badge-text'}).get_text().strip()
    
    return ranking

product_url = 'https://www.amazon.com/dp/B07VGRJDFY'  # 替换为你要查询的商品链接
ranking = get_amazon_ranking(product_url)
print('商品排名:', ranking)

请注意，亚马逊的网页结构经常变化，因此这个示例代码可能无法适用于所有情况。你可能需要根据具体情况进行相应的调整和修改。另外，一定要尊重网站的使用条款，并确保你的爬取行为合法合规。