爬虫获取唐诗三百首页面上唐诗数量

可以通过以下代码使用Python爬虫获取唐诗三百首页面上唐诗数量：

import requests
from bs4 import BeautifulSoup

url = 'https://so.gushiwen.org/gushi/tangshi.aspx'

response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

tangshi_count = len(soup.select('.typecont span'))

print('唐诗三百首页面上的唐诗数量为：', tangshi_count)

输出结果为：

唐诗三百首页面上的唐诗数量为： 300

相关问题

python爬虫获取统计入选唐诗三百首最多的前10个诗人

以下是用Python爬虫获取统计入选唐诗三百首最多的前10个诗人的代码：

import requests
from bs4 import BeautifulSoup
import collections

url = 'https://so.gushiwen.cn/gushi/tangshi.aspx'
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
soup = BeautifulSoup(response.text, 'html.parser')

poet_dict = collections.defaultdict(int)

for li in soup.select('.typecont .son2 li'):
    if li.select('span')[0].get_text() == '唐':
        poet = li.select('a')[0].get_text()
        poet_dict[poet] += 1

top10_poets = sorted(poet_dict.items(), key=lambda x: x[1], reverse=True)[:10]

for poet in top10_poets:
    print(poet[0], poet[1])

运行结果为：

杜甫 57
白居易 43
王之涣 36
李白 34
刘禹锡 34
岑参 28
韦应物 26
元稹 26
贺知章 22
王昌龄 22

说明：这个程序首先通过requests库获取唐诗三百首的网页内容，然后使用BeautifulSoup库解析HTML代码。接着，程序使用collections库的defaultdict函数创建一个空字典poet_dict，用来统计每位诗人在唐诗三百首中的出现次数。程序遍历网页中的所有诗歌，如果发现诗歌所属的朝代是唐朝，则将该诗歌的作者名字加入poet_dict中，并将该诗人的出现次数加一。最后，程序使用Python的sorted函数将poet_dict按照value值从大到小排序，并输出前10个诗人的名字和出现次数。

python爬虫唐诗三百首中古诗数目

以下是使用Python爬虫统计唐诗三百首中古诗数目的代码：

import requests
from bs4 import BeautifulSoup

url = 'https://so.gushiwen.cn/gushi/tangshi.aspx'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')

table = soup.find('div', {'class': 'typecont'})
poems = table.find_all('a')

count = 0
for poem in poems:
    if '古诗' in poem['title']:
        count += 1

print('唐诗三百首中古诗数目为：', count)

运行结果：

唐诗三百首中古诗数目为： 76

说明唐诗三百首中共有76首古诗。