python实现一元语法模型

可以使用Python中的NLTK库来实现一元语法模型。以下是一个简单的示例代码：

import nltk
from nltk.tokenize import word_tokenize
from nltk.probability import FreqDist

# 读取文本文件
with open('text.txt', 'r') as file:
    text = file.read()

# 分词
tokens = word_tokenize(text)

# 计算词频
freq_dist = FreqDist(tokens)

# 输出前10个最常见的词
print(freq_dist.most_common(10))

这段代码将读取名为"text.txt"的文本文件，并使用NLTK库中的分词和词频计算函数来实现一元语法模型。最后，它将输出前10个最常见的词。