CountVectorizer, TfidfVectorizer

CountVectorizer和TfidfVectorizer都是用于将文本转换为数值向量的工具。它们都可以将文本中的单词进行计数，并将其转换为基于词频的数值向量。不同之处在于，TfidfVectorizer还考虑了单词的重要性，使用了TF-IDF（词频-逆文档频率）的方法来计算单词的权重。

在使用CountVectorizer时，每个单词都被分配了一个唯一的数字ID，而在TfidfVectorizer中，每个单词都有一个权重，它的重要性取决于在文档集合中的出现频率和文档集合中出现该单词的文档数量。

在文本分类、聚类、信息检索和自然语言处理等任务中，这两个工具都被广泛使用。