from keras.preprocessing.text import tokenizer
时间: 2023-04-30 13:00:24 浏览: 176
bert情感分类中用tokenizer实现文本预处理
from keras.preprocessing.text import tokenizer 是一个从Keras库中导入的模块,用于将文本转换为数字序列。它可以将文本分词并将每个单词映射到一个唯一的整数。这个模块可以用于构建文本分类、情感分析和
阅读全文
bert情感分类中用tokenizer实现文本预处理