jieba用法

jieba的用法分为三步：加载词典、分词、输出结果。

1. 加载词典：

import jieba

# 使用自定义词典，例如mydict.txt
jieba.load_userdict('mydict.txt')

2. 分词：

import jieba

# 精确模式
result = jieba.cut('我爱自然语言处理', cut_all=False)
print(' '.join(result))

# 全模式
result = jieba.cut('我爱自然语言处理', cut_all=True)
print(' '.join(result))

# 搜索引擎模式
result = jieba.cut_for_search('我爱自然语言处理')
print(' '.join(result))

3. 输出结果：

import jieba

result = jieba.cut('我爱自然语言处理')
print('/'.join(result))

其中，精确模式是默认的分词模式，全模式将文本中所有可能的词语都扫描出来，搜索引擎模式在精确模式的基础上，对长词再次切分，提高召回率。最后，输出结果可以使用join函数将分词结果组合成一个字符串。