python结巴分词代码
时间: 2023-11-13 09:54:30 浏览: 226
结巴分词Python代码
5星 · 资源好评率100%
结巴分词是一款中文分词工具,可以用于中文文本的分词处理。以下是使用Python进行结巴分词的代码:
```python
import jieba
# 精确模式分词
seg_list = jieba.cut("我来到北京清华大学", cut_all=False)
print("精确模式分词结果:", "/".join(seg_list))
# 全模式分词
seg_list = jieba.cut("我来到北京清华大学", cut_all=True)
print("全模式分词结果:", "/".join(seg_list))
# 搜索引擎模式分词
seg_list = jieba.cut_for_search("小明硕士毕业于中国科学院计算所,后在日本京都大学深造")
print("搜索引擎模式分词结果:", "/".join(seg_list))
```
输出结果如下:
```
精确模式分词结果: 我/来到/北京清华大学
全模式分词结果: 我/来到/北京/清华/清华大学/华大/大学
搜索引擎模式分词结果: 小明/硕士/毕业/于/中国/科学/学院/科学院/中国科学院/计算/计算所/,/后/在/日本/京都/大学/日本京都大学/深造
```
阅读全文