码迷,mamicode.com
首页 > 编程语言 > 详细

python——jieba分词过程

时间:2019-04-24 23:32:13      阅读:175      评论:0      收藏:0      [点我收藏+]

标签:分割   port   pytho   class   nbsp   上海   enc   上海交通   int   

 1 import jieba
 2 """函数2:分词函数"""
 3 def fenci(training_data):
 4     """-------------------------------------------------------
 5     seg_list = jieba.cut("他来到上海交通大学", cut_all=True)
 6     print("【全模式】:" + "/ ".join(seg_list))
 7     他/ 来到/ 上海交通大学
 8     ----------------------------------------------------------"""
 9     seg_list = jieba.cut(training_data)             # 默认是精确模式
10     training_ci = " ".join(seg_list)                # 空字符串中join加入分词后的词            
11     training_ci = training_ci.split()               # 以空格符作为分界线进行分割,保存为list
12     return training_ci
13 training_data="他来到上海交通大学"
14 training_ci=fenci(training_data)
15 print("training_ci1",training_ci)

 

 

1 training_ci 他 来到 上海交通大学
2 training_ci [, 来到, 上海交通大学]

 

python——jieba分词过程

标签:分割   port   pytho   class   nbsp   上海   enc   上海交通   int   

原文地址:https://www.cnblogs.com/fpzs/p/10765561.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!