正文

NLP分词

admin
admin V管理员 /0 评论 /245 阅读
0111
此篇文章发布距今已超过671天，您需要注意文章的内容或图片是否可用！

英文分词：

 nltk
sentence
tokensnltkword_tokenizesentence
tokens

#中文分词

 jieba
seg_list  jiebacutcut_all
  joinseg_list
seg_list  jiebacut cut_all
  joinseg_list 
seg_list  jiebacut 
 joinseg_list
seg_list  jiebacut_for_search 
 joinseg_list

#社交网络语言的tokenize【正则表达式】

 

宙飒天下网