一、什么是“最大分词” 和 “智能分词”
1、最大分词 ik_max_word
最大分词,即最大粒度的分词,可以理解为分词时从左往右进行一个字一个字的向后匹配词组,将整个词条进行最精细的拆分。如果某个字向右未匹配到整词则将此单字作为一个分词结果返回。
举例:“张三说的确实在理”进行最大分词

2、智能分词
ik_smart:智能分词:即基于最大分词的基础上,对分词结果进行有效的消除歧义,将无用分词结果取消掉。表现方式为,从左至右进行一次组合词组,组合到的词组将不会再次分词。
举例:比如上面的例子,使用智能分词

二、在 Google 的head 插件中进行分词,并查看分词结果
(1)最大分词

(2)智能分词


本文介绍了Google head插件中IK分词器的使用,包括最大分词(ik_max_word)和智能分词(ik_smart)。最大分词对输入文本进行最精细的拆分,而智能分词则在最大分词基础上消除歧义,减少无用分词。文中通过实例展示了两种分词方式的效果。
 “关键词”分词使用及结果查看&spm=1001.2101.3001.5002&articleId=105343654&d=1&t=3&u=6d28581771ba453084bbd5558a8b0459)
1万+

被折叠的 条评论
为什么被折叠?



