2、 常用的几种机械分词方法如下:1)正向最大匹配法(由左到右的方向);首先粗分,按照句子把文本切成一个一个句子。 然后把每个句子切成单字。
3、 “春春节致词”可以依次拆分为 春、春、、春、春节、致词 这几个词,按照正向最大匹配算法,分词结果是春//春节/致词,按照反向最大匹配算法,分词结果是春//春节/致词。
4、 2.1 正向最大匹配思想MM 例: 我们要对 南京江大桥 这个句子进行分词,根据正向最大匹配的原则:2.2 逆向最大匹配算法RMM 该算法是正向最大匹配的逆向思维,匹配不成功,将匹配字段的最前一个字去掉,实验表明,逆向最大匹配算法要优于正向最大匹配算法。
1、 正向最大匹配法:例如,句子“不知道你在说什么”,会按照从左到右的顺序分为“不知道,你,在,说什么”。 反向最大匹配法:反向进行,如“不知道你在说什么”,则会分为“不,知道,你在,说,什么”,词数较多。
上一篇:解释什么叫做最佳适应算法
下一篇:正向最大匹配算法应用场景