一种文本信息分词处理的方法、装置、终端及存储介质
Abstract:
本公开是关于一种文本信息分词处理的方法、装置、终端及存储介质,所述方法包括:获取文本信息以及配置信息,其中,所述配置信息包括至少两条第一分词规则;按照预定规则,将所述第一分词规则转换成第二分词规则;当利用任意两条所述第二分词规则匹配到的文本信息的字符串存在交集时,确定存在交集的任意两条所述第二分词规则对应的两条所述第一分词规则存在冲突;按照所述配置信息处理所述文本信息,输出所述文本信息的分词结果。由于通过了将所述第一分词规则转换成第二分词规则,使得第二分词规则可以成为一个确定性的规则,从而可以通过这些确定的分词规则,快速和准确地排查出配置信息中存在冲突的分词规则。
Patent Agency Ranking
0/0