文件名称:简单中文分词系统 v1.0
文件大小:316KB
文件格式:RAR
更新时间:2022-11-30 02:57:36
应用软件
这是一套基于词频词典的机械式中文分词引擎,它能将一整段的中文文本基本正确地切分成词。 词是中文的最小语素单位,但在书写时并不像英语会在词之间用空格分开, 所以如何准确并快速分词一直是中文分词的攻关难点。该软件,不依赖任何外部库函数, 支持的中文编码包括 GBK、UTF-8 等。分词算法上并无太多创新成分,采用的是自己采集的词频词典,并辅以一定的专有名称,人名,地名, 数字年代等规则识别来达到基本分词,经小范围测试准确率在 90% ~ 95% 之间, 基本上能满足一些小型搜索引擎、关键字提取等场合运用。目前已经在我公司网媒360系统上面稳定运行一年半,客户反馈良好。
【文件预览】:
中文分词 v1.0.exe