文件名称：论文研究-面向专业领域的中文分词方法.pdf
文件大小：794KB
文件格式：PDF
更新时间：2022-09-28 03:14:55
论文研究
在专业领域分词任务中，基于统计的分词方法的性能受限于缺少专业领域的标注语料，而基于词典的分词方法在处理新词和歧义词方面还有待提高。针对专业领域分词的特殊性，提出统计与词典相结合的分词方法，完善领域词典构建流程，设计基于规则和字表的二次分词歧义消解方法。在工程法领域语料上进行分词实验。实验结果表明，在工程法领域的分词结果准确率为92.08%，召回率为94.26%，F值为93.16%。该方法还可与新词发现等方法结合，改善未登录词的处理效果。