IK分词器通过spark加载词典,并在spark中使用

时间:2024-01-29 12:01:46
【文件属性】:

文件名称:IK分词器通过spark加载词典,并在spark中使用

文件大小:33KB

文件格式:ZIP

更新时间:2024-01-29 12:01:46

spark es hive

IK分词器通过spark加载词典,并在spark中使用


【文件预览】:
analyzer
----dic()
--------Dictionary.java(10KB)
--------Hit.java(3KB)
--------DictSegment.java(9KB)
----core()
--------IKSegmenter.java(5KB)
--------LetterSegmenter.java(9KB)
--------ISegmenter.java(1KB)
--------LexemePath.java(6KB)
--------CharacterUtil.java(3KB)
--------IKArbitrator.java(5KB)
--------AnalyzeContext.java(12KB)
--------QuickSortSet.java(6KB)
--------Lexeme.java(6KB)
--------CJKSegmenter.java(4KB)
--------CN_QuantifierSegmenter.java(7KB)

网友评论