jieba_分词

时间:2021-10-29 09:06:12
【文件属性】:

文件名称:jieba_分词

文件大小:11.83MB

文件格式:ZIP

更新时间:2021-10-29 09:06:12

jieba分词

支持三种分词模式: 精确模式,试图将句子最精确地切开,适合文本分析;全模式,把句子中所有的可以成词的词语都扫描出来, 速度非常快,但是不能解决歧义;搜索引擎模式,在精确模式的基础上,对长词再次切分,提高召回率,适合用于搜索引擎分词。支持繁体分词支持自定义词典MIT 授权协议


【文件预览】:
jieba-master
----MANIFEST.in(32B)
----extra_dict()
--------dict.txt.small(1.48MB)
--------stop_words.txt(222B)
--------dict.txt.big(8.19MB)
--------idf.txt.big(3.9MB)
----jieba()
--------posseg()
--------__main__.py(2KB)
--------__init__.py(19KB)
--------dict.txt(4.84MB)
--------analyse()
--------_compat.py(1KB)
--------finalseg()
----test()
--------test_pos_no_hmm.py(5KB)
--------test_cutall.py(5KB)
--------jieba_test.py(9KB)
--------extract_tags.py(528B)
--------test_change_dictpath.py(873B)
--------test.py(5KB)
--------jiebacmd.py(461B)
--------test_tokenize.py(5KB)
--------demo.py(3KB)
--------test_whoosh.py(2KB)
--------test_tokenize_no_hmm.py(5KB)
--------test.txt(118B)
--------test_lock.py(1KB)
--------extract_tags_with_weight.py(895B)
--------test_no_hmm.py(5KB)
--------test_pos_file.py(403B)
--------test_bug.py(199B)
--------parallel()
--------test_whoosh_file.py(1KB)
--------test_pos.py(5KB)
--------test_multithread.py(830B)
--------test_userdict.py(1KB)
--------extract_topic.py(1KB)
--------test_cut_for_search.py(5KB)
--------extract_tags_idfpath.py(594B)
--------foobar.txt(11B)
--------test_whoosh_file_read.py(826B)
--------lyric.txt(721B)
--------userdict.txt(151B)
--------test_file.py(383B)
--------extract_tags_stop_words.py(658B)
----LICENSE(1KB)
----setup.py(2KB)
----.gitignore(2KB)
----Changelog(7KB)
----README.md(29KB)
----.gitattributes(483B)

网友评论