文件名称:词频的分布-自然语言处理概论
文件大小:1.58MB
文件格式:PPT
更新时间:2024-05-14 08:01:03
自然语言 概论
词频的分布 • 齐普夫定律是对人类语言词频分布的一个粗糙而有用的描述: • 非常常用的词很少 • 中频词的数量中等 • 大量低频词 • 从语料库中,我们能够观察到少数高频词的丰富的信息,而对大量低频词却观察不到足够数量的信息
文件名称:词频的分布-自然语言处理概论
文件大小:1.58MB
文件格式:PPT
更新时间:2024-05-14 08:01:03
自然语言 概论
词频的分布 • 齐普夫定律是对人类语言词频分布的一个粗糙而有用的描述: • 非常常用的词很少 • 中频词的数量中等 • 大量低频词 • 从语料库中,我们能够观察到少数高频词的丰富的信息,而对大量低频词却观察不到足够数量的信息