文件名称：blanc:文件摘要的无人值守质量评估
文件大小：1.67MB
文件格式：ZIP
更新时间：2024-05-21 15:39:04
Python
布兰克 这是BLANC帮助和BLANC-tune的参考实现，如最初中。 BLANC是一种自动评估文档摘要质量的无参考方法。 我们的目标是使用一种客观，可重现和完全自动化的方法来衡量摘要的功能性能。 我们的方法是通过测量经过预训练的语言模型在访问文档摘要时获得的性能提升来实现的，同时在文档文本上执行其语言理解任务。 与ROUGE不同，BLANC不需要人工编写的参考摘要，从而可以完全免人工地进行摘要质量评估。 本文介绍了两种类型的BLANC分数，此回购中提供了两种类型的BLANC分数：BLANC帮助和BLANC-tune。 BLANC-help的计算速度更快（使用默认设置，在CUDA上速度要快30％左右），但是BLANC-tune在理论上更加合理。 它们之间大约有90％的相关性，因此在大多数情况下都可以使用两者之一。 我们发现，平均而言，gap = 2最佳的现在将其设置为默认值。 原始纸张
【文件预览】：
blanc-master
----requirements.txt(85B)
----blanc()
--------blanc.py(36KB)
--------utils.py(16KB)
--------__init__.py(77B)
--------__main__.py(12KB)
--------__version__.py(22B)
----LICENSE(1KB)
----setup.py(946B)
----README.md(12KB)
----data()
--------pairs.json(363B)
--------CNN_DailyMail_555.json(2.65MB)
--------DailyNews_300_aspects.json(1.2MB)
--------README.md(1KB)
--------single.json(149B)
--------DailyNews_300.json(1.06MB)
--------doc-summaries.json(506B)
----.gitignore(54B)