文件名称:Transformer-py:微调基于Transformer的POS标签模型
文件大小:104KB
文件格式:ZIP
更新时间:2024-03-28 18:11:57
Python
变形金刚 该存储库可为词性(POS)标记对预训练的基于Transformer的模型进行微调。 我们将chtb_0223.gold_conll , phoenix_0001.gold_conll , pri_0016.gold_conll和wsj_1681.gold_conll注释的文件用作数据集进行微调。 要重现结果,请按照以下步骤操作。 2021年2月22日更新:数据预处理和数据信息。 2021年3月8日,新:训练BERT和自定义模型,数据集加载脚本。 安装 Python版本 Python> = 3.8 环境 从文件创建环境并激活环境。 conda env create -f environment.yaml conda activate f*-pinjie 如果conda无法从environment.yaml创建environment.yaml 。 这可能是由文件中特定于
【文件预览】:
Transformer-py-main
----models()
--------custom-model-demo.py(3KB)
--------bert-bilstm.py(4KB)
----data()
--------data_information.py(2KB)
--------wsj_1681.gold_conll(5KB)
--------phoenix_0001.gold_conll(685KB)
--------chtb_0223.gold_conll(55KB)
--------dataset.py(1KB)
--------data_preprocess.py(1KB)
--------run_information.sh(78B)
--------embeddings.py(790B)
--------pri_0016.gold_conll(145KB)
--------run_preprocess.sh(79B)
----ontonotes_v4.py(5KB)
----run_pos.py(12KB)
----requirements.txt(18B)
----.gitignore(64B)
----environment.yaml(126B)
----README.md(4KB)