Transformer-py:微调基于Transformer的POS标签模型

时间:2024-03-28 18:11:57
【文件属性】:

文件名称:Transformer-py:微调基于Transformer的POS标签模型

文件大小:104KB

文件格式:ZIP

更新时间:2024-03-28 18:11:57

Python

变形金刚 该存储库可为词性(POS)标记对预训练的基于Transformer的模型进行微调。 我们将chtb_0223.gold_conll , phoenix_0001.gold_conll , pri_0016.gold_conll和wsj_1681.gold_conll注释的文件用作数据集进行微调。 要重现结果,请按照以下步骤操作。 2021年2月22日更新:数据预处理和数据信息。 2021年3月8日,新:训练BERT和自定义模型,数据集加载脚本。 安装 Python版本 Python> = 3.8 环境 从文件创建环境并激活环境。 conda env create -f environment.yaml conda activate f*-pinjie 如果conda无法从environment.yaml创建environment.yaml 。 这可能是由文件中特定于


【文件预览】:
Transformer-py-main
----models()
--------custom-model-demo.py(3KB)
--------bert-bilstm.py(4KB)
----data()
--------data_information.py(2KB)
--------wsj_1681.gold_conll(5KB)
--------phoenix_0001.gold_conll(685KB)
--------chtb_0223.gold_conll(55KB)
--------dataset.py(1KB)
--------data_preprocess.py(1KB)
--------run_information.sh(78B)
--------embeddings.py(790B)
--------pri_0016.gold_conll(145KB)
--------run_preprocess.sh(79B)
----ontonotes_v4.py(5KB)
----run_pos.py(12KB)
----requirements.txt(18B)
----.gitignore(64B)
----environment.yaml(126B)
----README.md(4KB)

网友评论