Python-XLMFacebook用PyTorch实现的跨语言预训练语言模型

时间:2022-08-30 00:00:45
【文件属性】:

文件名称:Python-XLMFacebook用PyTorch实现的跨语言预训练语言模型

文件大小:103KB

文件格式:ZIP

更新时间:2022-08-30 00:00:45

Python开发-自然语言处理

包含单语言BERT预训练语言模型和跨语言XLM预训练语言模型,支持监督/无监督机器翻译和跨语言文本分类应用


【文件预览】:
XLM-master
----get-data-para.sh(7KB)
----.gitignore(2KB)
----get-data-glue.sh(6KB)
----src()
--------trainer.py(36KB)
--------evaluation()
--------data()
--------model()
--------__init__.py(0B)
--------slurm.py(6KB)
--------utils.py(10KB)
--------optim.py(10KB)
--------logger.py(2KB)
----CONTRIBUTING.md(572B)
----CODE_OF_CONDUCT.md(244B)
----LICENSE(19KB)
----get-data-wiki.sh(2KB)
----glue-xnli.py(4KB)
----prepare-glue.sh(2KB)
----tools()
--------lowercase_and_remove_accent.py(1KB)
--------README.md(844B)
--------segment_th.py(355B)
--------tokenize.sh(1KB)
----README.md(33KB)
----prepare-xnli.sh(3KB)
----translate.py(5KB)
----preprocess.py(1KB)
----generate-embeddings.ipynb(6KB)
----get-data-xnli.sh(2KB)
----get-data-nmt.sh(15KB)
----install-tools.sh(2KB)
----train.py(15KB)

网友评论