:flying_saucer:适用于预训练的BERT,XLNet和GPT-2的spaCy管道-Python开发

时间:2024-06-14 09:50:35
【文件属性】:

文件名称::flying_saucer:适用于预训练的BERT,XLNet和GPT-2的spaCy管道-Python开发

文件大小:48KB

文件格式:ZIP

更新时间:2024-06-14 09:50:35

Python Natural Language Processing

for用于预训练的BERT和其他变压器的spaCy管道spacy-transformers此程序包(以前为spacy-pytorch-transformers)提供了包装了Hugging Face的Transformer程序包的spaCy模型管道,因此您可以在spaCy中使用它们。 结果是可以方便地访问最新的变压器架构,例如BERT,GPT-2,XLNet等。有关更多详细信息和背景,请查看我们的博客文章。 功能直接在spaCy管道中使用BERT,RoBERTa,XLNet和GPT-2。 使用spaCy对您的任务微调预训练的变压器模型


【文件预览】:
spacy-transformers-master
----.gitignore(2KB)
----setup.cfg(3KB)
----README.md(4KB)
----bin()
--------get-version.sh(205B)
--------push-tag.sh(351B)
----azure-pipelines.yml(1KB)
----.github()
--------no-response.yml(725B)
--------workflows()
----spacy_transformers()
--------tests()
--------util.py(5KB)
--------align.py(7KB)
--------truncate.py(4KB)
--------span_getters.py(2KB)
--------annotation_setters.py(654B)
--------layers()
--------__init__.py(499B)
--------data_classes.py(12KB)
--------architectures.py(4KB)
--------pipeline_component.py(16KB)
----examples()
--------configs()
--------train_from_config.py(562B)
----LICENSE(1KB)
----requirements.txt(206B)
----MANIFEST.in(34B)
----setup.py(179B)
----Makefile(728B)

网友评论