文件名称：transformer:中子
文件大小：242KB
文件格式：ZIP
更新时间：2024-05-23 15:45:54
natural-language-processing python3 pytorch transformer seq2seq
中子 中子：基于火炬的及其变体的实现。 该项目是使用python 3.8开发的。 设置依赖项 克隆存储库后，尝试pip install -r requirements.txt 。 如果要使用来实现到C库的转换，尝试使用简单的MT服务器并在此实现中支持支持的中文分词，则还应该使用pip install -r requirements.opt.txt将那些依赖项安装在requirements.opt.txt 。 pip install -r requirements.opt.txt 。 数据预处理 BPE 我们提供脚本以在scripts/bpe/下应用字节对编码（BPE）。 将纯文本转换为张量以进行训练 生成培训数据train.py用bash scripts/mktrain.sh ，在scripts/mktrain.sh为您的使用情况（其他变量应与那些在符合scripts/mkbpe.s