文件名称:transformer_serie_2
文件大小:1.99MB
文件格式:ZIP
更新时间:2024-05-12 16:51:45
Roff
串行架构 与Josep版本相比,修改后的代码为: /transformer/Model.py /transformer/Learning.py /transformer/Dataset.py(我刚刚修改了两个断言,这些断言不适用于“ sep”和“ msk”令牌 minmt-train.py
【文件预览】:
transformer_serie_2-main
----build_corpus.sh(1KB)
----clean.Europarl.en-fr.en.tst.bpe.vec.sim0.5_k5_n0_t0.8.pre(23KB)
----minmt_serie_train.sh(894B)
----minmt-train.py(10KB)
----clean.Europarl.en-fr.en.tst.bpe.vec.sim0.5_k5_n0_t0.8.tgt(203KB)
----clean.Europarl.en-fr.en.tst.bpe.vec.sim0.5_k5_n0_t0.8.sim(19KB)
----data_corpus()
--------clean_data.sh(0B)
--------val_src(1.51MB)
--------val_tgt(1.76MB)
--------remove_empty_lines.py(0B)
--------val_pre(1.08MB)
--------val_sim(954KB)
----schema_serie.jpg(445KB)
----clean.Europarl.en-fr.en.tst.bpe.vec.sim0.5_k5_n0_t0.8.src(166KB)
----remove_empty_predictions.py(737B)
----tools()
--------tokenizer.py(2KB)
--------learn_bpe.py(2KB)
--------Tools.py(2KB)
--------__pycache__()
--------onmttok.py(2KB)
--------learn_sp.py(2KB)
--------figures.py(3KB)
----transformer()
--------Model.py(28KB)
--------schema_serie.jpg(445KB)
--------__pycache__()
--------test_collage_corpus.sh(0B)
--------Dataset.py(8KB)
--------Optimizer.py(3KB)
--------Learning.py(9KB)
--------requirements.txt(11B)
--------README.md(359B)
--------Inference.py(10KB)
----minmt-vocab.py(2KB)
----test_remove_empty_lines.py(0B)
----minmt-average.py(2KB)
----PLEIN_BLEU()
--------PLEIN_sacrebleu.sh(326B)
--------ref(24KB)
--------pred(28KB)
----tsttsttst.py(0B)
----build_corpus_plein.sh(2KB)
----minmt-translate.py(6KB)
----model_serie()
--------Europarl.out_k5_alpha0.7(177KB)
----minmt_serie_inference.sh(1KB)
----sacrebleu.sh(370B)
----requirements.txt(11B)
----remove_empty_lines.py(2KB)
----model_serie_plein()
--------log(18KB)
----README.md(359B)
----minmt-setup.py(6KB)