文件名称:deformer:[ACL 2020] DeFormer
文件大小:439KB
文件格式:ZIP
更新时间:2024-04-21 00:45:59
transformer decomposition question-answering deformer acl2020
变形:德组成预先训练的跨前S代表速度更快问题回答 此存储库是的代码(已接受ACL 2020)。 安装 在Ubuntu 16.04、18.04和macOS上进行了测试。 (Windows也应该工作,但未经测试) 您可以创建一个单独的python环境,例如virtualenv -p python3.7 .env并通过source .env/bin/activate 要求:Python> = 3.5和TensorFlow> = 1.14.0,<2>=1.14.0,<2.0"或pip install tensorflow-gpu==1.15.3 (对于GPU) pip install -r requirements.txt 注意:在本文中,我们将ebert DeFormer BERT版本,将sbert应用KD和LRS。 对于XLNet
【文件预览】:
deformer-master
----models()
--------__init__.py(2KB)
--------bert.py(2KB)
--------layers()
--------ebert.py(4KB)
----deformer-sketch.png(342KB)
----features()
--------feature_classifier.py(4KB)
--------feature.py(4KB)
--------feature_qa.py(6KB)
--------feature_bert_qa.py(5KB)
--------feature_ebert_qa.py(3KB)
--------__init__.py(942B)
--------feature_bert_classifier.py(5KB)
--------feature_ebert_classifier.py(4KB)
----eval.py(6KB)
----config()
--------sbert_classifier.ini(2KB)
--------ebert_qa.ini(2KB)
--------ebert_classifier.ini(2KB)
--------sbert_qa.ini(2KB)
--------bert_qa.ini(3KB)
--------bert_classifier.ini(2KB)
----tasks()
--------qa_sbert.py(6KB)
--------qa_bert.py(5KB)
--------classifier.py(4KB)
--------classifier_sbert.py(5KB)
--------__init__.py(2KB)
--------classifier_bert.py(6KB)
--------qa.py(9KB)
--------classifier_ebert.py(4KB)
--------qa_ebert.py(6KB)
----tools()
--------inspect_checkpoint.py(2KB)
--------rename_checkpoint_variables.py(2KB)
--------process_ckpt.py(2KB)
--------apply_svd.py(3KB)
--------prune_weights_np.py(4KB)
--------visualize_model.py(2KB)
--------explore_hp.py(6KB)
--------merge_checkpoints.py(6KB)
--------compare_rep.py(4KB)
--------get_dataset_stats.py(5KB)
--------convert_race.py(2KB)
--------compute_rep_variance.py(4KB)
--------analyze_sparsity.py(2KB)
--------assign_checkpoint_var_from_np.py(2KB)
--------convert_hotpotqa.py(3KB)
--------convert_pair_dataset.py(2KB)
--------convert_squad.py(2KB)
--------ask_question.py(2KB)
--------analyze_prediction.py(4KB)
--------sample_squad.py(2KB)
----train.py(2KB)
----infer_qa.py(6KB)
----prepare.py(4KB)
----benchmark.py(9KB)
----LICENSE(1KB)
----notes.md(2KB)
----common()
--------text.py(9KB)
--------io.py(3KB)
--------metrics.py(2KB)
--------util.py(1KB)
--------builder.py(10KB)
--------losses.py(696B)
--------__init__.py(710B)
--------checkpoint.py(2KB)
--------tf_util.py(4KB)
--------config.py(5KB)
--------optimizer.py(7KB)
----requirements.txt(293B)
----analyze.py(3KB)
----.gitignore(109B)
----export_qa.py(3KB)
----compare_qa.py(4KB)
----README.md(18KB)
----serve.py(5KB)
----search.sh(4KB)