文件名称:Visual_Question_Answering.pytorch:视觉问答
文件大小:29KB
文件格式:ZIP
更新时间:2024-06-04 23:26:22
JupyterNotebook
视觉问答 该实现遵循“图像字幕和视觉问题解答的自下而上和自上而下注意”( )和“视觉问题解答的提示和技巧:从中学到的知识”中描述的VQA系统2017年挑战”( )。 结果 模型 验证准确性 训练时间 实施模型(CNN扩展+ BCP) 64.2 40至50分钟(Titan Xp) 使用计算准确性。 实施细节 我们的实现遵循论文的总体结构,但有以下简化: 我们不使用额外数据。 每个图像我们仅使用固定数量的对象(K = 36)。 我们使用一个简单的单流分类器而不进行预训练。 我们使用简单的ReLU激活而不是封闭的tanh。 前两点大大减少了培训时间。 在单个Titan Xp上,我们的实现每个周期大约需要200秒,而本文中描述的实现每个周期需要1个小时。 第三点是因为我们认为原始文档中的两个流分类器和预训练过于复杂,因此没有必要。 对于非线性激活单元,我们尝试了门tanh,
【文件预览】:
Visual_Question_Answering.pytorch-master
----run_test_all.py(2KB)
----main.py(2KB)
----utils.py(2KB)
----run_train_all.py(1KB)
----train.py(3KB)
----classifier.py(612B)
----dataset.py(9KB)
----main.ipynb(80KB)
----language_model.py(7KB)
----attention.py(2KB)
----dataset_load_all.py(10KB)
----base_model.py(3KB)
----fc.py(853B)
----bottom-up-adaptK()
--------coco_trainval_fail.json(65B)
--------split_feat_to_files.py(0B)
--------convert2hdf5.py(0B)
--------read_tsv.py(0B)
----README.md(4KB)
----train_all.py(2KB)
----compact_bilinear_pooling.py(10KB)