【文件属性】:
文件名称:ViT
文件大小:23KB
文件格式:ZIP
更新时间:2021-03-18 01:45:50
Python
变形的ViT
将可变形的多头注意力应用于ViT架构
待办事项清单:
完成日志记录代码和wandb日志记录
实施timm版本(用于224x224 16补丁尺寸图像的执行器和变压器)
代码和测试变形注意
变压器
演员
编码和测试本地感知的初始化
变压器
演员
编码和测试DeBERTa注意
变压器
演员
用法
结果
用法
链接
(可变形的多尺度注意)
cp pc注意)
(可识别位置的初始化)
(执行器tensorflow实现)
库)
日志记录)
【文件预览】:
ViT-main
----train.py(24KB)
----timm_classes()
--------timm_locality_aware_transformer.py(6KB)
--------__init__.py(0B)
--------timm_vision_performer.py(8KB)
--------__pycache__()
----DeBERTa attention()
--------__init__.py(0B)
----model.py(16KB)
----experiments_performer_transformer.py(104B)
----README.md(1KB)
----deformable_transformer()
--------deformable_transformer.py(4KB)
--------__init__.py(0B)