文件名称：matlab代码绿颜色表示-HumanIntentionInferenceZeroShot:人类意图推理ZeroShot
文件大小：32.44MB
文件格式：ZIP
更新时间：2024-06-23 13:42:06
系统开源
matlab代码绿颜色表示我在搜索什么：视觉搜索中的零样本目标身份推断 作者：Mengmi Zhang 和 Gabriel Kreiman 该存储库包含一个零样本深度学习模型的实现，用于根据注视模式推断人类意图（人类主体正在搜索什么）。 我们的论文已被 2020 年 EPIC-CVPR 研讨会接受。 我们手稿的非官方副本是 。 观看我们的 5 分钟演示。 项目介绍 我们可以从一个人的行为推断意图和目标吗？ 作为这一系列问题的一个例子，我们在这里考虑是否可以通过解码一个人的眼球运动行为来破译一个人正在寻找的东西。 我们对物体阵列和自然图像进行了两次人体心理物理学实验，在这些实验中，我们监测了受试者在寻找目标物体时的眼球运动。 在找到目标之前，使用非目标对象上的“错误”注视模式作为输入，我们开发了一个模型 (InferNet)，其目标是推断目标是什么。 “错误”注视与寻求的目标具有相似的特征。 Infernet 模型使用预训练的 2D 卷积架构从错误固定中提取特征，并通过跨层卷积调制搜索图像来计算错误固定与搜索图像中所有位置之间的 2D 相似度图。 InferNet 通过最大池化跨层合并调