概述:心智理论(Theory of Mind)是将心智状态(信念、意图、知识、观点等)归因于他人,并认识到这些心智状态可能与自己不同的能力。心智理论对于有效沟通和团队展现更高集体绩效至关重要。为了有效地利用人工智能(AI)的进步使我们的生活更加高效,人类和AI需要在团队中良好地合作。传统上,研究更多地侧重于使AI更准确,并在较小程度上使其更好地理解人类的意图、倾向、信仰和背景。后者涉及使AI更像人类,并使其发展对我们心智的理论。在这项工作中,我们认为,为了使人类-AI团队有效,人类也必须发展对AI心智的理论(ToAIM)——了解其优势、弱点、信念和特点。我们在视觉问答(VQA)领域内实现了这些想法。我们发现,仅使用少量的示例(50个),普通人可以接受培训,以更好地预测复杂VQA模型的回应和潜在失败。我们进一步评估了现有解释(或可解释性)模式在帮助人类建立对AI心智的理论方面所起的作用。在最近的科学和普遍关注中,可解释的AI受到了相当大的关注。令人惊讶的是,我们发现,获得模型的内部状态——其对前k个预测的信心、明确或隐含的注意力映射(突出显示模型在回答有关图像的问题时正在查看(和聆听)的图像区域和问题中的单词)——并不能帮助人们更好地预测其行为。
MindCraft:基于心智模型的协作任务情境对话建模
论文标题:MindCraft: Theory of Mind Modeling for Situated Dialogue in Collaborative Tasks