论文
UserHarness:利用用户思维来增强代理思维理论
UserHarness: Harnessing User Minds for Stronger Agent Theory-of-Mind
摘要
了解用户的信念和意图对于构建有效的座席助理至关重要。这种能力通常通过心智理论 (ToM) 任务进行评估,其中成功需要从用户的角度进行推理。然而,许多现有方法通过复杂的管道来解决 ToM 问题,这些管道间接地对行为进行建模,而没有显式地重建用户的心理状态。这忽略了问题的核心结构:用户根据他们的信念采取行动,这些信念通过对环境的观察而更新;信念和意图共同决定行动,进而改变环境;社会推理通常需要对其他人的信念或意图有嵌套的信念。我们提出了 UserHarness,一个简单的框架,它将 ToM 推理重新构建为显式的用户思维重建。 UserHarness 分解用户的心理状态、其与外部环境的关系以及随之而来的操作,使代理能够跟踪用户观察、相信、意图和行为。在五个基准测试中,UserHarness 的宏观准确率高达 95.94%,相对于现有推理方法提高了 15% 以上,相对于最强的仅提示工具提高了约 20%。这些结果表明,强大的用户理解需要从用户思维的根源进行推理,将用户利用定位为更具适应性的未来助手的有前景的基础。