OPERA：语言模型Agent自主光学实验的可靠操作符残差反馈

自主代理通过不反映实验成功的行为评分选择行动。我们开发了 OPERA，这是一种用于光学实验的操作-残差框架。它将实验动作表示为光学操作，并使用物理可解释的残差来评估其结果。操作符指定对测量、控制或重建的可执行更改，而残差报告偏离指定的物理条件。代理使用两者来选择、组合或生成操作，并独立评估其物理性能以与保留参考进行比较。在三个光学任务上，仅评分反馈导致23.6-39.0%的决策中产生了评分增加，但没有物理改进；操作符-残差反馈下这一比例为0.9%—1.9%，并提高了达到和维持任务目标的概率，并减少了实验预算。数字孪生协议被转移到三个光学仪器上，重复实验显示结构光重建中的投影预算更低。总的来说，操作符和残差引导自主决策使用可测量的物理证据。