论文
AnovaX:具备LLM规划、类型化执行器与自适应恢复的本地多智能体语音助手
AnovaX: A Local, Multi-Agent Voice Assistant with LLM Planning, Typed Executors, and Adaptive Recovery
摘要
桌面语音助手仍被云流水线主导:原始音频被传出本机,技能集固定。我们介绍AnovaX,一个完全运行在用户电脑上的本地优先小型助手,把桌面本身当作其操作面。单个Python进程串起唤醒词门控、语音流水线、输出JSON工具调用计划的LLM规划器(Gemini)、白名单与黑名单安全层、把每个计划翻译为类型化子智能体的多智能体编排器(运行在有界线程池上),以及在任何核心步骤失败时接管的自适应恢复循环。每个工具对应一个专门的智能体类(AppAgent、TypingAgent、BrowserAgent等九个),各有超时、重试策略与共享资源锁。递归的MetaAgent允许规划器把子目标再委托给自己,嵌套上限两层。恢复循环使用紧凑的ReAct风格提示,并以只读工具的投机执行掩盖Gemini的延迟。配套的Flask服务器在本地WiFi上提供手机友好的远程界面,实时镜像每个智能体生命周期事件到手机,并通过MJPEG回传笔记本屏幕,让用户在另一房间用手机观看远程命令落地执行。该项目的意义不在于与Siri或Alexa竞争,而在于证明一个清晰、几千行代码的助手足以完成打开应用、输入、搜索、并发协调、从单步失败中恢复、并被另一房间的手机完全驱动——全程LLM不直接触碰键盘。