论文

EvolveTrade:以经验驱动策略优化的自演化交易智能体

EvolveTrade: Experience-Driven Policy Refinement for Self-Evolving LLM Trading Agents

智能体系统模型训练强化学习Agent HarnessAgentic RL

摘要

大模型交易智能体能结合市场数据、新闻和可执行分析,但行为常由部署前固定的人工工具策略控制,限制其适应市场变化下的证据收集、工具调用、信号验证和风险管理。我们提出自演化框架EvolveTrade,把工具型交易智能体系统提示视为文本参数化策略。每个更新区间后,策略智能体利用累积决策轨迹和已实现投资组合反馈修订策略,底层大模型保持不变。更新策略用于下一批交易决策,使信息获取与组合构建程序逐渐优化。跨多种市场状态和两个大模型骨干的实验显示,EvolveTrade常优于固定策略基线,在多数评估设置中改善夏普比率和累计收益。行为分析显示,自演化策略增加代码介导的分析,激活与市场状态相关的计算;案例级策略到收益归因追踪策略引发的配置变化如何贡献已实现收益差异。结果提示,适应性修改可复用工具使用程序,是构建更稳健交易智能体的重要方向。

EvolveTrade:以经验驱动策略优化的自演化交易智能体:论文配图
图1:概念比较。(A)静态智能体仅接收固定价格与新闻观察,不使用工具,也不从反馈学习。(B)静态工具调用智能体主动检索价格、新闻和代码信息,但部署后策略固定。(C)EvolveTrade增加策略智能体,在每个交易区间结束后读取实际交易与逐资产推理并修正策略,使后续策略受到自身已实现经验的影响。