技术实践
支付宝AI找优惠团队以双门槛评测选定Qwen3-8B做意图识别
概述
支付宝在618大促的C端对话式“AI找优惠”二期中新增意图识别模块:把用户的自然语言请求翻译为意图类型(ITEM商品/BENEFIT权益/VAGUE模糊/IRRELEVANT无关四类及优先级)、关键词与描述摘要,供下游权益与商品召回使用。团队从7个Qwen3候选模型中排除多模态与嵌入模型,按效果、时延、成本、上下文长度四个维度,在52条人工精标的黄金用例(含train/test切分)上评测;因14B模型存在交付资源风险,最终线上采用Qwen3-8B。工程配套包括“评测—打分—收敛判断—改写”的system prompt自动迭代闭环,采用6维度双轨评分与train≥90、test≥92的双门槛验收。做线上意图识别这类小模型选型的团队,其四维评测维度、双门槛验收与“资源风险否决”的决策细节都值得直接套用。