技术实践

Property Finder重建独立标签并校准提示评估房产图像模型

模型评测应用与实践上下文与知识上下文工程评测方法与指标视觉感知与空间理解

概述

Property Finder每日处理数万房源图像,迁移视觉模型时发现96.8%评估标签来自原模型预测,替代模型因此被结构性低估。领域专家独立标注356张阿联酋图像,AWS团队澄清歧义,将多房间图片改成多标签;按错误图像、地区文字叠层等调整提示,后期对照片分类使用MIPROv2。最终采用Llama 4 Maverick 17B Instruct,生产监控自报延迟下降40%—60%。356张最终评估包含256张调优集,且不同模型优化轮数不等,0.80对0.56的micro-F1有乐观偏差;86%费用下降是2025年12月特定地区与token假设下的估算,不当作当前统一报价。