技术实践

OpenAI用 Databricks 构建支撑 ChatGPT 的治理化多云数据平台

应用与实践结构化分析、预测与决策

概述

背景与问题:ChatGPT、OpenAI API与数千名员工的内部工具,需要一个能扛住突发增长、跨多云运行并跨业务单元保持治理的数据底座。方案与落地:据Databricks官网客户故事,OpenAI自2024年起在Azure与AWS上使用Databricks,使用数据落入Unity Catalog治理的Delta表,经分层管道服务产品分析、财务、安全与信任团队,负载涵盖滥用检测、隐私敏感分析与全公司仪表盘,数千内部用户做即席分析;安全团队用流式管道标准化审计日志做威胁检测,并让Codex智能体经SQL API查询治理后的安全数据;营销团队以Bronze-Silver-Gold分层架构支撑10亿周活用户规模的运营。双方还达成多年协议,GPT模型与Codex原生进入Databricks,企业客户可在Unity Catalog治理下经SQL或API调用前沿模型而无需迁移敏感数据,Genie亦可经MCP Server接入。效果与数据:官方称Bronze-Silver-Gold架构每月节省40万美元存储成本,营销人员无需写SQL即可构建受众;案例为厂商联合自述口径,未见独立核验。