论文

SGAnalog:源于开源硅流片的端到端电路基准

SGAnalog: An End-to-End Circuit Benchmark from Open-Source Silicon Tapeouts

模型评测基准与评测资源

摘要

现有的模拟集成电路设计基准使两个问题难以回答:模型是否学习了可转移的电路技能而不是回忆熟悉的示例,以及其输出是否在定义的流程和测试条件下工作。我们引入了一个由与 Tiny Tapeout 制造梭相关的人为设计的开源电路构建的基准。该集合包含 273 个拓扑不同的顶级设计。每个源都在其班车提交记录的修订版本中检索,并在固定的容器化环境中进行处理。该管道从同一源文件中导出每个符合条件的原理图图像及其 SPICE 网表,为转录提供精确的结构参考。提交日期支持特定于模型的训练截止分析,而作者测试平台则提供用于调整大小的模拟上下文。该基准测试评估原理图到网表的转录和器件尺寸调整。在一组固定的 66 个转录任务上的 7 个模型中,最强的模型达到了 56.1% 的精确图同构性,而 7 个模型中有 6 个从小型到中型急剧下降。对于一个前沿模型,删除作者选择的标签会减少精确匹配,同时保留聚合结构 F1,这表明标签可以帮助连接性追踪。在 17 项规模调整任务中,领先模型收敛于所有 17 项建议,相对于人类参考达到 91.2 分(满分 100 分),而两个最新的 Claude 模型则拒绝了他们无异议转录的 4 项和 11 项相同提示;没有尺寸的提案得分为零。这两项任务产生不同的模型排名,暴露出不同的视觉和设计能力,并且在一个系列中,是策略而不是能力限制。

SGAnalog:源于开源硅流片的端到端电路基准的原论文方法或结果图
图 2:两个任务,端到端。上:转录。五晶体管 OTA 的输入原理图图像(左)和 claude-opus-5 的逐字输出网表(右)。其网络名称与附图不同,但其图形与参考同构。底部:全差分放大器的尺寸。该模型接收已删除尺寸的拓扑,然后其提案和人类参考在同一作者测试台中运行。汇总结果如表 3 所示。