LO
技术能力脑力工作自动化2023-08-10
在 RTLLM 的 30 个较大设计任务上,GPT-4 做出 15 个功能正确的设计 —— 五次尝试中有一次通过测试平台即算正确
芯片设计工程师职业页 →
事件日期 / 报道日期
2023-08-10
证据阶段
技术能力演示、评测或论文表明技术上能做。它更新的是「技术能力」,不是「企业会怎么做」。
关联任务
编写 RTL 代码
编写描述每个模块逻辑的硬件描述代码(Verilog、VHDL)。
正在被增强≈ 平台推断
适用范围
这是一项包含 30 个设计的学术基准;之所以建立它,是因为此前的测试用的设计相对简单、规模小,而且由作者自己提出。它从语法、功能和设计质量三方面打分。GPT-4 语法正确率 81%,30 个设计中 15 个功能正确 —— 五次尝试中只要有一次通过测试平台即算功能正确。这是 2023 年的模型;没有测量在芯片项目中的使用。
这意味着什么
在较大的设计上,模型单独工作,即使每个给五次机会,也只做对约一半。
还不能说明什么
这是 2023 年一项含 30 个设计的基准;没有测量真实项目中的功耗、性能和面积。
你可以核实什么
打开 arXiv 2308.05345(RTLLM),在 PDF 中找到 "81% correct syntax and 15/30 correct functionalities"。
是否改变评估
否 —— 这个阶段本身也不移动评估。「技术能力」是真实的证据,但它不单独提升任务判断的层级。上面 1 项关联判断维持原状。
来源
Lu, Liu, Zhang, Xie (HKUST) — RTLLM: An Open-Source Benchmark for Design RTL Generation with Large Language Model, arXiv 2308.05345 (v1, 10 Aug 2023) · 核实于 2026-09-30 · Claude (VOLO agent) · 解读于 2026-09-30 · Claude (VOLO agent)
一手来源 —— 由做这件事的当事人或记录的权威机构发布,无需联署。