Auto-DSM透视：基于LLM的DSM生成的黑盒评估框架

摘要

本文提出了一种黑盒评估框架，系统评估大型语言模型从结构化技术文档生成设计结构矩阵的能力。通过结合结构指标、分类指标和稳定性度量，该框架在虚构系统和真实冰箱分解数据集上验证了LLM在生成DSM时的表现与局限性。