国内刊号:51-1307/TP
国际刊号:1001-9081
发布日期:
作者:沈斌, 陈晓宁, 程华, 房一泉, 王慧锋
单位:1.华东理工大学 信息化与数据管理中心,上海 200237;2.华东理工大学 信息科学与工程学院,上海 200237;3.华东理工大学 教务处,上海 200237
关键词:本科教学评估,大语言模型,智能体,数智化,教育信息化
基金:教育部课题-高校评估数智化研究(P250603)
本科教学审核评估作为高等教育质量保障的重要手段,它的科学合理实施直接影响高校人才培养水平。然而,传统的人工审阅模式在面对海量异构数据时效率低下且主观性强,难以满足本科教学评估对精准性和标准化的需求。因此,提出一种基于大语言模型(LLM)和多智能体架构的本科教学评估系统——智评宝(SmartEval)。该系统通过语义理解模块解析输入内容,并利用计划器进行任务分解与调度,同时结合检索增强生成(RAG)模块及问答、摘要与诊断三类智能体实现对“数据采集-指标分析-决策支持”全流程的自动化处理。在2023年度部分高校本科教学评估的“1+3+3”系列报告基础上的实验结果表明,与GLM-4和Qwen2.5等主流LLM相比,SmartEval在问答准确率、摘要ROUGE-L(Recall-Oriented Understudy for Gisting Evaluation L)值以及诊断F1值等指标上均表现出显著优势。进一步地,通过与专家组的一致性检验比对,验证了SmartEval结果的可靠性。
来源:2026年第3期
《计算机应用》期刊编辑部