计算机应用

作者：韩令敏, 陈仙红, 熊文梦

单位：北京工业大学 信息科学技术学院，北京 100124

关键词：情感识别,双模态,模态融合,语音,文本

基金：国家自然科学基金资助项目(62006010);北京市教育委员会科技/社科计划项目(KM202210005029)

情感识别是一种让计算机识别和理解人类情感的技术，在众多领域都起着重要的作用，也是人工智能领域重要的发展方向。因此，梳理与归纳基于语音和文本的双模态情感识别的研究现状：首先，分类阐述情感表示空间；其次，按照情感数据库的情感表示空间对这些数据库进行分类，并总结常见的多模态情感数据库；再次，介绍基于语音和文本的双模态情感识别方法，包括特征提取、模态融合和决策分类，重点介绍模态融合方法并将这些方法分为特征级融合、决策级融合、模型级融合和多层次融合这4类；此外，比较和分析一系列语音和文本双模态情感识别方法的结果；最后，介绍情感识别的应用场景、面临的挑战与未来的发展方向。以上旨在对多模态情感识别，尤其是对基于语音和文本的双模态情感识别的相关工作进行分析与总结，并为情感识别提供有价值的参考。

来源：2025年第4期

《计算机应用》期刊编辑部

查看计算机应用杂志2025年第4期