成果简介
    课堂教学评估是当前高校教学管理和教学质量监控的重要手段之一，直接关系到学校培养合格人才的目标实现。 本项目运用多模态大模型对于慕课网教学视频、教学大赛获奖视频等“金课”教学视频进行多模态特征解构，通过大模型提取文本、图片、音视频等非结构化数据里的内容和语义，进行视频动作识别、图像语音情感识别、文本处理，研究多模态特征向量对齐技术，实现多模态语义关联，形成课堂教学“金课”标准；并通过采集课堂教学视频进行特征向量关联度测算，研究多模态大模型的文本、视频和语音向量融合技术，生成课堂教学改进方案。本项目的推广应用，将有助于开展科学合理的课堂教学质量评价，推动高等教育高质量发展。

多模态大模型课堂教学质量评估应用研究技术路线


多模态大模型应用


语音及文本跨模态情感分析框架