多模态学习的研究进展与趋势:跨学科的透视

作     者：胡翰林 冯瑞 HU Han-in;FENG Rui

作者机构：西南大学重庆400715 

出 版 物：《黑龙江高教研究》 (Heilongjiang Researches on Higher Education)

年 卷 期：2024年第42卷第6期

页      面：148-154页

学科分类：0401[教育学-教育学] 04[教育学] 040110[教育学-教育技术学（可授教育学、理学学位）] 

基　　金：2023年四川大学生思想政治教育研究中心项目“VR技术下提升高校思想政治课学习投入度的应用研究”(编号:CSZ23151) 重庆市研究生科研创新项目“虚拟现实环境中多模态学习活动的设计与应用研究”(编号:CYB22093) 

主　　题：多模态 多模态学习 多模态数据 跨学科研究 

摘      要：多模态学习注重信息的多样存在形式以及多种感知通道对认知与学习过程的积极影响,在智能技术助力教与学的时代具有重要价值,系统性地梳理多模态学习相关研究是其进一步理论与实践研究的关键。首先,从不同多模态学习的来源出发进行概念辨析,并提出多模态学习的概念内涵;其次,从三个学科视角分析多模态学习的研究进展,即计算机科学视角的多模态数据表示、融合、对齐以及应用等研究,认知心理学视角的信息加工、学习注意以及数据采集等研究,教育学视角的多模态学习环境、学习分析以及学习效果等研究。最后,提出多模态学习的研究趋势,即推进多模态学习跨学科融合研究、优化多模态数据中的异质性、强化多模态学习的教育实践指导、解决多模态数据分析的伦理问题,为进一步多模态学习的理论与实践研究提供参考。