收藏本站
《南京师范大学》 2019年
收藏 | 手机打开
二维码
手机客户端打开本文

基于多模态的在线学习情感分析模型设计与实现

麻益通  
【摘要】:作为“互联网+教育”的新兴产物,在线学习近几年的发展如火如荼,但师生空间上的分离状态导致情感交流缺失是目前在线学习面临的巨大挑战。为了更加深入地了解学习者的情感倾向和学习状态,本文提出了一种基于多模态的在线学习情感分析模型,为在线学习情感分析提供了新的视角。首先,针对目前在线学习情感分析的研究现状与存在的问题,提出建立基于评论文字、表情符号、面部表情、肢体动作4种模态数据的在线学习情感分析模型。该模型主要包括4个关键步骤:多模态数据的采集、多模态数据的预处理、多模态数据的特征提取、多模态数据的融合。在数据采集阶段,分别使用爬虫技术和摄像头捕捉技术来获取数据。在预处理阶段,对于评论文字和表情符号,预处理包括:评论文字提取、分词、词性标注三个步骤;对于面部表情和肢体动作,预处理包括:图像增强、灰度化、几何归一化三个步骤。在特征提取阶段,评论文字采用TF-IDF方法;表情符号采用构建情感词典的方法;面部表情采用LBP直方图对面部特征进行提取;肢体动作采用人脸与基准脸的相对大小对身体前倾、后仰状态进行判断。最后采用基于支持向量机后验概率的加权求和方法对多模态数据进行决策层融合。接着,对本文提出的基于多模态的在线学习情感分析模型进行实验,实验表明:与已有工作相比,该模型无需穿戴设备、无需收集语音,降低了学习成本和学习环境要求,具有更强的实用性和推广性;与单模态数据情感分析模型相比,该模型具有更高的准确率,可以更加深入地了解学习者的情感倾向和学习状态。最后,本文实现了基于多模态的在线学习情感分析原型系统,给出了开发环境与工具,着重介绍了学习行为采集、学习行为检测以及多模态情感分析等功能模块的实现。通过实验表明,系统运行效果良好,能够分析在线学习者的情感倾向并了解在线学习者的学习状态。
【学位授予单位】:南京师范大学
【学位级别】:硕士
【学位授予年份】:2019
【分类号】:TP391.41;G434

手机知网App
【相似文献】
中国期刊全文数据库 前10条
1 侯旭京;;多模态隐喻浅析土味情话——基于综艺节目《非常完美》男女嘉宾对话[J];海外英语;2019年22期
2 王芳;;网络多模态环境下大学生外语学习焦虑及干预策略[J];海外英语;2019年21期
3 黄立鹤;张德禄;;多核并行架构:多模态研究的范式、路径及领域问题之辨[J];外语教学;2019年01期
4 赵雨菲;;近五年我国多模态翻译研究综述[J];农家参谋;2019年04期
5 闫雪锋;;多模态话语视域下“翻转课堂”教学模式的改革与探索——以西安职业技术学院公共基础课为例[J];才智;2019年10期
6 张楠;张海;杨絮;;荷兰开放大学的大数据多模态学习分析研究新进展[J];中国信息技术教育;2019年Z3期
7 杜中全;赵志坚;;基于多模态与跨文化的信息素养培养路径研究[J];情报科学;2019年10期
8 李文;王振华;;司法话语多模态研究的现状与未来[J];上海交通大学学报(哲学社会科学版);2019年05期
9 蒋海燕;;基于学习风格理论的大学英语多模态识读教学[J];桂林师范高等专科学校学报;2019年05期
10 王妤娜;;小学语文渗透儿童哲学教育的多模态教学模式[J];福建基础教育研究;2019年09期
中国重要会议论文全文数据库 前10条
1 唐淑华;;文学语篇的语言学研究视角:多模态认知诗学——《多模态、认知和实验文学》评介[A];认知诗学2014年第1辑[C];2014年
2 杜玲莉;王开建;纪再祥;;基于多模态话语理论的大学英语教学改革[A];新教育时代(2015年10月 总第1辑)[C];2015年
3 王琳;;浅析多模态话语分析理论在初中英语写作教学中的应用[A];第二届世纪之星创新教育论坛论文集[C];2015年
4 张霄军;;多模态语料库:抢救濒危语言的有效途径[A];民族语言文字信息技术研究——第十一届全国民族语言文字信息学术研讨会论文集[C];2007年
5 张莹;;大学英语课堂的多模态教学研究[A];“决策论坛——基于公共管理学视角的决策研讨会”论文集(下)[C];2015年
6 夏凡;王宏;;多模态情感数据标注方法与实现[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
7 张旭;郭晨;孙建波;;自适应多模态克隆选择算法[A];2007年中国智能自动化会议论文集[C];2007年
8 赵广州;;从多模态话语理论角度来看交际教学法中的角色扮演[A];福建省外国语文学会2010年年会论文集[C];2010年
9 李丹;;多模态理论框架下初中英语课堂中多媒体技术使用的必要性和有效性研究[A];外语教育与翻译发展创新研究(第八卷)[C];2019年
10 霍畅;侯婷婷;;基于大学英语翻转课堂的多模态教学研究[A];外语教育与翻译发展创新研究(第六卷)[C];2017年
中国重要报纸全文数据库 前10条
1 西南交通大学外国语学院 罗载兵;多模态隐喻的语义发生[N];中国社会科学报;2019年
2 苏州大学跨文化研究中心、天津职业技术师范大学非盟研究中心 朱玲;多模态:翻译研究的新视角[N];中国社会科学报;2017年
3 中国工程院院士 邬江兴;多模态智慧网络与内生安全[N];中国信息化周报;2018年
4 浙江万里学院外语部 王中祥;多模态研究:认知语言学的新方法[N];中国社会科学报;2017年
5 记者 戴丽昕;共融机器人多模态转变成为发展趋势[N];上海科技报;2017年
6 西北师范大学外国语学院 吕文澎 兰州商学院陇桥学院外国语言文学系 韩世霞;多模态写作的特征与趋势[N];中国社会科学报;2016年
7 同济大学外国语学院 黄立鹤;多模态语言研究发展前景广阔[N];中国社会科学报;2016年
8 记者 张建列 通讯员 冯春;深圳先进院研制出新一代多模态显微系统[N];广东科技报;2016年
9 本报见习记者 辛雨;成像设施,有“图”有“真相”[N];中国科学报;2019年
10 本报记者 顾鸿儒;人工智能尚未到来 多模态融合成为趋势[N];中国电子报;2019年
中国博士学位论文全文数据库 前10条
1 赵维;基于多模态影像数据的脑网络研究[D];湖南师范大学;2019年
2 曹俊亮;水下滑翔机多模态运动控制与路径规划研究[D];上海交通大学;2016年
3 胡敏;多模态靶向纳米探针在微小肝癌的诊断及光热治疗的实验研究[D];南方医科大学;2018年
4 刘曌雯;多模态生物数据分析与挖掘研究[D];西安电子科技大学;2018年
5 张灵均;多模态数据分类的模糊粗糙方法研究[D];天津大学;2017年
6 张淑美;基于数据驱动的复杂多模态过程模态识别及过程监测研究[D];东北大学;2016年
7 屈雯;基于多模态内容分析的多视角视频推荐技术研究[D];东北大学;2015年
8 马腾;基于mVEP和MI多模态脑机接口的关键技术研究[D];电子科技大学;2018年
9 年福东;基于语义先验约束的多媒体特征表示研究[D];安徽大学;2018年
10 李钊;多模态数据分类与检索的关键技术研究[D];北京交通大学;2018年
中国硕士学位论文全文数据库 前10条
1 李诗瑶;美食纪录片中的多模态隐喻研究[D];西南大学;2019年
2 何慧敏;多模态视域下儿童绘本汉译研究[D];华侨大学;2019年
3 黄宗;“一带一路”宣传片《大道之行》中多模态转喻及隐喻的认知研究[D];湖南师范大学;2019年
4 周琴;“梦娃”系列公益广告中多模态隐喻及转喻的认知研究[D];湖南师范大学;2019年
5 辛卓琼;英汉时事新闻中多模态语篇动态意义建构的认知对比研究[D];湖南师范大学;2019年
6 李梦思;中美金融类企业主页“涉人”图片的多模态话语对比分析[D];华侨大学;2019年
7 朱云;多模态话语视角下马克思主义文本通俗化释读的模态配置研究[D];湖南工业大学;2019年
8 郑怡;多模态话语分析理论在高中词汇教学中的调查研究[D];西安外国语大学;2019年
9 游淑梅;基于多模态话语分析理论的高中英语词汇教学实验研究[D];赣南师范大学;2018年
10 兰凤英;多模态视角下的高中英语写作教学实验研究[D];赣南师范大学;2018年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026