收藏本站
《北京科技大学》 2015年
收藏 | 手机打开
二维码
手机客户端打开本文

面向智能家居的虚拟人交互方法与技术的研究

杜坤坤  
【摘要】:在智能家居领域中,研究者们对技术层面的新研究层出不穷。但是,对于完整的智能家居系统来讲,仅仅考虑这些硬件的环境,而没有考虑软件的环境,就会忽略用户的个性化体验,忽视用户的内在需求。因此,除了这些智能化的硬件设施以外,还需要一套智能的软环境协助,以达到和谐的个性的人机交互的目的。智能可以通过情感来实现,虚拟人与用户的智能交流也可以通过情感交流来实现。本文以实现智能为目的,以智能家居为应用背景,对虚拟人赋予情感并与用户交互,以情感计算和人机交互为研究理论和方法,探讨智能家居中的利用虚拟人进行个性化交互的关键问题和核心技术。 文章的研究内容以及创新点如下面所示: (1)心理学的情感维度理论认为,人类的情感可以由维度空间表达,但是在情感计算中,情感究竟采用几维的方式进行表达,研究者们并没有达成共识。利用虚拟人进行人机交互时,面对语音文本的情感维度的表达问题,本文提出了一种基于5点语义差异量表的测试方法,通过设置调查问卷,对心理学涉及的16个维度进行评价。5点语义差异量表是根据9点语义差异量表简化而来,由50名测试者对20句文本进行评价,评测的数据通过均值和方差的对比,证明了简化的5点语义差异量表的可行性。基于此量表,由同样的50名测试者对20句情感文本的调查问卷进行了16个维度的评价。通过对评测的数据进行积差相关和主成分分析,认为这16个维度具有高度相关性,且这16个维度可以划分为5个维度。其中,强度和正负性这两个维度就能够表达70%左右的情感,确信度、优势度和注意度对情感表达的贡献依次减少。因此,有关虚拟人的语音文本的情感表达,可以用二维的情感空问进行计算。对于高标准的情感表达需求,可采用三维或者四维的情感空间进行计算。 (2)心理学的情感离散观认为,人类的情感可以由几种基本情感和几种复杂情感刻画,最具有代表性的情感离散观模型是基于概率的隐马尔可夫模型(HMM)。利用虚拟人进行人机交互时,可以选择HMM情感模型对虚拟人的情感进行刻画。针对HMM的情感计算缺少认知因素的影响,本文提出了一种改进的具有认知和记忆的HMM情感模型。改进的模型通过情感能量的定义,以及对心境能量进行拉普拉斯变换和反变换,认为心境的变化模型是与时间有密切关系的。基于此,依据生理性周期对心境的影响,本文给出了心境的变化模型,以弥补没有认知因素的HMM情感模型。同时,为了使得该模型具有记忆功能,在原始的HMM情感模型中添加了对前一时刻的情感模型的构建。从数据的分析上来看,添加了记忆功能的HMM情感模型的结果是加强了概率值较大的情感状态,同时又削弱了概率值较小的情感状态,这与我们日常认知是一致的。 (3)在虚拟人对语音文本进行情感分析时,本文提出了一种基于情感词库的层次分析法。首先本文构建一个适用于智能家居的情感词库。并对其进行了多重的标注,且该词库具有扩展性。然后,为了更好地筛选出具有情感的情感词,本文从词性这一独特的视角中,通过约简词性的方法,选取特征词汇作为情感词。最后,从分层的角度对语音文本进行情感分析,其中三个层次分别指的是词汇——句子——文本。针对语音文本,本文分别对情感的维度观模型和基于认知和记忆的HMM模型进行了分析。在情感的维度观模型中,定义了这三个层次的情感正负性和强度的表达式。作为最小粒度的词汇,其情感正负性是经由情感词库的映射得到,其情感的强度是由计算式得到,该计算式对转折句有良好的计算特性。在基于认知和记忆的HMM模型中,通过对心境变化模型中的影响因子的分析与设定,以及记忆参数和原始参数的设定,实现了语音文本的离散观的情感分析。 (4)为了实现情感的交互,文章设计了一款面向智能家居的交互系统,通过设计虚拟人的形象,并赋予虚拟管家的职能,使之为载体与用户进行情感交互。作为智能家居的虚拟管家,虚拟人不仅可以利用语音交互技术与用户进行交流,以及实现基本的控制功能,而且还能够与用户实现情感的交互。在虚拟管家的控制下,智能家居系统可以实现身份识别、记事本、理财分析、天气预报、网页浏览等基本功能。同时,本文还设计了个性化的功能,即基于句模匹配的问答系统和基于语音文本的聊天系统。在问答系统中,输入的语音文本被划分为7种不同类型的句子模型,每种句模都有不同的句子匹配规则,通过对多种句子模型的匹配,输入的语音文本可以从数据库中匹配到合适的输出。通过实验证明,多种句模和规则的匹配可以提高问答系统的输出正确率。在基于语音文本的聊天系统中,利用维度观模型和基于认知和记忆的HMM模型,对语音文本进行情感的分析。从程序运行的结果来看,两种模型的结果具有相似性,都能较准确地实现虚拟人与用户的情感交互。
【学位授予单位】:北京科技大学
【学位级别】:博士
【学位授予年份】:2015
【分类号】:TP391.44;TN929.5;TU855

手机知网App
【参考文献】
中国期刊全文数据库 前10条
1 王延江,袁保宗;多模态人机交互中基于笔输入的手势识别[J];北方交通大学学报;2001年02期
2 龚汉明,周长胜;汉语分词技术综述[J];北京机械工业学院学报;2004年03期
3 王志良;人工心理学──关于更接近人脑工作模式的科学[J];北京科技大学学报;2000年05期
4 文庭孝;汉语自动分词研究进展[J];图书与情报;2005年05期
5 武志勇;;海信DNet-home:创新改变你的生活行为方式[J];TWICE消费电子商讯;2008年06期
6 王玉洁;王志良;王国江;陈锋军;王怀威;;一种情感模型的研究[J];辽宁工程技术大学学报;2006年04期
7 温伯银;智能建筑的发展与实施[J];工程设计CAD及自动化;1997年01期
8 杨承根;杨琴;;SPSS在测验结果信度计算中的应用[J];高等函授学报(自然科学版);2010年01期
9 戚振兴;;浅议我国智能家居发展[J];广西轻工业;2009年10期
10 王晓丽;高慧昀;;基于PAD情绪量表的语言表现力研究[J];毕节学院学报;2012年08期
中国博士学位论文全文数据库 前1条
1 倪慧;自主虚拟人关键技术的研究[D];天津大学;2007年
【共引文献】
中国期刊全文数据库 前10条
1 李湘苏;余先纯;王力群;朱雷;;多媒体技术对化学教学的效果分析——以农林医类“溶液的渗透压”教学为例[J];安徽农业科学;2011年11期
2 李湘苏;王力群;朱雷;;多媒体课件的设计原理在生物化学教学中的实证研究——以农林医专业“蛋白质的生物合成”课件为例[J];安徽农业科学;2011年18期
3 韩雪静;;浅谈如何培养声乐学习者的创造性思维[J];安徽文学(下半月);2010年02期
4 田建林;杨海荣;;公园中几类游园行为的分析与设计策略——以张家界市城区公园为例[J];现代农业科技;2009年13期
5 任其平;影响问题解决的心理因素[J];安庆师范学院学报(社会科学版);2003年02期
6 任其平;;梦的本质的心理学解读[J];安庆师范学院学报(社会科学版);2006年03期
7 娄会东;肖强;;基于HDC提取关键点的手势识别算法[J];安阳工学院学报;2007年04期
8 史海玲;大学教育质量的危机——“考前突击现象”剖析[J];北京工业职业技术学院学报;2002年03期
9 程瑞雪;;记忆是声乐学习过程中一切心理过程的基础[J];边疆经济与文化;2007年11期
10 王志良,赵彦玲,郝春辉,永井正武,崔国伟;采用人工心理理论的商品选购专家系统[J];北京科技大学学报;2001年04期
中国重要会议论文全文数据库 前10条
1 解迎刚;王志良;张琴;;基于模糊理论的智能服装交易系统研究[A];第二十六届中国控制会议论文集[C];2007年
2 解迎刚;王志良;;学习者情绪空间定义及应用[A];第二十六届中国控制会议论文集[C];2007年
3 韦向峰;张全;缪建明;池毓焕;;基于语义块的事件倾向性分析研究[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
4 秦春雷;余雪丽;;基于3DSMax的煤矿事故救援游戏式训练系统表情动画设计与实现[A];AECC专题学术研讨会论文集[C];2007年
5 蓝晗;;“学困班级”班主任工作中需要妥善处理的几个关系[A];广西新时期班主任工作研讨班论文集[C];2008年
6 边海容;万常选;李国林;杨莉;;Web金融信息情感倾向与上市公司财务危机的关系研究[A];信息化、工业化融合与服务创新——第十三届计算机模拟与信息技术学术会议论文集[C];2011年
7 黄捷;;人机交互在震动环境下的仿真模型设计与实验测试[A];第四届和谐人机环境联合学术会议论文集[C];2008年
8 孙佩宏;陶霖密;;PAD情感空间中情感距离度量方法[A];第四届和谐人机环境联合学术会议论文集[C];2008年
9 龙昭华;李景中;蒋贵全;张林;;基于无线传感器网络的普适计算研究[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
10 平安;王志良;;基于生理信号的人机情感交互系统应用研究综述[A];2009中国控制与决策会议论文集(3)[C];2009年
中国博士学位论文全文数据库 前10条
1 元莲仙;汉韩语言对比研究及在对韩汉语教学中的应用[D];南开大学;2010年
2 谢宣正;企业人力资源管理人员薪酬满意度研究[D];暨南大学;2009年
3 牛延超;无线传感器网络非测距定位技术研究[D];北京交通大学;2010年
4 邓斌;B2C在线评论中的客户知识管理研究[D];电子科技大学;2010年
5 侯锋;中文报业出版的文字质量智能辅助控制技术研究[D];国防科学技术大学;2010年
6 刘达禹;国家控制与社会自主[D];吉林大学;2011年
7 张长利;面向特定领域的互联网舆情分析技术研究[D];吉林大学;2011年
8 杨峰;本体映射关键技术研究[D];吉林大学;2011年
9 刘晟楠;消费者虚拟触觉研究:成因与结果[D];大连理工大学;2011年
10 赵志英;高等体育院校体育专业学生实践能力与培养[D];北京体育大学;2011年
中国硕士学位论文全文数据库 前10条
1 唐永木;人力资本对农村家庭贫困的影响研究[D];华中农业大学;2010年
2 马爽;元认知干预技术加入生理训练对惊恐障碍治疗效果的研究[D];辽宁师范大学;2010年
3 江达秀;基于HMAX模型的人脸表情识别研究[D];浙江理工大学;2010年
4 郭明;基于文本分类技术的文本情感倾向性研究[D];郑州大学;2010年
5 左维松;规则和统计相结合的篇章情感倾向性分析研究[D];郑州大学;2010年
6 梁晓丽;基于人脸检测识别的自动签到方法研究[D];哈尔滨工程大学;2010年
7 宁吉凤;职场员工情绪智力与工作绩效的关系研究[D];哈尔滨工程大学;2010年
8 刘波;文本驱动的可视语音合成技术研究[D];哈尔滨工程大学;2010年
9 吕韶华;面向中文评论文本的情感倾向性研究[D];大连理工大学;2010年
10 韩丹丹;从注意环节的聚焦看信息接收与口译效果[D];大连理工大学;2010年
【二级参考文献】
中国期刊全文数据库 前10条
1 王志良;人工心理学──关于更接近人脑工作模式的科学[J];北京科技大学学报;2000年05期
2 文庭孝;情报检索中汉语语词自动切分研究[J];图书与情报;2001年02期
3 王志征,余岳峰,姚国平;主成份分析法在电力负荷预测中的应用[J];电力需求侧管理;2003年03期
4 张晓星,周湶,任海军,孙才新,程其云;基于增量约简算法确定电力负荷预测模型输入参数[J];电力系统自动化;2005年13期
5 蒋微;中文搜索引擎的自动分词算法[J];电脑开发与应用;2002年06期
6 罗治强,张焰,朱杰;粗集理论在电力系统负荷预测中的应用[J];电网技术;2004年03期
7 程其云,孙才新,周湶,雷绍兰,张晓星;粗糙集信息熵与自适应神经网络模糊系统相结合的电力短期负荷预测模型及方法[J];电网技术;2004年17期
8 贺怀清,洪炳熔;一种虚拟人运动拟合算法[J];电子学报;2001年08期
9 付华;基于多传感器信息融合的智能仪表研究[J];辽宁工程技术大学学报;2004年06期
10 孟宁,牛东晓,陈莉;电力市场营销组合策略的人工神经网络模型[J];华北电力大学学报;2003年03期
中国重要会议论文全文数据库 前2条
1 王志良;;人工心理研究进展[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年
2 朱朝晖;潘志庚;唐冰;Rui Prada;;E-TEATRIX中虚拟人物及情绪系统构造[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年
中国博士学位论文全文数据库 前1条
1 刘艳;三维虚拟人行为控制关键技术的研究[D];天津大学;2004年
【相似文献】
中国期刊全文数据库 前10条
1 胡文,洪炳熔,贺怀清;基于位置推算算法的虚拟人感知机制的研究[J];哈尔滨工业大学学报;2001年02期
2 贺怀清,洪炳熔,刘浩翰;一种基于力矩优化的虚拟人运动控制算法[J];宇航学报;2001年03期
3 刘涛 ,孙守迁 ,潘云鹤;面向艺术与设计的虚拟人技术研究[J];计算机辅助设计与图形学学报;2004年11期
4 陈启祥;魏克俊;;虚拟人技术研究[J];中国水运(学术版);2006年05期
5 阎光伟;胡海涛;赵建涛;;大规模虚拟人的实时多样性绘制[J];华北电力大学学报(自然科学版);2007年06期
6 王朝晖;郑国磊;朱心雄;;虚拟人自适应行为的多目标模糊评估与仿真[J];计算机辅助设计与图形学学报;2008年02期
7 程熙;潘志庚;;虚拟人运动中受扰的平衡保持算法[J];计算机辅助设计与图形学学报;2009年03期
8 宋涛,欧宗瑛,陈伟卿;中国虚拟人三维模型重建和可视化[J];大连理工大学学报;2005年03期
9 罗冠 ,郝重阳 ,张雯 ,樊养余;虚拟人骨骼结构的多刚体系统建模方法研究[J];计算机辅助设计与图形学学报;2005年06期
10 费璟昊;樊建平;周树民;;虚拟人皮肤建模技术研究概况与展望[J];计算机辅助设计与图形学学报;2008年03期
中国重要会议论文全文数据库 前10条
1 刘箴;;虚拟人社会性非言语情绪交互研究[A];计算机技术与应用进展·2007——全国第18届计算机技术与应用(CACIS)学术会议论文集[C];2007年
2 张番;陈颖;冯秀娟;温文彪;常士楠;孙红三;;智能化虚拟人操作行为仿真分析及实现[A];二○○一年中国系统仿真学会学术年会论文集[C];2001年
3 赵江;冯秀娟;孙红三;温文彪;郑国磊;;虚拟人对目标物手捕获的实现[A];2003年全国系统仿真学术年会论文集[C];2003年
4 何雪微;龚光红;;虚拟人运动的动力学实现方法研究[A];2003年全国系统仿真学术年会论文集[C];2003年
5 卢晓军;李焱;贺汉根;;虚拟人行走规划仿真的研究与实现[A];全国第13届计算机辅助设计与图形学(CAD/CG)学术会议论文集[C];2004年
6 刘箴;;虚拟人的行为规划模型研究[A];全国第16届计算机科学与技术应用(CACIS)学术会议论文集[C];2004年
7 周小建;向楠;朱思语;潘志庚;;基于视觉的虚拟人情感交互系统[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【poster】[C];2011年
8 邹沐昌;代玉仁;韩春颖;;虚拟人的体育运动实体仿真的研究与实现[A];中国图象图形学会第十届全国图像图形学术会议(CIG’2001)和第一届全国虚拟现实技术研讨会(CVR’2001)论文集[C];2001年
9 胡维华;钱克宠;;娱乐型跑步机上三维场景与多角色虚拟人的融合设计[A];中国计算机图形学进展2008--第七届中国计算机图形学大会论文集[C];2008年
10 杨长水;高文;王兆其;陈益强;;个性化虚拟人体模型驱动方法[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年
中国重要报纸全文数据库 前10条
1 程乐华 (作者为中山大学心理系教授);长尾虚拟人:聚合人类时间和精力的长尾[N];第一财经日报;2007年
2 ;走近虚拟人[N];大众科技报;2003年
3 记者 翁淑贤;“中国虚拟人男1号”问世[N];人民日报;2005年
4 赵何娟;程乐华:SNS将带来新一轮社会变革[N];第一财经日报;2007年
5 腾 月;虚拟人何时为人类做替身[N];大众科技报;2004年
6 奇 云;中国虚拟人男Ⅰ号“有血有肉”[N];大众科技报;2005年
7 明江;虚拟人离我们有多远[N];中国商报;2003年
8 本报记者 项铮;从切片到虚拟人[N];科技日报;2002年
9 孔德芳;揭开虚拟人的真实身份[N];科技日报;2004年
10 ;“中国虚拟人女1号”面世[N];人民日报;2003年
中国博士学位论文全文数据库 前10条
1 倪慧;自主虚拟人关键技术的研究[D];天津大学;2007年
2 李石磊;数据和模型混合驱动的虚拟人运动生成与控制技术研究[D];国防科学技术大学;2009年
3 叶绿;虚拟教育环境中虚拟人(角色)技术的研究与应用[D];浙江大学;2005年
4 罗冠;虚拟人的运动生成及控制技术研究[D];西北工业大学;2004年
5 李小宁;虚拟人微观仿真与宏观交互关键技术研究[D];中国海洋大学;2013年
6 卢晓军;维修仿真中虚拟人动作建模与行为控制技术研究[D];国防科学技术大学;2006年
7 任利锋;虚拟环境中的虚拟人技术研究[D];浙江大学;2008年
8 索宁;基于运动捕捉的虚拟人关键技术研究[D];中国矿业大学(北京);2011年
9 向南;智能虚拟环境中虚拟人情感仿真研究[D];浙江大学;2012年
10 陈益强;基于数据挖掘的虚拟人多模式行为合成研究[D];中国科学院研究生院(计算技术研究所);2003年
中国硕士学位论文全文数据库 前10条
1 文占朝;基于流演算的智能虚拟人的研究与实现[D];江苏大学;2009年
2 林本敬;情感虚拟人技术在人机交互中的应用研究[D];北京化工大学;2009年
3 伍国永;姿态可变辐射虚拟人建模研究[D];合肥工业大学;2011年
4 郭丹丹;用于人机测试的虚拟人研究[D];天津大学;2004年
5 李睿;具有情感的自主化虚拟人关键技术研究[D];天津理工大学;2006年
6 程朋亮;智能化虚拟人行为控制关键技术研究[D];天津理工大学;2007年
7 苏金钊;虚拟人技术研究[D];郑州大学;2007年
8 任静丽;虚拟人建模及跑步运动控制技术的研究[D];武汉理工大学;2007年
9 王刚;基于情景演算的多智能体虚拟人行为的研究与实现[D];江苏大学;2007年
10 吴铃;文本驱动的虚拟人动作合成研究[D];西南交通大学;2012年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026