收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

文本-可视语音合成系统的研究及实现

傅蓉  
【摘要】:文本-可视语音合成系统,将语音和图像两种模态结合到一起,建立了多模式人机交互接口,大大改善了人机交互的方式,在许多领域有着广泛的应用前景。为了生成具有较强真实感的,能应用于网络、嵌入式等环境的TTVS 系统,本文工作如下: 本文首先建立了一个二维标准人脸模型,并应用MPEG-4 人脸动画原理开发了二维人脸动画数据编辑工具,在此基础上建立以FAP 为驱动源的基于标准人脸的动画机制。通过改进的主动形状模型方法,开发了基于单张人脸图片的人脸模型匹配工具,从而建立了适用于任意人脸的动画机制。提出动态音节视位的概念,将文本映射为相应的音节视位。在音节视位的拼接过程中,先根据语音韵律规则对音节视位进行调整,然后根据用户指定的表情进行表情与视位融合,最后应用改进的Hermite 插值算法对音节视位进行拼接,从而合成了富有表情具有语音韵律感的人脸动画。借助科大讯飞文语合成系统,实现了语音与动画同步机制,实现了一个文本驱动的人脸语音动画系统。在原有聊天系统的基础上增加TTVS 功能,实现了一个网络语音动画聊天系统。 与以往不同,本文开发的TTVS 系统数据量小,能够实时生成,动画机制具有模型移植性,具有表情和语音韵律感,更具有真实感,能够适用于网络与嵌入式环境。 本课题受国家自然科学基金项目“虚拟人多模式行为协同关系学习算法的研究”资助。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 胡剑凌,徐盛,陈健;MPEG-4多媒体通信音频编码[J];计算机工程;2000年07期
2 樊振萍,唐继勇;基于RTP协议和MPEG-4的流媒体系统分析与实现[J];西部广播电视;2004年10期
3 鄢强,朱维乐;基于Nexperia PNX1300的MPEG-4实时远程视频监控系统[J];中国有线电视;2004年Z3期
4 陈军民;MPEG-4与PEZW信号编码算法[J];黑龙江通信技术;1998年04期
5 卢官明;MPEG-4中的Profiles及适用场合[J];南京邮电学院学报(自然科学版);2000年04期
6 ;Sun与飞利浦公司为无线和宽带市场开发MPEG-4解决方案[J];电信技术;2001年11期
7 ;MPEG-4中国汉唐叫板美国微软[J];软件工程师;2001年08期
8 许先斌,余韦,贾颖,孙立涛;基于RTP包本地丢失恢复的MPEG-4多播应用模型[J];计算机工程与设计;2005年04期
9 ;夏普参考出品MPEG-4录像机[J];电视技术;2000年11期
10 石旭利,张兆扬;小波变换和算术编码在MPEG-4中的应用[J];电视技术;2001年05期
11 朱小松,余英林;MPEG-4编、解码器容错技术的研究[J];电视技术;2003年05期
12 杨辉媛;浅析视频压缩国际标准及MPEG—4主要技术[J];电脑知识与技术;2004年26期
13 周晓光,王艳春;MPEG-4视频标准及其关键算法[J];信息技术;2004年09期
14 李庆萍,石中锁,陈明;MPEG-4在视频监控应用中的软件实现[J];微计算机信息;2004年12期
15 骆华;MPEG-4通用音频编码技术及解码器实现[J];现代计算机;2005年01期
16 唐瑞英,李华;MPEG-4视频对象分割技术[J];信号处理;2005年03期
17 杨群星,肖自美,郑伟国,刘红梅;多媒体通信的未来之路——MPEG-4与多媒体通信[J];今日电子;1997年04期
18 ;数码视讯应用MPEG-4技术致力于基于DSP硬件系统的研制[J];广播电视信息;2003年01期
19 李安明,贺德华;基于Internet的MPEG-4视频流传输系统[J];现代计算机;2004年01期
20 闵文凯;基于对象和内容的视频编码技术—MPEG-4[J];中国有线电视;2004年18期
中国重要会议论文全文数据库 前10条
1 徐振;李惠忠;;一种基于MPEG-4的可视通信便携终端的实现[A];中国电子学会第十五届信息论学术年会暨第一届全国网络编码学术年会论文集(下册)[C];2008年
2 何卫锋;梁圃;毛志刚;;面向流媒体的MPEG-4 AS Profile视频编/解码器的解决方案[A];中国通信集成电路技术与应用研讨会论文集[C];2004年
3 吕梦雅;向移山;;一种基于运动矢量的MPEG-4视频数字水印算法[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
4 吕梦雅;向移山;;一种基于运动矢量的MPEG-4视频数字水印算法[A];第二届全国信息检索与内容安全学术会议(NCIRCS-2005)论文集[C];2005年
5 李雄;张筱筠;;河南电力高清晰视频会议系统的建设[A];中国通信学会第五届学术年会论文集[C];2008年
6 倪伟;郭宝龙;;MPEG-4形状编码中的自适应二值运动估计算法[A];第三届全国数字成像技术及相关材料发展与应用学术研讨会论文摘要集[C];2004年
7 张志芳;李宇成;孔梁萍;;基于MPEG-4和RTP/RTCP的网络视频监控系统[A];冶金自动化信息网年会论文集[C];2004年
8 谭明;;浅谈MPEG标准的发展及其应用[A];江苏省通信学会2004年学术年会论文集[C];2004年
9 路意;李建华;王元吉;姜勤忠;付尧;;基于塔式结构的任意形状编码[A];第十一届全国信号处理学术年会(CCSP-2003)论文集[C];2003年
10 史军;何招友;季晓勇;;MPEG-4中DCT的应用及快速量化的实现[A];2005通信理论与技术新进展——第十届全国青年通信学术会议论文集[C];2005年
中国博士学位论文全文数据库 前10条
1 夏金祥;面向MPEG-4的视频分割和视频编码算法[D];电子科技大学;2004年
2 包红强;基于内容的视频运动对象分割技术研究[D];上海大学;2005年
3 杨高波;基于内容多媒体应用的语义视频对象提取及评价[D];上海大学;2004年
4 方勇;无线视频传输中的差错控制研究[D];西安电子科技大学;2005年
5 张庆利;视频对象自动分割技术及其细胞神经网络实现方法的研究[D];上海大学;2005年
6 于跃龙;视频语义信息提取关键技术研究[D];国防科学技术大学;2005年
7 朱向军;视频运动对象分割与先进运动估计/运动补偿算法之研究[D];浙江大学;2006年
8 洪飞;基于小波的网络业务研究[D];中国科学院研究生院(软件研究所);2004年
9 黄正军;基于主动网络的视频分级传输研究[D];华中科技大学;2006年
10 高伟;H.263-MPEG-4-H.264多标准视频转换编码系统关键技术研究[D];天津大学;2007年
中国硕士学位论文全文数据库 前10条
1 傅蓉;文本-可视语音合成系统的研究及实现[D];新疆大学;2005年
2 李锋垚;基于ARM9的MPEG-4视频解码播放系统设计[D];西北工业大学;2005年
3 张志芳;基于MPEG-4的网络视频监控系统(服务器端)[D];北方工业大学;2005年
4 吴则举;基于MPEG-4的视频对象分割算法研究[D];青岛科技大学;2005年
5 孙哲;基于MPEG-4的运动估计和码率控制技术的研究[D];电子科技大学;2005年
6 胡俊;基于MPEG-4的视频可伸缩性编码的研究[D];武汉理工大学;2006年
7 李华;基于MPEG-4的视频监控系统设计和实现[D];西南交通大学;2006年
8 马媛媛;基于智能手机的流媒体系统研究和实现[D];北京交通大学;2006年
9 何伟;MPEG-4 FGS视频流量模型的研究与仿真验证[D];国防科学技术大学;2003年
10 王钢;基于TMS320DM642 DSP的MPEG-4视频编码器实现与优化[D];吉林大学;2005年
中国重要报纸全文数据库 前10条
1 本报记者 王健;能插卡的MPEG-4播放器[N];中国计算机报;2005年
2 ;威视50便携式MPEG-4网络广播系统在企业通讯方面的应用[N];中国计算机报;2004年
3 本报记者 罗 兵;“MP4”揭开神秘面纱[N];中国质量报;2005年
4 本报记者 李献;IP网上的警卫眼[N];计算机世界;2004年
5 文/周悟;PMP成本结构分析[N];计算机世界;2005年
6 本报记者 刘小如;安全用户关注的重点[N];中国计算机报;2004年
7 执一;中国碟机企业破茧出新[N];中国电子报;2005年
8 烽火网络;烽火网络IPTV领先应用推动市场多赢[N];通信产业报;2005年
9 ;中国手机元器件市场一枝独秀[N];中国电子报;2005年
10 晓瑜;手机电视徘徊两种标准间[N];通信产业报;2004年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978