收藏本站
收藏 | 论文排版

面向数据不规则分布的深度特征学习研究

刘家伦  
【摘要】:图像是人类获取信息的直接来源。随着互联网、移动智能设备和社交媒体等技术的迅猛发展,人们可以轻松地获取到大量的图像资源,与单一的小规模学术集不同,人们实际获取的大规模数据往往呈现出多模态,不均衡的分布,甚至是无标签的。本文将这类分布统一称为数据的不规则分布。数据的不规则分布问题广泛存在于学术研究以及实际生活中,尤其是随着近些年深度学习的迅速发展,为图像特征学习提供了强有力的研究途径,获得了计算机视觉等相关研究领域的高度关注,被广泛应用于学术界以及工业界。结合以上两点,针对数据不规则分布的深度特征学习具有显著的理论研究价值和强烈的实际应用需求,本文展开研究了数据不规则分布常见的三个问题,即数据呈现长尾分布问题,数据呈现多模态分布问题,以及训练域和测试域分布不对齐的问题。1)针对长尾分布问题,本文提出了两种方法:可学习的尾部数据扩充方法,Feature Cloud;基于模型抖动信息的的尾部数据扩充方法,MBJ。本文提出将头部类丰富的类内多样性迁移至尾部类来缓解尾部类类内多样性不足的问题。具体地,在特征空间中扩充尾部类的分布,使其具有与头部类相似范围的分布。将一个尾部特征向量替换为一簇特征向量,称之为Feature Cloud。实验结果显示,Feature Cloud在长尾表征学习以及分类学习任务上获得了国际领先水平的性能表现。本文提出利用历史模型之间的抖动信息来丰富尾部数据的多样性。模型在每次迭代后,参数会不断发生变化,产生权重向量的抖动(weight jitter),对应地,给定一张图像,两个历史模型产生的特征向量也是不同的,即会产生特征向量的抖动(feature jitter)。本文认为这些抖动信息为尾部数据的扩充提供了可靠的信息,为此,本文利用存储器将这些抖动信息进行收集,来为尾部数据提供额外的样本多样性。实验结果显示MBJ在长尾表征学习以及分类学习任务上获得了国际领先水平的性能表现。2)针对多模态分布问题,本文提出了一种利用存储器做增强的单方向度量学习方法,称为MAUM。方法包含两部分:单方向度量学习和基于存储器的增强方法。MAUM首先学习多个模态下的专属类代理,接下来利用模态专属类代理去拉近它对立模态的特征向量。进而,本文将由于模型漂移现象产生的多个模态专属类代理进行存储来增加它们的多样性,这为单方向度量学习提供了额外的困难正样本。实验结果表明,MAUM不仅在模态衡均衡情况下获得了国际领先水平的性能表现,在模态不均衡问题上也获得了额外的鲁棒性。3)针对训练域和测试域分布不对齐的问题,本文提出了一种多域图像风格迁移的无监督域适应方法,称为IPGAN。IPGAN首先将源域的图像风格转换为多个目标子域的图像风格以此来减少它们之间的分布差异,并且保证转换后的图像具有与原始图像一致的身份信息。接下来利用风格转换后,具有标注信息的源域数据训练模型并将其应用到目标域中进行测试。实验结果表明IPGAN获得了非常具有竞争力的性能表现。


知网文化
【相似文献】
中国期刊全文数据库 前19条
1 宾雪莲,金士尧,杨玉海;基于跳跃因子模型的不规则分布蓝色任务法[J];计算机研究与发展;2003年10期
2 严惠芬,李长法;不规则分布数据网格化和网格数据绘等值线图程序[J];中原地理研究;1985年02期
3 郭良辉,孟小红,郭志宏,刘国峰,常君勇,于更新;地球物理不规则分布数据的空间网格化法[J];物探与化探;2005年05期
4 马志民;陈汉武;张军;;一种适用于不规则分布数据的混合聚类算法[J];南京师范大学学报(工程技术版);2006年01期
5 颜文伟;医学统计学基本知识(三)[J];上海精神医学;1995年01期
6 李春英,桑兆昌,巩淑清,王奉书;以精制BaS制取针状高纯低锶BaCO_3的研究[J];现代化工;1993年11期
7 锡环;;日本旭化学公司研制成二种新型涤纶面料[J];江苏丝绸;1998年01期
8 ;以构图和色调取胜的照片[J];中国报业;2018年11期
9 刘楠;;测量不规则分布孔的中心距夹具设计[J];科技风;2012年09期
10 夏青;;数据挖掘中数据预处理的分析[J];科技风;2012年22期
11 曹文钢,王晓枫;模具型腔设计中不规则分布型值点构造自由曲面的研究[J];合肥工业大学学报(自然科学版);1995年04期
12 高次若;刘明科;;宝鸡市博物馆藏砚选介[J];文物;1994年05期
13 康晋三;;地震活动时空分布序列的分形自组织算法实现[J];国际地震动态;2012年06期
14 黄军;新版50元、10元人民币防伪标记[J];农家顾问;2001年11期
15 陈兆佳;长网造纸机上的跳浆现象及其对策[J];中国造纸;1985年03期
16 丁共林;巨大癌性淋巴结致胃扭转一例[J];实用癌症杂志;1991年04期
17 王新芝,陈必云;气象资料稀少地区的客观分析方法[J];辽宁气象;1996年01期
18 陈兆佳;长网造纸机上的跳浆现象及其对策[J];广东造纸;1984年01期
19 陈敏;钱紫娟;;基于专利视角的我国新型存储器未来发展道路研究[J];中国发明与专利;2021年S1期
中国重要会议论文全文数据库 前16条
1 罗照盛;张飘;;不规则分布数据的缺失及处理方法对等值精度的影响[A];第二十届全国心理学学术会议--心理学与国民心理健康摘要集[C];2017年
2 钟惠萍;;环保航海用风向识别装置[A];《教师教学能力发展研究》科研成果集(第十四卷)[C];2018年
3 卫宁;王剑峰;杜婕;周聪莉;郭旗;文林;;抗辐射加固封装国产存储器电子辐照试验研究[A];第十届全国抗辐射电子学与电磁脉冲学术年会论文集[C];2009年
4 王超;徐利军;袁乃昌;;数字射频存储器分析与应用[A];2001年全国微波毫米波会议论文集[C];2001年
5 林剑;马东阁;;写一次读多次有机存储器[A];中国化学会第26届学术年会有机固体材料分会场论文集[C];2008年
6 张欢;姚荣;董卫华;;工作频率为4GHz的单端口SRAM存储器设计[A];第十八届计算机工程与工艺年会暨第四届微处理器技术论坛论文集[C];2014年
7 任垚;陈昕;沈群东;;基于铁电高分子的相变存储器研究[A];2015年全国高分子学术论文报告会论文摘要集——主题G 光电功能高分子[C];2015年
8 高双;宋成;潘峰;;金属导电细丝类有机存储器的动态阻变过程[A];中国真空学会2012学术年会论文摘要集[C];2012年
9 杨修涛;鲁巍;李晓维;;存储器内建自测设计与分析[A];第十届全国容错计算学术会议论文集[C];2003年
10 蔡炳初;;非挥发相变存储器基础研究[A];中国真空学会2008年学术年会论文摘要集[C];2008年
11 谢远江;王达;胡瑜;李晓维;;基于内容可寻址存储器的存储器内建自修复方法[A];第五届中国测试学术会议论文集[C];2008年
12 缪向水;童浩;李祎;孙华军;李震;程晓敏;;硫系化合物半导体材料——从相变存储器到忆阻器[A];第八届中国功能材料及其应用学术会议摘要[C];2013年
13 孙一鸣;;阻变存储器中金属导电细丝的形态调控[A];TFC'19第十五届全国薄膜技术学术研讨会摘要集[C];2019年
14 吾勤之;许导进;王晨;刘刚;蔡小五;韩郑生;;SRAM存储器单粒子效应试验研究[A];第十届全国抗辐射电子学与电磁脉冲学术年会论文集[C];2009年
15 杨涛;梁忠诚;陈家璧;庄松林;;波导存储器侧面散射特性的实验研究[A];2005年中国光学学会全息与光学信息处理专业委员会年会暨建会20周年纪念会[C];2005年
16 李琦;高军萍;;一种基于多机通信的存储器扩容方法研究[A];2007'中国仪器仪表与测控技术交流大会论文集(一)[C];2007年
中国博士学位论文全文数据库 前13条
1 刘家伦;面向数据不规则分布的深度特征学习研究[D];吉林大学;2022年
2 郑兴;SPH方法改进研究及其在自由面流动问题中的应用[D];哈尔滨工程大学;2010年
3 张效彪;不规则顶分层破坏区下矿压规律及回采方法研究[D];中国矿业大学(北京);2013年
4 孙一慧;氧化物阻变存储器的性能调控及功能化基础[D];北京科技大学;2017年
5 蓝天;相变存储器器件结构及工艺研究[D];华中科技大学;2017年
6 高双;氧化还原类阻变存储器的机理探讨和性能调控及逻辑应用[D];清华大学;2016年
7 杨金;非挥发性阻变存储器阻变机理及性能研究[D];安徽大学;2014年
8 马钰;长寿命相干光存储器[D];中国科学技术大学;2021年
9 郭家荣;硅基微显示器关键存储器技术研究[D];上海大学;2014年
10 尹琦璕;多层次相变存储器材料的织构演化与光电特性[D];北京科技大学;2020年
11 赵晓宁;碳基阻变存储器导电通道调控及其机理研究[D];东北师范大学;2016年
12 谯凤英;非挥发性电荷俘获存储器设计及其电离辐射可靠性研究[D];清华大学;2013年
13 潘立阳;新型低压低功耗快闪存储器技术研究[D];清华大学;2002年
中国硕士学位论文全文数据库 前20条
1 张颖;地球物理不规则分布数据的网格化研究[D];中国地质大学(北京);2007年
2 李燕荔;航空地球物理勘查技术系统—空间数据的可视化技术[D];中国地质大学(北京);2008年
3 龙永佳;存储器测试技术研究与二次筛选中的工程应用[D];西安电子科技大学;2020年
4 陶子豪;新型非挥发存储器及系统优化技术研究[D];电子科技大学;2016年
5 张焱;水下航行器中多通道采编存储器的研制[D];中北大学;2015年
6 陈然;基于氧化硅材料阻变存储器的构建及阻变机制的研究[D];天津理工大学;2015年
7 杨龙康;基于二元氧化物阻变存储器的研究[D];西安电子科技大学;2014年
8 章征海;相变混合存储器的研究与设计[D];华中科技大学;2012年
9 丛伟林;16Mbit FPGA配置存储器设计研究[D];电子科技大学;2012年
10 邰强;有机场效应晶体管存储器的性能及表征方法研究[D];南京邮电大学;2013年
11 史自鸿;阻变式存储器性质的研究[D];河南大学;2012年
12 林涛;SRAM存储器抗单粒子效应自纠正技术研究[D];成都理工大学;2015年
13 高毓林;新型阻变存储器测试激励信号分析与产生[D];山东大学;2016年
14 杨顺;阻变存储器外围电路的设计与实现[D];国防科学技术大学;2015年
15 孙跃;金属浮栅存储器的结构优化和性能分析[D];南京邮电大学;2015年
16 李家强;基于正交拉丁码的存储器抗多位翻转设计[D];哈尔滨工业大学;2014年
17 马文龙;阻变存储器外围电路设计[D];湖南大学;2014年
18 周涛;弹载引控信号存储器的设计与实现[D];中北大学;2015年
19 周立伟;基于氧化钛阻变存储器的阻变机理分析[D];天津理工大学;2015年
20 蔡根;利用程序模式管理便签存储器的技术及模型[D];华东师范大学;2014年
中国重要报纸全文数据库 前20条
1 记者  李济东 通讯员  陈念祖 夏峻 桑倩;公安县村庄绿化率逾70%[N];湖北日报;2006年
2 记者 张梦然;首个可编程光学量子存储器问世[N];科技日报;2022年
3 记者 许琦敏;上海科学家20年研制推开“未来存储器”大门[N];文汇报;2021年
4 记者 来莎莎;存储器今年将持续领涨 半导体终端市场需求强劲[N];第一财经日报;2021年
5 记者 来莎莎;国产存储器破局国际垄断[N];第一财经日报;2020年
6 记者 王海荣;高端存储器测试增添新平台[N];深圳商报;2020年
7 记者 唐凤 见习记者 杨凡;科学家实现量子存储器间远距离纠缠[N];中国科学报;2020年
8 本报记者 骆轶琪;存储器涨价是“慢牛”还是拐点?“从年前到现在价格涨了60%”[N];21世纪经济报道;2020年
9 记者 来莎莎;长江存储推出两款128层闪存 国产存储器迎新突破[N];第一财经日报;2020年
10 记者 陈炳欣;长江存储国家存储器基地项目二期开工[N];中国电子报;2020年
11 记者 毛黎;存储器“连存带算”从理论转向实践[N];科技日报;2020年
12 本报记者 崔雪芹;新型存储器激活“中国芯”[N];中国科学报;2017年
13 本报记者 顾鸿儒;存储器厂商减资过冬[N];中国电子报;2019年
14 记者 马璇 通讯员 王若琳;加快发展高性能存储器与计算器件[N];深圳特区报;2019年
15 本报记者 陈炳欣;存储器价格小幅上涨 长期走势尚需观察[N];中国电子报;2019年
16 记者 张梦然;新设计让计算和存储器结合更紧[N];科技日报;2018年
17 本报记者 顾鸿儒;合肥长鑫高端存储器投片能否实现“从0到1”跨越有待观察[N];中国电子报;2018年
18 记者 陈炳欣;中国存储器产业联盟在武汉成立[N];中国电子报;2018年
19 布轩;中国存储器产业联盟成立[N];人民邮电;2018年
20 记者 郑明桥;我国建设世界级存储器基地[N];经济日报;2016年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978