收藏本站
《南京航空航天大学》 2002年
收藏 | 手机打开
二维码
手机客户端打开本文

基于稀疏RAM的神经网络及其人脸识别应用研究

彭宏京  
【摘要】: 基于存储器的神经网络模型(如N-tuple神经网络(NTNN)、稀疏分布存储器模型(SDM)等),因其结构简单,硬件易实现;查表式的学习算法,运行速度快,因此受到众多研究者的关注。在许多领域获得了成功应用,也是神经网络走向商品化的基础模型。然而,也正是它们“无权值(weightless)计算”的结构等诸原因使它们表达非线性映射的能力不强,且其行为缺乏理论分析,因此影响了它们的进一步应用。本论文的目的是从修改它们的结构和学习算法着手进行推广性研究。通过学习能力分析、与相关模型的比较到人脸识别应用的研究都证实了推广后的新模型可行和有效。并且获得了更多原始模型不具有的性质,应用范围从原来只能进行二值模式的识别(非二值模式必须二值化)拓展到能直接处理实数向量输入模式来实现函数逼近、灰度人脸的识别。本论文的研究主要包括以下几方面的内容: 1、针对一类回归RAM式神经网络进行推广。提出了一个新型自适应模式识别系统一基于稀疏RAM的N-tuple神经网络模型(SR-NTNN),它既可以用于模式识别,也能用于函数逼近,具有比较一般性的特点。增加的可调参数使新模型表现更灵活,同时减少了存储开销,抑制了RAM式神经网络容易饱和的问题。NTNN、SDM都可以作为其特例。最后,通过实验证实了它所具有的函数逼近能力。 2、在保留SDM的稀疏分布存储特征的基础上修改了SDM的结构和学习算法,提出逼近型的SDM模型。拓展了原SDM只能应用于联想记忆的应用范围,并且对新模型进行了学习能力的理论分析,分析表明它具有与小脑模型关节控制器(CMAC)相当的学习能力,尽管它们的量化方式完全不一样。逼近型SDM有优于CMAC的许多特点:不需要哈稀(Hashing)技术、不存在分块效应以及更易于理解和实现。理论分析和示例表明了该改进模型的合理性和有效性,函数逼近的效果优于CMAC。 3、经典的N-tuple分类器及单层查找感知器模型(SLLUP)由于结构简单、运算速度快、便于硬件实现而得到广泛应用。但由于它们均是基于RAM的结构而必须二值化输入样本,因此在进行大维数样本的识别问题时受到许多限制。为此将稀疏分布存储的概念引入SLLUP,提出了基于稀疏RAM的逼近型N-tuple模型。该模型从结构上看,囊括了逼近型SDM和SLLUP,但这决非只是结构上的简单推广,当稀疏地址编码直接采用实数向量时,新模型获得了SLLUP根本不可能具有的特点,即直接对输入模式进行N-tuple采样,使得处理大维数的样本数据真正成为可能,从而表现出较SLLUP明显的优势和更大的灵活性。函数逼近的实验表明该新模型通过选择适当的参数,逼近效果远优于SLLUP和逼近型SDM。 4、将CMAC、逼近型SDM、SLLUP以及基于稀疏RAM的逼近型N-tuple模 基于稀疏RAM的神经网络及其人脸识别应用研究 型等纳入到一个称为一般存储器神经网络(GMNN)的模型框架中,其共同的特点 是由三部分构成:输入空间量化、存储器地址产生器、查表式某种组合输出。其本 质是通过地址选择隐含地实现从低维到高维空间的映射从而能更好地解决非线性的 分类和回归问题,显示出核(kernel)方法特点。特别当产生的地址个数是有限常数 且网络输出是加权线性和时,证明了此类网络可以收敛到最小平方误差解,从而为 更好地应用和拓展此类网络提供了理论基础。 5、提出了一系列基于Ntuple特征子模式划分的人脸识别方法。在人脸识别应 用上的研究不仅证实了本文所提模型的直接处理大维数样本的能力,而且展示了一 类区别于基于显式地进行特征提取的人脸识别方法的新颖性。单个NtUple的分类或 逼近能力是弱的,但通过不同的组合各个Ndple的方式可改善系统的性能。由此提 出了结构式组合和输出组合的两种组合方式。稀疏RAM逼近型Ntuple网络即属结 构式;通过结合Naive七ayes规则和直接投票的方法等进行的组合属输出组合方式; 另外采用Boosting方法集成若干N-tuple,获得了结构组合输出再组合的高级集成方 法。实验是基于Benchmark人脸数据库ORL的,其特点:l人 既不需要图象的完整 特征,也无需进行特征提取预处理,只需少量N-tUple特征,再按所提方法进行组合; n、输出组合方法对 N-tuple特征划分方式以及大小不敏感;3人 Boosting NtUples 与常规Boosting方法的区别在于不仅仅每个基本分类器使用不同的训练集,而且同 一个训练样本提交给不同基本分类器不同的特征。实验结果证实所有提出的方法均 获得了较好的识别效果(误识率在6.10%左右),所使用的特征数占整幅图象的10- 100%不等,但实验表明更多的特征并没有更好的效果。事实上,所提的各种组合方 法,尤其是 Boosting NtuPles方法,开辟了一条进行特征选择的新途径。
【学位授予单位】:南京航空航天大学
【学位级别】:博士
【学位授予年份】:2002
【分类号】:TP183;TP391.4

手机知网App
【引证文献】
中国期刊全文数据库 前4条
1 周兆捷,吴乐南,孙大瑞;基于Gabor变换与自组织稀疏RAM的N-tuple神经网络的人脸识别方法[J];电路与系统学报;2004年01期
2 彭金华;;基于稀疏RAM的N-tuple神经网络的足球机器人识别法[J];江西电力职业技术学院学报;2006年02期
3 周兆捷,孙玉霞,吴乐南;基于稀疏RAM的逼近型神经网络与统计模式识别的人脸识别[J];信号处理;2003年06期
4 周兆捷,吴乐南;基于自组织稀疏RAM的N-tuple神经网络的人脸识别[J];信号处理;2004年04期
中国硕士学位论文全文数据库 前3条
1 谭志国;灰色自适应谐振理论及其性能评估[D];南京航空航天大学;2003年
2 史操;基于线性投影分析与非线性核方法在人脸识别中的研究[D];湖南师范大学;2006年
3 杨兵;基于人脸识别的多媒体数据库管理系统[D];东南大学;2005年
【参考文献】
中国期刊全文数据库 前7条
1 周杰,卢春雨,张长水,李衍达;人脸自动识别方法综述[J];电子学报;2000年04期
2 陈松灿,杨国庆,吕军;面向问题的稀疏分布式记忆模型[J];航空学报;1992年12期
3 金忠,杨静宇,陆建峰;一种具有统计不相关性的最佳鉴别矢量集[J];计算机学报;1999年10期
4 王正群,陈世福,陈兆乾;并行学习神经网络集成方法[J];计算机学报;2005年03期
5 何超,徐立新,张宇河;CMAC算法收敛性分析及泛化能力研究[J];控制与决策;2001年05期
6 罗忠,谢永斌,朱重光;CMAC学习过程收敛性的研究[J];自动化学报;1997年04期
7 张翠平,苏光大;人脸识别技术综述[J];中国图象图形学报;2000年11期
【共引文献】
中国期刊全文数据库 前10条
1 潘希姣;;多子群粒子群集成神经网络[J];安徽建筑工业学院学报(自然科学版);2007年02期
2 冯卓;任然;;信息安全的现阶段问题分析与发展动向[J];安全与环境学报;2007年02期
3 林正奎;唐焕玲;鲁明羽;王敬东;;基于特征多视图提升Naive Bayesian的Boosting改进算法[J];北京交通大学学报;2009年06期
4 张海;王尧;陈冰;胡荣祖;高红旭;赵凤起;;用Boosting算法预测多硝基芳香族化合物的密度[J];火炸药学报;2007年05期
5 刘凤娟;阎永清;李欣刚;;含摩擦环节伺服系统的分析与控制补偿[J];兵工自动化;2007年04期
6 杨盈昀,谢婷婷,施美楠;基于肤色的人脸检测算法研究[J];北京广播学院学报(自然科学版);2002年04期
7 韩之天,杨磊;基于傅利叶变换的人脸识别改进方法[J];北京广播学院学报(自然科学版);2005年01期
8 李玉鑑;付翠花;;一种基于特征串比较的眉毛识别方法[J];北京工业大学学报;2008年01期
9 李文斌;刘椿年;钟宁;;基于两阶段集成学习的分类器集成[J];北京工业大学学报;2010年03期
10 杨波;王哲;;舵面电动加载系统的自适应CMAC复合控制[J];北京航空航天大学学报;2010年03期
中国重要会议论文全文数据库 前10条
1 张雷刚;张勇东;张冬明;;基于GPU并行加速的改进分块PCA人脸识别算法[A];图像图形技术研究与应用(2010)[C];2010年
2 甘俊英;张有为;;用于人脸图像识别的快速分层算法[A];第十届全国信号处理学术年会(CCSP-2001)论文集[C];2001年
3 杜晓凤;丁友东;;FloatBag选择性神经网络集成及其在人脸检测中的应用[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
4 郭锋;刘丽丽;吕凝;;基于LLE和SVM的人像识别方法[A];2007北京地区高校研究生学术交流会通信与信息技术会议论文集(上册)[C];2008年
5 顾群英;李文元;;基于PCA人脸识别的移动电话身份验证方法探讨[A];2007北京地区高校研究生学术交流会通信与信息技术会议论文集(下册)[C];2008年
6 李丹;郭小华;刘正熙;;基于DSP的自动人脸识别门禁系统设计与实现[A];中国自动化学会、中国仪器仪表学会2004年西南三省一市自动化与仪器仪表学术年会论文集[C];2004年
7 曹春红;张斌;丛飚;;基于模糊支持向量机方法的人脸识别技术的研究[A];第18届全国多媒体学术会议(NCMT2009)、第5届全国人机交互学术会议(CHCI2009)、第5届全国普适计算学术会议(PCC2009)论文集[C];2009年
8 曹文明;肖纲;谷秧波;王守觉;;一种基于眼睛定位的人脸位置矫正方法[A];2004中国控制与决策学术年会论文集[C];2004年
9 罗健旭;邵惠鹤;;超闭球CMAC学习算法的改进和收敛性分析[A];2004中国控制与决策学术年会论文集[C];2004年
10 肖潇;曹文明;王守觉;;多自由度神经元认知算法及其在人脸识别中的应用[A];2006中国控制与决策学术年会论文集[C];2006年
中国博士学位论文全文数据库 前10条
1 于化龙;基于DNA微阵列数据的癌症分类技术研究[D];哈尔滨工程大学;2010年
2 戴运桃;粒子群优化算法研究及其在船舶运动参数辨识中的应用[D];哈尔滨工程大学;2010年
3 孟宇龙;基于本体的多源异构安全数据聚合[D];哈尔滨工程大学;2010年
4 林裕旭;基于扫描数据的三维人脸表情合成[D];浙江大学;2010年
5 甘良志;核学习算法与集成方法研究[D];浙江大学;2010年
6 杨国鹏;基于机器学习方法的高光谱影像分类研究[D];解放军信息工程大学;2010年
7 徐迪红;复杂背景下的交通标志检测和分类算法研究[D];武汉大学;2010年
8 戴群;基于ICBP模型的混合神经网络与多样化集成方法的研究[D];南京航空航天大学;2009年
9 赵永平;支持向量回归机及其在智能航空发动机参数估计中的应用[D];南京航空航天大学;2009年
10 陈勇;基于样条二进小波的人脸识别研究[D];浙江工业大学;2010年
中国硕士学位论文全文数据库 前10条
1 刘桂珍;颅骨三维重建与信息提取[D];山东科技大学;2010年
2 马冉冉;集成学习算法研究[D];山东科技大学;2010年
3 王萍;语音情感识别研究[D];山东科技大学;2010年
4 王亚东;基于二代身份证图象的人脸检测与识别研究与设计[D];山东科技大学;2010年
5 江达秀;基于HMAX模型的人脸表情识别研究[D];浙江理工大学;2010年
6 陈松峰;利用PCA和AdaBoost建立基于贝叶斯的组合分类器[D];郑州大学;2010年
7 曹彦;基于支持向量机的特征选择及其集成方法的研究[D];郑州大学;2010年
8 周驰;数据流上概念漂移的检测和分类[D];郑州大学;2010年
9 吴敏;基于AdaBoost和独立分量分析的人脸检测与识别算法的研究[D];郑州大学;2010年
10 林天威;基于视频流的人脸识别系统研究[D];哈尔滨工程大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 周杰,卢春雨,张长水,李衍达;人脸自动识别方法综述[J];电子学报;2000年04期
2 洪炳熔;机器人足球比赛——发展人工智能的里程碑[J];电子世界;2000年04期
3 王昆翔,李衍达,周杰;关于人脸图象自动识别研究中的几个问题[J];公安大学学报(自然科学版);2001年01期
4 章毓晋;中国图像工程及当前的几个研究热点[J];计算机辅助设计与图形学学报;2002年06期
5 万峰,杜明辉;小样本条件下采用Gabor特征的人脸识别[J];计算机辅助设计与图形学学报;2005年02期
6 周激流,张晔;人脸识别理论研究进展[J];计算机辅助设计与图形学学报;1999年02期
7 姚鸿勋,刘明宝,高文,范旭彤,张洪明,吕雅娟;基于彩色图像的色系坐标变换的面部定位与跟踪法[J];计算机学报;2000年02期
8 潘志松,陈松灿,张道强;一般化的灰SOM模型及其性能评估[J];计算机学报;2004年04期
9 王良民,张建明,詹永照,宋顺林;人脸检测研究现状和发展[J];江苏大学学报(自然科学版);2003年03期
10 邓炜,王军安,杨永生;计算机图象识别系统的设计与实现[J];计算机应用研究;2000年06期
中国博士学位论文全文数据库 前7条
1 朱长仁;复杂背景下的多姿态人脸识别技术研究[D];国防科学技术大学;2001年
2 叶俊勇;人脸检测与识别方法研究[D];重庆大学;2002年
3 吴小俊;图象特征抽取与识别理论及其在人脸识别中的应用[D];南京理工大学;2002年
4 於东军;神经网络、模糊系统的几个问题研究及其在人脸识别中的应用[D];南京理工大学;2003年
5 张敏贵;基于小波和支持向量机的人脸识别方法研究[D];西北工业大学;2003年
6 赵海涛;投影分析在人脸识别中的研究与应用[D];南京理工大学;2003年
7 周德龙;人脸识别技术研究[D];西北工业大学;2000年
中国硕士学位论文全文数据库 前10条
1 黄伟;人脸识别及其应用研究[D];湖南大学;2001年
2 刘学军;键盘用户身份验真与加权主分量分类器[D];南京航空航天大学;2002年
3 胡琳;基于小波变换和人工神经网络的PCA人脸识别方法研究[D];苏州大学;2002年
4 朱夏君;人脸识别的研究及眼睛定位算法[D];浙江工业大学;2003年
5 贺新;实时人脸检测与识别技术的研究[D];四川大学;2003年
6 李超洋;智能人脸识别技术研究[D];西安电子科技大学;2004年
7 胡伏原;复杂背景下快速人脸检测与识别[D];西北工业大学;2004年
8 姜睿;基于知识的人脸检测与人脸识别系统研究[D];西北工业大学;2004年
9 王春红;人脸识别技术研究[D];南京理工大学;2004年
10 董璐;数字图像处理与识别系统的开发[D];东南大学;2004年
【二级引证文献】
中国期刊全文数据库 前4条
1 胡步发;王忠;;基于Gabor小波与RBF神经网络的人脸识别新方法[J];电路与系统学报;2008年01期
2 彭金华;;基于稀疏RAM的N-tuple神经网络的足球机器人识别法[J];江西电力职业技术学院学报;2006年02期
3 朱云芳;戴朝华;陈维荣;;基于小波与ART2网络的实时状态识别[J];计算机工程;2007年02期
4 朱云芳;戴朝华;陈维荣;;基于优化递归小波与改进型ART2网络的内燃机故障诊断[J];铁道学报;2007年01期
中国博士学位论文全文数据库 前2条
1 郭志强;基于子空间分析的人脸识别算法研究[D];武汉理工大学;2010年
2 侯军虎;基于多参数的风机状态监测与故障诊断的研究[D];华北电力大学(河北);2004年
中国硕士学位论文全文数据库 前10条
1 王忠;基于Gabor小波与RBF神经网络的人脸识别技术研究[D];福州大学;2005年
2 卢邵平;Gabor变换的人脸特征提取算法的研究[D];四川大学;2005年
3 张丽丹;基于监督独立分量分析的人脸识别[D];哈尔滨工程大学;2005年
4 闫俊斌;彩色人脸图像中的眼睛定位及边缘轮廓提取方法研究[D];山西大学;2006年
5 李波;人脸识别技术及应用研究[D];西安电子科技大学;2007年
6 刘晓乐;基于肤色及模板匹配的人脸跟踪方法研究[D];东北师范大学;2007年
7 龙伶敏;基于Adaboost的人脸检测方法及眼睛定位算法研究[D];电子科技大学;2008年
8 张晓燕;基于分形维数的眼睛检测算法研究[D];南京理工大学;2009年
9 薛芝茂;基于神经网络的人脸识别研究[D];兰州理工大学;2010年
10 王彩云;人脸识别的弹性匹配改进方法研究[D];东北大学;2008年
【二级参考文献】
中国期刊全文数据库 前3条
1 罗忠,谢永斌,朱重光;CMAC学习过程收敛性的研究[J];自动化学报;1997年04期
2 欧阳楷,陈卉,周萍,周琛;神经计算中坐标变换的网络模型(CMAC)的泛化特性[J];自动化学报;1997年04期
3 严超,苏光大;人脸特征的定位与提取[J];中国图象图形学报;1998年05期
【相似文献】
中国期刊全文数据库 前10条
1 刘合安;;基于LLE算法的人脸识别方法研究[J];电脑知识与技术;2011年23期
2 薛晓利;胡蓉;朱金陵;;一种改进的Gabor算法及其在人脸识别中的应用[J];成都电子机械高等专科学校学报;2011年02期
3 胡锋;邢洁清;;一种基于小波变换与随机森林的人脸识别方法[J];电脑知识与技术;2011年16期
4 刘学胜;;基于核主分量分析的人脸识别[J];机电技术;2011年03期
5 刘学胜;;基于PCA和SVM算法的人脸识别[J];计算机与数字工程;2011年07期
6 蒋强荣;高远;张鸿宾;;基于直方图交核的人脸识别[J];北京工业大学学报;2011年08期
7 张奇志;周亚丽;;基于SIFT特征的单训练样本人脸识别[J];北京信息科技大学学报(自然科学版);2011年04期
8 楼竞;;基于核偏最小二乘回归的人脸识别[J];江苏技术师范学院学报;2011年08期
9 甘俊英;何思斌;;非线性Radon变换及其在人脸识别中的应用[J];模式识别与人工智能;2011年03期
10 曹林;陈登熠;;基于小波近似分量非参数鉴别分析人脸识别算法[J];北京信息科技大学学报(自然科学版);2011年03期
中国重要会议论文全文数据库 前10条
1 陈皓;;基于CS中转架构的人脸识别门禁系统[A];全国第21届计算机技术与应用学术会议(CACIS·2010)暨全国第2届安全关键技术与应用学术会议论文集[C];2010年
2 谢志华;李丰;伍世虔;杨巨成;方志军;;基于局部差分二进制模式(LDBP)的热红外人脸识别[A];第十五届全国图象图形学学术会议论文集[C];2010年
3 李丹;郭小华;刘正熙;;基于DSP的自动人脸识别门禁系统设计与实现[A];中国自动化学会、中国仪器仪表学会2004年西南三省一市自动化与仪器仪表学术年会论文集[C];2004年
4 邹垚;张超;;基于DSP的人脸识别算法实现与优化[A];中国通信学会通信建设工程技术委员会2010年年会论文集[C];2010年
5 熊薇薇;梁巍;李莉;黄梅志;;基于混合核函数SVM的人脸识别方法研究[A];中国计量协会冶金分会2011年会论文集[C];2011年
6 苗振伟;许勇;杨军;;超声波人脸识别方法研究[A];中国声学学会2007年青年学术会议论文集(上)[C];2007年
7 杨飞;苏剑波;戴景文;;人脸识别中的人脸图像质量快速评价[A];第二十七届中国控制会议论文集[C];2008年
8 万卫兵;施鹏飞;;标准像的人脸识别[A];信号与信息处理技术——第一届信号与信息处理联合学术会议论文集[C];2002年
9 杜晓旭;钱沄涛;戴光;;加强概率推理模型在人脸识别中的应用[A];信号与信息处理技术第三届信号与信息处理全国联合学术会议论文集[C];2004年
10 孙劲光;李扬;;基于Mean-Shift的Retinex算法在人脸识别中的应用[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【oral】[C];2011年
中国重要报纸全文数据库 前10条
1 洪宇;人脸识别仅需一秒钟[N];科技日报;2004年
2 记者 申明;我国人脸识别已处于国际领先水平[N];科技日报;2009年
3 本报记者 赵晓霞;人脸识别数字化[N];人民日报海外版;2010年
4 本报记者 林莉君;“以貌取人”更安全[N];科技日报;2010年
5 北京数字奥森科技有限公司 沈伟;人脸识别技术与应用[N];计算机世界;2008年
6 本报记者 卢旭成;人脸识别门禁或将取代指纹门禁[N];中国计算机报;2008年
7 记者 张懿;人脸识别打拐平台上线[N];文汇报;2011年
8 本报记者黄真;汉王科技全球首创嵌入式人脸识别系统[N];中国信息报;2009年
9 本报记者 马爱平;科海搏击 铸就金鹰[N];科技日报;2011年
10 本版编辑曾雨 康翔;人脸识别结缘奥运[N];计算机世界;2007年
中国博士学位论文全文数据库 前10条
1 彭宏京;基于稀疏RAM的神经网络及其人脸识别应用研究[D];南京航空航天大学;2002年
2 苏煜;融合全局和局部特征的人脸识别[D];哈尔滨工业大学;2009年
3 郭志强;基于子空间分析的人脸识别算法研究[D];武汉理工大学;2010年
4 李全彬;非约束环境下人脸识别关键技术的研究与应用[D];华东师范大学;2011年
5 唐恒亮;基于三维特征的人脸识别算法研究[D];北京工业大学;2011年
6 王建中;基于流形学习的数据降维方法及其在人脸识别中的应用[D];东北师范大学;2010年
7 陈恒鑫;基于多尺度分析的变化光照下人脸识别研究[D];重庆大学;2010年
8 赵武锋;人脸识别中特征提取方法的研究[D];浙江大学;2009年
9 陈勇;基于样条二进小波的人脸识别研究[D];浙江工业大学;2010年
10 胡峰松;单样本下可变姿态与光照人脸识别研究[D];湖南大学;2010年
中国硕士学位论文全文数据库 前10条
1 刘学平;低质量图像模糊人脸识别的研究[D];沈阳航空工业学院;2010年
2 张春晓;基于粗集和小波变换的人脸识别研究[D];山东大学;2010年
3 曹凤杰;红外图像人脸识别方法研究[D];西安电子科技大学;2010年
4 章悦;基于四元数的彩色人脸识别[D];西安电子科技大学;2010年
5 汪炼;基于半监督流形学习的人脸识别算法研究[D];安徽大学;2010年
6 孙向风;基于进化计算和支持向量机的人脸识别算法研究[D];兰州理工大学;2010年
7 平强;压缩感知人脸识别算法研究[D];中国科学技术大学;2011年
8 刘兆军;基于人脸识别的考勤系统的设计与实现[D];电子科技大学;2010年
9 王哲;基于具有面部明显色差特征的人脸识别方法研究[D];河北科技大学;2010年
10 窦蓉蓉;基于集成学习的人脸识别算法研究及应用[D];安徽大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026