收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

面向视障人群的计算视觉辅助系统

林伟  
【摘要】:据不完全统计,全球范围内大约有3亿4千2百万人受视力受损的困扰,包括因衰老、眼疾和先天等因素引起的视力障碍。盲人和低视力更是我国公共卫生的重点问题之一,关注和提高视障人群的生活质量不仅是科研工作者的重要研究方向,更是一项造福人类的公益活动。科技发展到今天,主流设备和软件制造商已经为视觉障碍人群提供了大量的产品,但大多功能单一,使用环境有限。随着计算机视觉的迅速发展,使用计算机视觉来增强人眼对现实世界物体的感知,提取感兴趣的目标进而完成目标识别任务的计算视觉辅助技术渐渐成为当今视觉领域的一个研究热点。本课题主要结合当前流行的可穿戴智能设备,通过对图像处理、增强现实和机器学习等热门技术的学习和研究,设计并实现帮助视觉障碍人群学习和生活的计算视觉辅助系统。本系统采用便携式可穿戴智能眼镜的设计原理,使用摄像头、Android处理器和LCD显示器在硬件上设计并校准了现实增强显示系统,并对目标的识别进行了深入的研究,结合角点检测与匹配的原理,使用Harris角点特征来改进FAST角点检测算法,并提出了自适应阈值的多尺度AGAST角点检测算法,根据人眼视觉特性改进FREAK描述算子的采样结构来提高其在低内存移动设备上的运行效率,最后结合增强现实显示系统和角点检测与识别算法实现了能够智能阅读人民日报和识别药品的可穿戴计算视觉辅助系统。本文主要有以下几个创新点:1、通过研究可穿戴设备设计原理和现实增强技术,根据人眼视觉特性和摄像头成像原理,设计了基于光学透视和视频融合的可穿戴显示系统,并通过摄像机成像和标定原理实现了显示系统的配准,完成了虚拟图像和现实图像无缝叠加。2、研究了图像局部不变特征检测算法的基本原理,结合尺度空间理论,使用多尺度Harris特征来改进FAST检测算法,为了提高算法在低内存和计算能力较弱的移动设备上的角点检测效率,本文在AGAST角点检测算法的基础上提出自适应阈值的多尺度AGAST算法,实验表明改进后的AGAST算法在运行速率和检测效率上较Harris角点检测和FAST检测算法都有很大幅度的提高。3、研究了图像局部特征的两种描述方式:浮点型描述子和二进制描述子。本系统采用低内存移动设备上更加高效的FREAK描述算子,并根据人眼视觉特性,在FREAK算子的基础上优化采样模型,降低算法内存消耗,提高算法在移动设备上的运行速率和准确率,最后结合自适应阈值的多尺度AGAST角点检测算法计算汉明距离来完成图片的匹配。在Mikolajczyk图像数据库上对ORB、BRISK、FREAK和改进后的算法进行性能比较和分析,实验结果表明,改进后的检测与描述算法在尺度变化、旋转变化、模糊变化、光照变化和压缩变化等条件下都有较强的稳定性和鲁棒性。4、结合增强现实的显示系统和基于角点检测与匹配的识别算法,在硬件和软件两个层面完成计算视觉辅助系统的设计。通过引入开源的文字识别引擎Tesseract和讯飞语音识别SDK,在Android平台上设计并实现了基于角点检测与匹配的图片识别算法,完成了能够智能阅读人民日报和识别药品的可穿戴智能眼镜。最后在光照较暗、图片旋转和部分遮挡的环境下对系统的识别速率和效率进行分析,实验表明本系统能够在移动设备上实时处理视频,在光照差异、图像旋转和部分遮挡等条件下具有较强的鲁棒性和稳定性。


知网文化
【相似文献】
中国期刊全文数据库 前18条
1 李正大;蒋燕;;提高Shi-Tomasi角点检测精度的方法研究[J];科学中国人;2017年24期
2 娄震,陆建峰,杨静宇;用于X射线图像的角点检测方法[J];南京理工大学学报(自然科学版);2002年06期
3 杨杨,张田文;角点检测算法评价方法的研究[J];哈尔滨工业大学学报;1998年02期
4 罗斌,E.R.Hancock;图象角点检测的矢量场方法[J];中国图象图形学报;1998年10期
5 李明;王甲卓;李玲玲;李翠华;;曲率统计角点检测方法[J];心智与计算;2009年03期
6 李云红;何亚瑞;章为川;周小计;;利用点弦距离递归的图像角点检测算法[J];中国图象图形学报;2019年07期
7 赵开春;褚金奎;;一种新的快速鲁棒性角点检测算法[J];计算机工程;2005年23期
8 戚飞虎,刘建峰;一种有效的不变性角点检测方法[J];上海交通大学学报;1995年06期
9 杨佳豪;袁彤;姚艳;;基于三维场景重建的角点检测方法[J];计算机与网络;2019年05期
10 邹志远;安博文;曹芳;潘胜达;;一种自适应红外图像角点检测算法[J];激光与红外;2015年10期
11 李娜;陈俊艳;刘颖;林庆帆;;基于骨架角点检测的粘连车辆分割[J];西安邮电大学学报;2015年06期
12 谭振宇;杨明;;一种基于支持向量机的角点检测算法[J];电子测试;2011年01期
13 闫焱;刘允才;;复杂背景下的角点检测[J];微型电脑应用;2009年01期
14 邱卫国,昂海松;基于隶属度特征的曲线角点检测方法[J];重庆大学学报(自然科学版);2004年11期
15 李可;;遥感影像的角点检测技术研究[J];电子器件;2018年06期
16 唐雪松;谭斌;;图像局部矢量点结构的角点检测算法[J];现代计算机(专业版);2018年36期
17 廖梦怡;陈靓影;徐如意;皇富强;;灰度值星型辐射投影角点检测算法[J];计算机辅助设计与图形学学报;2018年11期
18 金亦挺;王万良;赵燕伟;蒋一波;;基于角度累加的鲁棒角点检测算法[J];计算机辅助设计与图形学学报;2017年11期
中国重要会议论文全文数据库 前10条
1 唐榕;蒋大林;丁学爽;;基于角点检测的图像匹配方法综述[A];全国第二届信号处理与应用学术会议专刊[C];2008年
2 敖雪峰;武仲科;周明全;宋荣青;王燕妮;;基于角点检测的毛笔字笔画分割算法[A];图像图形技术与应用进展——第三届图像图形技术与应用学术会议论文集[C];2008年
3 高照忠;魏海霞;喻怀义;;遥感图像中微小红外目标的分类定位识别[A];2015年中国地理学会经济地理专业委员会学术研讨会论文摘要集[C];2015年
4 李芳芳;孙季丰;;基于SUSAN角点检测的车牌定位[A];2009年中国高校通信类院系学术研讨会论文集[C];2009年
5 田宏亮;蒋晓瑜;张智诠;汪熙;;基于Harris与SUSAN的联合角点检测与匹配算法[A];第六届全国信号和智能信息处理与应用学术会议论文集[C];2012年
6 孙辉;杨厚俊;范延滨;;基于直方图均衡化的Harris角点检测算法[A];2008年中国高校通信类院系学术研讨会论文集(上册)[C];2009年
7 陈杰春;赵丽萍;郭鸣;;角点检测不确定度评定方法[A];中国光学学会2010年光学大会论文集[C];2010年
8 齐继阳;王凌云;吴倩;李金燕;;自动切割机圆锯片刀具磨损检测算法[A];2015光学精密工程论坛论文集[C];2015年
9 范新峰;程远增;付强;;采用黑白检测算子的棋盘格角点检测[A];2015光学精密工程论坛论文集[C];2015年
10 翟胜军;姜晖;张鑫;;一种基于角点的图像配准方法[A];武汉(南方九省)电工理论学会第22届学术年会、河南省电工技术学会年会论文集[C];2010年
中国博士学位论文全文数据库 前10条
1 张世征;几种轮廓曲率估计角点检测算法研究[D];重庆大学;2016年
2 钟宝江;图象轮廓处理技术的基础算法研究[D];南京航空航天大学;2006年
3 傅荟璇;运动目标识别与光电跟踪定位技术研究[D];哈尔滨工程大学;2009年
4 徐玲;基于图像轮廓的角点检测方法研究[D];重庆大学;2009年
5 柯丰恺;面向机器人的多目视觉检测算法研究及系统实现[D];华中科技大学;2016年
6 刘冬梅;基于模式识别和目标跟踪技术的前庭功能检查系统应用研究[D];中国科学院研究生院(长春光学精密机械与物理研究所);2011年
7 王萌;樱桃小番茄腋芽摘除机器人关键技术研究[D];浙江大学;2016年
8 吕娜;图像匹配与跟踪研究[D];西安交通大学;2008年
9 陈辉;基于编码结构光和激光扫描的主动视觉三维重构方法研究[D];上海大学;2014年
10 章为川;基于各向异性高斯核的图像边缘和角点检测[D];西安电子科技大学;2013年
中国硕士学位论文全文数据库 前10条
1 彭业勋;煤矿井下钻杆计数方法研究[D];西安科技大学;2019年
2 张祺;基于统计与机器学习的棋盘格角点检测算法研究[D];华中科技大学;2019年
3 黄晓浪;基于灰度变化的角点检测算法研究[D];东华理工大学;2019年
4 何亚瑞;基于图像边缘轮廓的角点检测[D];西安工程大学;2019年
5 杨磊光;基于双目视觉的角点检测及并联机构动平台位姿检测研究[D];燕山大学;2019年
6 林伟;面向视障人群的计算视觉辅助系统[D];上海交通大学;2017年
7 侯海莹;融合方向预判和角点检测算法改进的TLD人体目标跟踪方法[D];哈尔滨理工大学;2019年
8 金钊;一种改进的角点检测粒子滤波目标跟踪方法[D];江苏科技大学;2018年
9 陈浩;基于FPGA的视频文本识别算法的研究与实现[D];东北大学;2015年
10 吴媛媛;基于非因果分数阶梯度算子的角点检测方法研究[D];安徽工业大学;2018年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978