基于决策级融合的人脸识别

,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,基于决策级融合的人脸识别,PB07005051,孙雨润,背景介绍,人脸识别,从固定尺寸照片的静态匹配到视频图像序列的实时匹配，人脸识别这一技术有着广泛的应用背景。人脸识别技术从最初对标准正面灰度图像的识别，发展到现在能够动态实现人脸识别，以及初露端倪的三维人脸识别,图像融合,将不同传感器获得的同一图像或同一传感器的不同时刻获得的图像，经过去噪、重采样后再运用某种融合技术得到更适合视觉感知或计算机处理的合成图像的过程,关于人脸识别,人脸识别,的通常步骤为：,(1),人脸检测,(2),特征提取,(3),分类识别。人脸检测是将类似人脸的目标从背景中分离，特征提取则将检测出的人脸图像映射变换到低维特征空间，分类识别则进行比较判定,关于图像融合,图像融合,分为：,(1),像素级融合,(2),特征级融合,(2),决策级融合。像素级融合是指直接对传感器采集的数据进行处理而获得融合图像的过程；特征级图像融合是对源图像进行特征提取后获得的特征信息进行融合，目的是最大限度给出决策分析所需要的特征信息；决策级图像融合是根据一定的准则以及每个决策的可信度做出最优决策，具有实时性好、强容错的优势。,不同角度光照,不同表情,工作计划,工作规划,：由于采用的方法和传统人脸识别大相径庭，因此需要从,0,开始设计软件来进行实验。预计总工作时间为,60,天。其中调研时间为,10%,（,6,天），构思算法与流程为,25%,（,15,天），程序实现为,60%,（,36,天），论文成文为,15%,（,9,天）,调研（,10,天）,构思算法流程（,6,天）,程序实现（,36,天）,论文成文（,9,天）,工作思路与流程,1.,从摄像头读入图像，调整光照和角度两个条件，得到不同情况人脸,2.,采用,opencv,分类器对人脸、眼睛、眼镜、鼻子四个部位进行检测,3.,对每种情况下的人脸采用,LBP,与高斯滤波进行特征提取,4.,对,Step3,中得到的特征向量进行决策级融合,图像,1,图像,2,图像,N,部位检测,部位检测,部位检测,特征提取,特征提取,特征提取,特征分类,特征分类,特征分类,决策级图像融合,Step1,：人脸输入,软硬件环境,Intel,集成显卡、,130M Pixels USB,摄像头、,Ubuntu 10.10,操作系统、,Qt4.7,库、,openCV2.0,库,实现,人脸输入设计为独立模块，同时编成,.so,供张老师实验室其他毕设同学使用，添加光照与分辨率两个调解参数,Step2,：部位检测,工具 利用,opencv,社区提供的四种分类器，实现基于启发式模型的部位检测。首先使用人工神经网络分别检测出眼睛、鼻子、眼镜以及人脸的整体特征，根据其中的领域知识判断被检测的区域是否为人脸,修改分类器一部分，使得侧脸得到较好匹配,Step3,：特征提取,(1),人脸图像可能会由于光照、姿态、表情、遮挡或成像条件的变化，而使得现有的识别算法的性能及鲁棒性下降,局部特征反映了图像对象的结构特征，是图像对象固有的属性特征，对条件变化不敏感，因此提取图像本身固有的属性特征作为人脸表征方式非常有效,目前局部模式的特征描述方法主要有,Gabor,小波、基于图像分块策略的局部视觉基元等方法。缺点是维度高、不均匀,Step3:,特征提取,(2),局部二值模式,(LBP),的局部特征提取方法是一种有效的非参数化的图像局部纹理描述方法，它利用结构法思想分析固定窗口特征，再利用统计法作整体的特征提取。计算简单、能捕捉图像中的微量的细节特征，从而提取更利,图像的局部纹理,T,的分布可假设认为是局部区域内像素灰度的联合分布密度,T=t(g,c,g,0,g,p-1,).,其中,g,c,对应图像局部邻域中心像素点的灰度值，,g,i,(i=O,，,P,一,1),对应于,P,个等距离分布于以心像素为圆心、半径为,R,的圆周上的像素点的灰度值，则近邻区域的定义通常可以由一个值对,(P,，,R),来描述，于分类的局部邻域关系模式,Step4:,特征分类,决策中常用的最小距离分类器只能提供测试样本到各类的距离信息，我们需要将此转化为识别匹配度,这里编程实现的分类方法为,SVM,：以结构风险最小化原则为理论依据，通过某种特定非线性映射，将输入向量映射到高维特征空间,标准,SVM,根据其输出,f,(,x,)=,T,(,x,)+,b,的值给出分类结果：若,f,(,x,),0,时，将输入,x,赋给正类，否则赋给负类。后验概率,P,(,class input,),=P(y=1|x)=F(f(x),Step5:,决策级融合,决策融合方法有基于统计的方法：概率推理，贝叶斯推理，,D-S,证据，基于信息理论的方法：参数模板匹配，聚类分析，自适应神经网络，熵法等和基于认知模型的方法：逻辑模板匹配，模糊集理论，专家系统,这里采用贝叶斯推理进行决策级融合。设测试人脸与训练库某个样本属于同一人时为类内模,1,，属于不同人时为类间模式,2,，从而将人脸识别问题转化为两类模式,1,和,2,的,分类问题,进度报告,完整完成：人脸输入,(Step1),，部位检测,(Step2),，,特征提取,(Step3),，特征分类,(Step4),；,部分完成：决策级融合,(Step5),额外计划：与高晨阳同学进行合作。高晨阳同学同在张国义老师指导下做特征级融合。设想如果将光照、角度两个条件分为两步做，将图像分为,5,光照*,3,角度。第一步在相同角度下进行特征级融合，第二部对不同角度做决策级融合,谢谢！,感谢张国义老师权威而耐心的指导；,感谢高晨阳同学多次与我就融合问题进行讨论分析；,感谢,0206,某博士师兄提供,SVM,分类器框架；,感谢开源社区为计算机工业界与科研领域提供无数优秀的库函数等工具,PB07005051,孙雨润,2011,年,5,月,3,日,