第10卷第1期 智能系统学报 Vol.10No.1 2015年2月 CAAI Transactions on Intelligent Systems Feb.2015 D0I:10.3969/j.issn.1673-4785.201312064 网络出版地址：http://www.cnki.net/kcms/detail/23.1538.TP.20150113.1131.010.html 一种基于特征匹配的人脸配准判断方法 阮晓虎，李卫军，覃鸿，董肖莉，张丽萍 (中国科学院半导体研究所高速电路与神经网络实验室，北京100083) 摘要：现有的人脸识别应用系统大都忽略了人脸配准的检查，造成“误配准灾难”，导致识别性能下降。因此，对规 格化后的人脸图像进行判断筛选，以保证只有正确配准的人脸图像才能用于后续识别。选用一定数量正确配准的 规格化人脸图像平均值作为标准人脸，用SFT关键点定位方法得到标准人脸的多个关键点，采用分块的梯度方向直 方图统计方法提取关键点的邻域图像特征：然后，将标准人脸的关键点位置作为待检测人脸的定位点，用同样的方 法提取定位点的邻域图像特征：计算待检图像与标准人脸图像对应关键点的特征矢量相似度，设定合理阈值判断待 检测图像是否配准。实验证明，该方法能有效去除误配准人脸图像，有利于提高人脸识别系统的可靠性。 关键词：人脸识别：图像规格化：配准判断：图像特征：SFT描述子：梯度方向直方图：关键点定位：图像匹配 中图分类号：TP183文献标志码：A文章编号：1673-4785(2015)01-0012-08 中文引用格式：阮晓虎，李卫军，覃鸿，等.一种基于特征匹配的人脸配准判断方法[J].智能系统学报，2015,10(1)：12-19. 英文引用格式：RUAN Xiaohu,LI Weijun,QIN Hong,etal.An assessment method for face alignment based on feature matching[J]. CAAI Transactions on Intelligent Systems,2015,10(1):12-19. An assessment method for face alignment based on feature matching RUAN Xiaohu,LI Weijun,QIN Hong,DONG Xiaoli,ZHANG Liping (Institute of Semiconductors,Chinese Academy of Sciences,Beijing 100083,China) Abstract:The lacking of confirmation for face alignment leads to an incorrect feature match.The decline of recogni- tion rate in current application of face recognition is called "mis-alignment crash".Therefore,it is necessary to test and filter the normalized face images to make sure only the aligned face images can go through the recognition pro- cedure.In the method,a bunch of right-alignment normalized face images were used to form a mean face which was defined as the standard face.The key points location theory of SIFT was used to get the key points of standard face and the features of neighboring images were extracted on the basis of blocked statistical histogram in gradient orien- tation.The location of key points of a standard face was taken as the positioning point of a face to be detected.Using the same method to extract the features of neighboring images showed that the similarities of the test images to the standard face were calculated according to their corresponding feature descriptors of the key points.A reasonable threshold was chosen to estimate and classify the images according to their similarities to standard face.The experi- ment proved that this method is effective in eliminating mis-aligned face image effectively and is beneficial for in- creasing the reliability of a face recognition system. Keywords:face recognition;image normalization;alignment assessment;image feature;SIFT descriptor;gradient orientation histogram;key point location;image matching 人脸识别是利用计算机技术通过人脸的图像信 收稿日期：2013-12-31.网络出版日期：2015-01-13. 基金项目：国家自然科学基金资助项目(90920013). 息辨别不同身份的技术，迄今已有近50年的历史。 通信作者：李卫军.E-mail:wjli@scmi.ac.cn. 人脸识别的一般步骤是采集图像数据、图像预处理
第 员园 卷第 员 期摇摇摇摇 摇摇摇 摇 摇摇摇 智 能 系 统 学 报摇摇摇摇摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 灾燥造援员园翼援员 圆园员缘 年 圆 月摇摇摇摇摇摇摇摇摇摇摇 悦粤粤陨 栽则葬灶泽葬糟贼蚤燥灶泽 燥灶 陨灶贼藻造造蚤早藻灶贼 杂赠泽贼藻皂泽 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 摇 云藻遭援 圆园员缘 阅韵陨院员园援猿怨远怨 辕 躁援蚤泽泽灶援员远苑猿鄄源苑愿缘援圆园员猿员圆园远源 网络出版地址院澡贼贼责院 辕 辕 憎憎憎援糟灶噪蚤援灶藻贼 辕 噪糟皂泽 辕 凿藻贼葬蚤造 辕 圆猿援员缘猿愿援栽孕援圆园员缘园员员猿援员员猿员援园员园援澡贼皂造 一种基于特征匹配的人脸配准判断方法 阮晓虎袁 李卫军袁 覃鸿袁 董肖莉袁 张丽萍 渊中国科学院半导体研究所 高速电路与神经网络实验室袁北京 员园园园愿猿冤 摘 要院现有的人脸识别应用系统大都忽略了人脸配准的检查袁造成野误配准灾难冶 袁导致识别性能下降遥 因此袁对规 格化后的人脸图像进行判断筛选袁以保证只有正确配准的人脸图像才能用于后续识别遥 选用一定数量正确配准的 规格化人脸图像平均值作为标准人脸袁用 杂陨云栽 关键点定位方法得到标准人脸的多个关键点袁采用分块的梯度方向直 方图统计方法提取关键点的邻域图像特征曰然后袁将标准人脸的关键点位置作为待检测人脸的定位点袁用同样的方 法提取定位点的邻域图像特征曰计算待检图像与标准人脸图像对应关键点的特征矢量相似度袁设定合理阈值判断待 检测图像是否配准遥 实验证明袁该方法能有效去除误配准人脸图像袁有利于提高人脸识别系统的可靠性遥 关键词院人脸识别曰图像规格化曰配准判断曰图像特征曰杂陨云栽 描述子曰梯度方向直方图曰关键点定位曰图像匹配 中图分类号院栽孕员愿猿 摇 文献标志码院粤摇 文章编号院员远苑猿鄄源苑愿缘渊圆园员缘冤园员鄄园园员圆鄄园愿 中文引用格式院阮晓虎袁 李卫军袁 覃鸿袁 等援 一种基于特征匹配的人脸配准判断方法咱允暂援 智能系统学报袁 圆园员缘袁 员园渊员冤 院 员圆鄄员怨援 英文引用格式院砸哉粤晕 载蚤葬燥澡怎袁蕴陨 宰藻蚤躁怎灶袁匝陨晕 匀燥灶早袁藻贼 葬造援 粤灶 葬泽泽藻泽泽皂藻灶贼 皂藻贼澡燥凿 枣燥则 枣葬糟藻 葬造蚤早灶皂藻灶贼 遭葬泽藻凿 燥灶 枣藻葬贼怎则藻 皂葬贼糟澡蚤灶早咱允暂援 悦粤粤陨 栽则葬灶泽葬糟贼蚤燥灶泽 燥灶 陨灶贼藻造造蚤早藻灶贼 杂赠泽贼藻皂泽袁 圆园员缘袁 员园渊员冤 院 员圆鄄员怨援 粤灶 葬泽泽藻泽泽皂藻灶贼 皂藻贼澡燥凿 枣燥则 枣葬糟藻 葬造蚤早灶皂藻灶贼 遭葬泽藻凿 燥灶 枣藻葬贼怎则藻 皂葬贼糟澡蚤灶早 砸哉粤晕 载蚤葬燥澡怎袁 蕴陨 宰藻蚤躁怎灶袁 匝陨晕 匀燥灶早袁 阅韵晕郧 载蚤葬燥造蚤袁 在匀粤晕郧 蕴蚤责蚤灶早 渊 陨灶泽贼蚤贼怎贼藻 燥枣 杂藻皂蚤糟燥灶凿怎糟贼燥则泽袁 悦澡蚤灶藻泽藻 粤糟葬凿藻皂赠 燥枣 杂糟蚤藻灶糟藻泽袁 月藻蚤躁蚤灶早 员园园园愿猿袁 悦澡蚤灶葬冤 粤遭泽贼则葬糟贼院栽澡藻 造葬糟噪蚤灶早 燥枣 糟燥灶枣蚤则皂葬贼蚤燥灶 枣燥则 枣葬糟藻 葬造蚤早灶皂藻灶贼 造藻葬凿泽 贼燥 葬灶 蚤灶糟燥则则藻糟贼 枣藻葬贼怎则藻 皂葬贼糟澡援 栽澡藻 凿藻糟造蚤灶藻 燥枣 则藻糟燥早灶蚤鄄 贼蚤燥灶 则葬贼藻 蚤灶 糟怎则则藻灶贼 葬责责造蚤糟葬贼蚤燥灶 燥枣 枣葬糟藻 则藻糟燥早灶蚤贼蚤燥灶 蚤泽 糟葬造造藻凿 寓 皂蚤泽鄄葬造蚤早灶皂藻灶贼 糟则葬泽澡寓 援 栽澡藻则藻枣燥则藻袁 蚤贼 蚤泽 灶藻糟藻泽泽葬则赠 贼燥 贼藻泽贼 葬灶凿 枣蚤造贼藻则 贼澡藻 灶燥则皂葬造蚤扎藻凿 枣葬糟藻 蚤皂葬早藻泽 贼燥 皂葬噪藻 泽怎则藻 燥灶造赠 贼澡藻 葬造蚤早灶藻凿 枣葬糟藻 蚤皂葬早藻泽 糟葬灶 早燥 贼澡则燥怎早澡 贼澡藻 则藻糟燥早灶蚤贼蚤燥灶 责则燥鄄 糟藻凿怎则藻援 陨灶 贼澡藻 皂藻贼澡燥凿袁 葬 遭怎灶糟澡 燥枣 则蚤早澡贼鄄葬造蚤早灶皂藻灶贼 灶燥则皂葬造蚤扎藻凿 枣葬糟藻 蚤皂葬早藻泽 憎藻则藻 怎泽藻凿 贼燥 枣燥则皂 葬 皂藻葬灶 枣葬糟藻 憎澡蚤糟澡 憎葬泽 凿藻枣蚤灶藻凿 葬泽 贼澡藻 泽贼葬灶凿葬则凿 枣葬糟藻援 栽澡藻 噪藻赠 责燥蚤灶贼泽 造燥糟葬贼蚤燥灶 贼澡藻燥则赠 燥枣 杂陨云栽 憎葬泽 怎泽藻凿 贼燥 早藻贼 贼澡藻 噪藻赠 责燥蚤灶贼泽 燥枣 泽贼葬灶凿葬则凿 枣葬糟藻 葬灶凿 贼澡藻 枣藻葬贼怎则藻泽 燥枣 灶藻蚤早澡遭燥则蚤灶早 蚤皂葬早藻泽 憎藻则藻 藻曾贼则葬糟贼藻凿 燥灶 贼澡藻 遭葬泽蚤泽 燥枣 遭造燥糟噪藻凿 泽贼葬贼蚤泽贼蚤糟葬造 澡蚤泽贼燥早则葬皂 蚤灶 早则葬凿蚤藻灶贼 燥则蚤藻灶鄄 贼葬贼蚤燥灶援 栽澡藻 造燥糟葬贼蚤燥灶 燥枣 噪藻赠 责燥蚤灶贼泽 燥枣 葬 泽贼葬灶凿葬则凿 枣葬糟藻 憎葬泽 贼葬噪藻灶 葬泽 贼澡藻 责燥泽蚤贼蚤燥灶蚤灶早 责燥蚤灶贼 燥枣 葬 枣葬糟藻 贼燥 遭藻 凿藻贼藻糟贼藻凿援 哉泽蚤灶早 贼澡藻 泽葬皂藻 皂藻贼澡燥凿 贼燥 藻曾贼则葬糟贼 贼澡藻 枣藻葬贼怎则藻泽 燥枣 灶藻蚤早澡遭燥则蚤灶早 蚤皂葬早藻泽 泽澡燥憎藻凿 贼澡葬贼 贼澡藻 泽蚤皂蚤造葬则蚤贼蚤藻泽 燥枣 贼澡藻 贼藻泽贼 蚤皂葬早藻泽 贼燥 贼澡藻 泽贼葬灶凿葬则凿 枣葬糟藻 憎藻则藻 糟葬造糟怎造葬贼藻凿 葬糟糟燥则凿蚤灶早 贼燥 贼澡藻蚤则 糟燥则则藻泽责燥灶凿蚤灶早 枣藻葬贼怎则藻 凿藻泽糟则蚤责贼燥则泽 燥枣 贼澡藻 噪藻赠 责燥蚤灶贼泽援 粤 则藻葬泽燥灶葬遭造藻 贼澡则藻泽澡燥造凿 憎葬泽 糟澡燥泽藻灶 贼燥 藻泽贼蚤皂葬贼藻 葬灶凿 糟造葬泽泽蚤枣赠 贼澡藻 蚤皂葬早藻泽 葬糟糟燥则凿蚤灶早 贼燥 贼澡藻蚤则 泽蚤皂蚤造葬则蚤贼蚤藻泽 贼燥 泽贼葬灶凿葬则凿 枣葬糟藻援 栽澡藻 藻曾责藻则蚤鄄 皂藻灶贼 责则燥增藻凿 贼澡葬贼 贼澡蚤泽 皂藻贼澡燥凿 蚤泽 藻枣枣藻糟贼蚤增藻 蚤灶 藻造蚤皂蚤灶葬贼蚤灶早 皂蚤泽鄄葬造蚤早灶藻凿 枣葬糟藻 蚤皂葬早藻 藻枣枣藻糟贼蚤增藻造赠 葬灶凿 蚤泽 遭藻灶藻枣蚤糟蚤葬造 枣燥则 蚤灶鄄 糟则藻葬泽蚤灶早 贼澡藻 则藻造蚤葬遭蚤造蚤贼赠 燥枣 葬 枣葬糟藻 则藻糟燥早灶蚤贼蚤燥灶 泽赠泽贼藻皂援 运藻赠憎燥则凿泽院枣葬糟藻 则藻糟燥早灶蚤贼蚤燥灶曰 蚤皂葬早藻 灶燥则皂葬造蚤扎葬贼蚤燥灶曰 葬造蚤早灶皂藻灶贼 葬泽泽藻泽泽皂藻灶贼曰 蚤皂葬早藻 枣藻葬贼怎则藻曰 杂陨云栽 凿藻泽糟则蚤责贼燥则曰 早则葬凿蚤藻灶贼 燥则蚤藻灶贼葬贼蚤燥灶 澡蚤泽贼燥早则葬皂曰 噪藻赠 责燥蚤灶贼 造燥糟葬贼蚤燥灶曰 蚤皂葬早藻 皂葬贼糟澡蚤灶早 收稿日期院圆园员猿鄄员圆鄄猿员援 摇 网络出版日期院圆园员缘鄄园员鄄员猿援 基金项目院国家自然科学基金资助项目渊怨园怨圆园园员猿冤援 通信作者院李卫军援耘鄄皂葬蚤造院 憎躁造蚤岳 泽藻皂蚤援葬糟援糟灶援 摇 摇 人脸识别是利用计算机技术通过人脸的图像信 息辨别不同身份的技术袁迄今已有近 缘园 年的历史遥 人脸识别的一般步骤是采集图像数据尧图像预处理尧
第1期 阮晓虎，等：一种基于特征匹配的人脸配准判断方法 ·13· 人脸定位、人脸图像规格化、人脸特征提取、特征匹 理想的人脸定位算法：2)在人脸识别系统的“特 配。在单人脸识别或者人脸注册等过程中，为了保证 征提取”步骤之前，对规格化人脸图像进行配准 人脸特征库和用于识别的人脸图像特征的统一性，必 判断，去除错误配准的图像，防止误配准图像进 须保证规格化后的人脸图像在眼睛、鼻子、嘴巴等部 入后续流程而造成识别性能的下降。 位的相对位置与标准人脸精确配准。人脸配准问题 本文从消除误配准的思路出发，提出一种人脸 首先是由山世光等提出，是指在人脸识别过程中， 配准的判断方法，根据ST的关键点定位理 测试图片与训练图片的关键部位的位置是否匹配。 论[9,146)，使用一种基于关键点邻域分块梯度方向 文献[1]指出：大多数被错误识别的样本完全可以通 直方图统计的图像特征提取方法提取待检测图像和 过精确调整眼睛的位置得到正确的识别结果，也就是 标准人脸的特征，依据待检测图像与标准人脸图像 说，识别性能的下降很大程度上是由于自动定位的眼 的特征匹配相似度来判断人脸图像是否正确配准。 睛位置不够准确造成的。在实际应用中，由人脸误配 2算法流程 准问题引起的识别率的下降时有发生。因此，在人脸 识别系统中，保证规格化后用于识别的人脸图像的正 2.1算法框架 确配准变得越来越重要。 针对人脸识别中规格化完成后的人脸图像，本 算法通过比较待测图像与标准人脸的特征相似度来 1 相关工作 实现配准判断，以筛选用于识别的定位正确的人脸 误配准对于人脸识别系统的不同阶段有着不同 图像。算法步骤为：1)通过现有的人脸定位程序， 的影响，对于人脸特征库建模阶段，误配准将导致人 对人脸库中图像进行定位，经过图像分割规格化后 脸特征库的信息不准确，直接造成系统拒绝识别或 选出500张正确配准的人脸图片，求平均人脸图像 者识别为他人，对于识别阶段，误配准将导致识别率 作为标准人脸（此处选取定位正确的图片是在统一 严重下降。文献[2]讨论了DAGR对误配准程度的 光照条件下，去除了表情等因素影响的图片，作为算 鲁棒性虽比Fisher face方法强，但还是一定程度的 法的先验知识)：2)用SIFT关键点定位算法在标准 造成了“误配准灾难”。 人脸上确定关键点K(K的信息包含位置KL,个数 解决“误配准灾难”问题有2条技术途径：1) P),并用本文基于关键点邻域梯度方向直方图统计 提高人脸图像配准的精确度及采用鲁棒性强的 的方法提取标准人脸图像特征，将该特征作为标准 特征，文献[3-5]从精确人脸定位的方法入手，很 矢量模板（记为ST):3)将标准人脸的关键点应用 大程度地改善了人脸配准，文献[6]通过构建多 为待测试人脸图像的定位点，同样由本文基于关键 层次人脸配准算法，矫正了人脸图像，文献[7]比 点邻域梯度方向直方图统计的方法提取待测试人脸 较分析了3种不同的技术ASM(active shape mod-- 定位点的图像特征（记为MT):4)求标准人脸特征 el)CLM(constrained local model)AAM(active ST与待测试人脸特征MT的余弦相似度，标记大于 appearance model)用于自动高密集度标记的人脸 设定阈值的图像为正确配准的图像，否则，标记为错 配准方法，得到了较好的配准效果，尽管如此，人 误配准的图像。算法流程如图1所示。 脸定位仍然存在一定概率的错误，目前还不存在 关键点 选择 c特征提取 标准矢量 h 模板ST 标准图像 500张定位正 关键点 确人脸图像 提取 本文 e定位点应用 特征 相似 S是否 Y 提取 度S 大于 正确配准 方法 國值 待测特征 错误配准 特征提取 矢量MT 图1 本文算法流程 Fig.1 Algorithm flow chart
人脸定位尧人脸图像规格化尧人脸特征提取尧特征匹 配遥 在单人脸识别或者人脸注册等过程中袁为了保证 人脸特征库和用于识别的人脸图像特征的统一性袁必 须保证规格化后的人脸图像在眼睛尧鼻子尧嘴巴等部 位的相对位置与标准人脸精确配准遥 人脸配准问题 首先是由山世光等提出咱员暂 袁是指在人脸识别过程中袁 测试图片与训练图片的关键部位的位置是否匹配遥 文献咱员暂指出院大多数被错误识别的样本完全可以通 过精确调整眼睛的位置得到正确的识别结果袁也就是 说袁识别性能的下降很大程度上是由于自动定位的眼 睛位置不够准确造成的遥 在实际应用中袁由人脸误配 准问题引起的识别率的下降时有发生遥 因此袁在人脸 识别系统中袁保证规格化后用于识别的人脸图像的正 确配准变得越来越重要遥 员摇 相关工作 摇 摇 误配准对于人脸识别系统的不同阶段有着不同 的影响袁对于人脸特征库建模阶段袁误配准将导致人 脸特征库的信息不准确袁直接造成系统拒绝识别或 者识别为他人袁对于识别阶段袁误配准将导致识别率 严重下降遥 文献咱圆暂讨论了 阅粤郧砸 对误配准程度的 鲁棒性虽比 云蚤泽澡藻则 枣葬糟藻 方法强袁但还是一定程度的 造成了野误配准灾难冶 遥 解决野误配准灾难冶问题有 圆 条技术途径院员冤 提高人脸图像配准的精确度及采用鲁棒性强的 特征袁文献咱 猿鄄缘暂从精确人脸定位的方法入手袁很 大程度地改善了人脸配准袁文献咱远暂 通过构建多 层次人脸配准算法袁矫正了人脸图像袁文献咱苑暂 比 较分析了 猿 种不同的技术 粤杂酝渊 葬糟贼蚤增藻 泽澡葬责藻 皂燥凿鄄 藻造冤 尧 悦蕴酝 渊 糟燥灶泽贼则葬蚤灶藻凿 造燥糟葬造 皂燥凿藻造冤 尧 粤粤酝 渊 葬糟贼蚤增藻 葬责责藻葬则葬灶糟藻 皂燥凿藻造冤 用于自动高密集度标记的人脸 配准方法袁得到了较好的配准效果袁尽管如此袁人 脸定位仍然存在一定概率的错误袁目前还不存在 理想的人脸定位算法曰圆冤 在人脸识别系统的野 特 征提取冶 步骤之前袁对规格化人脸图像进行配准 判断袁去除错误配准的图像袁防止误配准图像进 入后续流程而造成识别性能的下降遥 本文从消除误配准的思路出发袁提出一种人脸 配准 的 判 断 方 法袁 根 据 杂陨云栽 的关键点定位理 论咱怨袁员源鄄员远暂 袁使用一种基于关键点邻域分块梯度方向 直方图统计的图像特征提取方法提取待检测图像和 标准人脸的特征袁依据待检测图像与标准人脸图像 的特征匹配相似度来判断人脸图像是否正确配准遥 圆摇 算法流程 圆援员摇 算法框架 针对人脸识别中规格化完成后的人脸图像袁本 算法通过比较待测图像与标准人脸的特征相似度来 实现配准判断袁以筛选用于识别的定位正确的人脸 图像遥 算法步骤为院员冤通过现有的人脸定位程序袁 对人脸库中图像进行定位袁经过图像分割规格化后 选出 缘园园 张正确配准的人脸图片袁求平均人脸图像 作为标准人脸渊此处选取定位正确的图片是在统一 光照条件下袁去除了表情等因素影响的图片袁作为算 法的先验知识冤曰圆冤用 杂陨云栽 关键点定位算法在标准 人脸上确定关键点 运 渊 运 的信息包含位置 运蕴袁 个数 孕 冤 袁并用本文基于关键点邻域梯度方向直方图统计 的方法提取标准人脸图像特征袁将该特征作为标准 矢量模板渊记为 杂栽 冤曰猿冤将标准人脸的关键点应用 为待测试人脸图像的定位点袁同样由本文基于关键 点邻域梯度方向直方图统计的方法提取待测试人脸 定位点的图像特征渊记为 酝栽 冤 曰源冤求标准人脸特征 杂栽 与待测试人脸特征 酝栽 的余弦相似度袁标记大于 设定阈值的图像为正确配准的图像袁否则袁标记为错 误配准的图像遥 算法流程如图 员 所示遥 图 员摇 本文算法流程 云蚤早援员摇 粤造早燥则蚤贼澡皂 枣造燥憎 糟澡葬则贼 第 员 期摇摇摇摇摇摇摇摇摇摇摇摇摇摇 阮晓虎袁等院 一种基于特征匹配的人脸配准判断方法 窑员猿窑
·14 智能系统学报 第10卷 2.2标准矢量模板的产生 图像的SIFT关键点。图像的SIFT关键点由如下步 2.2.1标准人脸的产生 骤得到，对图像1,1)由式(1)构建图像的尺度空间 本算法中用到的标准人脸是定位正确人脸图像 ,即 的参考图像，这决定了本算法的操作对象是预处理 L(x,y,o）=G(x,y,o）×I(x,y）(1) 完成后与标准人脸具有相同规格的规格化人脸图 G(x,y,)=exp(-(x2+y2)/2w2)/2mc2 像。下面介绍一种人脸识别中关于人脸定位、切割 式中：I(x,y)为点(x,y)像素值，σ为尺度因子。 及规格化的实现方法，也是本文实验部分所使用的 2)建立图像的高斯金字塔(difference of Gaussian, 人脸预处理方法。 DOG),记为D(x,y,σ)，在DOG空间中检测局部极 对于初步预处理完成的人脸图像，采用文献 值。D(x,y,o)由式(2)得到 [17]中给出的基于图像几何复杂度的方法进行人 D(x,y,)=(D(x,y,ko)-D(x,y,))xI(x,y)= 脸定位，获得人脸的双眼坐标位置和脸部区域如图 L(x,y,ko）-L(x,y,o) (2) 2(a)所示。根据两眼连线与图像水平线的角度0 式中：k表示在尺度空间L中不同尺度级的索引，此 确定人脸是否为正面人脸，并旋转有偏斜的人脸图 处，kσ与σ表示差分的图像尺度空间为2个相邻 像使之成为正面人脸。根据文献[5]中的人脸切分 的尺度级。在DOG空间中，如果检测到某像素值在 尺寸结合实验修正，对旋转完成后的人脸图像按图 本层及相邻层中是局部极值，即认为该点是图像的 2(b)所示的尺寸对图像做切割，其中d为眼矩（即 一个关键点。局部极值检测如图3所示。 双眼之间的距离)，图像左右边缘到眼睛的距离均 DOG空间 为0.7d,上边缘到两眼中间距离为0.8d,下边缘到 两眼中间距离为1.6d,切割完成的图像如图2(c)。 对切割完成的人脸图像规格化为40×40，如图 当前层 2(d)所示。 关键点 0.8d 0.7d +0.7d 相邻层 关键点 邻域值 1.6d 图3DOG空间极值点检测 (a)人脸定位 (b)人脸切割尺寸 Fig.3 Extreme points detection of DOG space 用2.2.1节得到的标准人脸经过以上SFT关键 点提取得到关键点K,表示为 K={P,KL}={P,{(x1y1),(x2y2),…,(xpyP)}} 式中：KL={(x1y1）,(x2y2),…,(xp,yp)}为关 键点的位置，P为关键点个数。 关键点的选取基于这样一个事实：对于定位正 (C)切割之后图像 (d)规格化图像 确的人脸，按统一的人脸切割方法得到的人脸图像 图2人脸切割 在眼睛、鼻子、嘴巴等关键部位必定有着相同的相对 Fig.2 Face segmentation 位置，相应地如果人脸定位超过一定偏差，剪切后 应用上述方法，选择500张定位正确的规格化后 的人脸图像在上述关键部位与标准人脸必定无法配 的图像求得平均人脸，将该平均人脸设定为标准人脸。 准。需要注意的是，在不同的算法应用中，标准人脸 需要注意的是，当使用不同的定位、切割及规格化方法 的SFT关键点位置和数目可能不同。但是，选取标 时，标准人脸需要使用新的规格化图像重新产生。 准人脸的SFT关键点作为产生标准矢量模板的关 2.2.2选取关键点 键点，并对所有被检测人脸图像统一使用该关键点， 本文人脸定位配准检测的关键点采用标准人脸 在配准判断中具有统一性和可比性。同时，这种关
圆援圆摇 标准矢量模板的产生 圆援圆援员摇 标准人脸的产生 本算法中用到的标准人脸是定位正确人脸图像 的参考图像袁这决定了本算法的操作对象是预处理 完成后与标准人脸具有相同规格的规格化人脸图 像遥 下面介绍一种人脸识别中关于人脸定位尧切割 及规格化的实现方法袁也是本文实验部分所使用的 人脸预处理方法遥 对于初步预处理完成的人脸图像袁采用文献 咱员苑暂中给出的基于图像几何复杂度的方法进行人 脸定位袁获得人脸的双眼坐标位置和脸部区域如图 圆渊葬冤所示遥 根据两眼连线与图像水平线的角度 兹 确定人脸是否为正面人脸袁并旋转有偏斜的人脸图 像使之成为正面人脸遥 根据文献咱缘暂中的人脸切分 尺寸结合实验修正袁对旋转完成后的人脸图像按图 圆渊遭冤所示的尺寸对图像做切割袁其中 凿 为眼矩渊即 双眼之间的距离冤 袁图像左右边缘到眼睛的距离均 为 园援苑凿袁 上边缘到两眼中间距离为 园援愿凿袁 下边缘到 两眼中间距离为 员援远凿袁 切割完成的图像如图 圆渊糟冤遥 对切割完成的人脸图像规格化为 源园 伊 源园袁 如图 圆渊凿冤所示遥 图 圆摇 人脸切割 云蚤早援圆摇 云葬糟藻 泽藻早皂藻灶贼葬贼蚤燥灶 摇 摇 应用上述方法袁选择 缘园园 张定位正确的规格化后 的图像求得平均人脸袁将该平均人脸设定为标准人脸遥 需要注意的是袁当使用不同的定位尧切割及规格化方法 时袁标准人脸需要使用新的规格化图像重新产生遥 圆援圆援圆摇 选取关键点 本文人脸定位配准检测的关键点采用标准人脸 图像的 杂陨云栽 关键点遥 图像的 杂陨云栽 关键点由如下步 骤得到袁对图像 陨袁 员冤由式渊员冤构建图像的尺度空间 蕴袁 即 蕴渊曾袁赠袁滓冤 越 郧渊曾袁赠袁滓冤 伊 陨渊曾袁赠冤 渊员冤 郧渊曾袁赠袁滓冤 越 藻曾责渊 原 渊曾圆 垣 赠圆 冤 辕 圆滓圆 冤 辕 圆仔滓圆 式中院 陨渊曾袁赠冤 为点 渊曾袁赠冤 像素值袁 滓 为尺度因子遥 圆冤建立图像的高斯金字塔渊 凿蚤枣枣藻则藻灶糟藻 燥枣 郧葬怎泽泽蚤葬灶袁 阅韵郧冤 袁记为 阅渊曾袁赠袁滓冤 袁 在 阅韵郧 空间中检测局部极 值遥 阅渊曾袁赠袁滓冤 由式渊圆冤得到 阅渊曾袁赠袁滓冤 越 渊阅渊曾袁赠袁噪滓冤 原 阅渊曾袁赠袁滓冤 冤 伊 陨渊曾袁赠冤 越 蕴渊曾袁赠袁噪滓冤 原 蕴渊曾袁赠袁滓冤 渊圆冤 式中院 噪 表示在尺度空间 蕴 中不同尺度级的索引袁此 处袁 噪滓 与 滓 表示差分的图像尺度空间为 圆 个相邻 的尺度级遥 在 阅韵郧 空间中袁如果检测到某像素值在 本层及相邻层中是局部极值袁即认为该点是图像的 一个关键点遥 局部极值检测如图 猿 所示遥 图 猿摇 阅韵郧 空间极值点检测 云蚤早援猿摇 耘曾贼则藻皂藻 责燥蚤灶贼泽 凿藻贼藻糟贼蚤燥灶 燥枣 阅韵郧 泽责葬糟藻 摇 摇 用 圆援圆援员 节得到的标准人脸经过以上 杂陨云栽 关键 点提取得到关键点 运袁 表示为 运 越 { } 孕袁运蕴 越 孕袁 渊曾员袁赠员冤袁渊曾圆袁赠圆冤袁窑窑窑袁渊曾孕袁赠 { } { } 孕冤 式中院 运蕴 越 渊曾员 袁赠员 冤袁渊曾圆 袁赠圆 冤袁窑窑窑袁渊曾孕 袁赠 { } 孕 冤 为关 键点的位置袁 孕 为关键点个数遥 关键点的选取基于这样一个事实院对于定位正 确的人脸袁按统一的人脸切割方法得到的人脸图像 在眼睛尧鼻子尧嘴巴等关键部位必定有着相同的相对 位置袁相应地袁如果人脸定位超过一定偏差袁剪切后 的人脸图像在上述关键部位与标准人脸必定无法配 准遥 需要注意的是袁在不同的算法应用中袁标准人脸 的 杂陨云栽 关键点位置和数目可能不同遥 但是袁选取标 准人脸的 杂陨云栽 关键点作为产生标准矢量模板的关 键点袁并对所有被检测人脸图像统一使用该关键点袁 在配准判断中具有统一性和可比性遥 同时袁这种关 窑员源窑 智 能 系 统 学 报摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇 第 员园 卷
第1期 阮晓虎，等：一种基于特征匹配的人脸配准判断方法 ·15· 键点的选择具有SFT关键点定位的理论依据，也符 ·,m×m)组合起来即构成了该关键点K的特征 合一定的观察经验。对于定位正确的人脸图像，这 向量Tp 些关键点位置总是特征信息最丰富的点。 To=UT。(c=1,2,…,m×m) 2.2.3提取特征向量 最后，将所有关键点的特征向量组合起来即得 本文采用基于关键点邻域梯度方向直方图统计 到标准矢量模板ST: 的特征提取方法提取人脸图像特征。对图像Ⅰ和某 ST={Tp)Ip=1,2,…,P} 一个关键点Kp,以关键点为中心取0×e的窗口 考虑算法不同的应用，可以根据图像的复杂程 (记为W)作为一个块(Block),再将该窗口W划分 度和处理目标的要求选取窗口大小心和方向个数 为m×m个单元(Cel),如图4所示。 n,需要突出细节信息时，选取较小的窗口0和较大 兔 的方向个数，一般来说，块、单元及方向划分个数 可以分别选择0=16，m=4,n=8。 23人脸图像配准判断 对待测试图像，配准判断是通过待检测图像特 单元 征矢量MT与标准矢量模板ST的匹配相似度来度 量，该相似度也表示了待测试图像与标准人脸图像 像索 的相似性（文中图像间的相似度均由对应图像的特 征矢量间的相似度来表示)，判断时，该相似度达到 设定阈值即判定为正确配准人脸图像，否则，即是误 配准人脸图像。待检测图像特征矢量MT的求取统 图4关键点块和单元划分 一采用2.2节中产生标准矢量模板时用到的关键点 Fig.4 Block and cell division for the key points K和特征向量的求取方法，得到P个关键点的特征 在图像F中，像素点L(x,y)的梯度幅值和方 向量Tt,表示为 向的计算公式为 MT={Tmp)Ip=1,2,…,Py A(x,y)=|L(x+1,y)-L(x-1,y)I+ 求出待检测图像特征矢量MT与标准矢量模板 1L(x,y+1)-L(x,y-1)1 ST中各关键点对应特征向量的余弦相似度S。: L(x,y+1)-L(x,y-1) Tpl·Tp) p(x,y)=arctanL(+1,y）-(x-1,y） 77p=12,…P月 计算各单元中像素点的梯度幅值A和方向O, 再根据各关键点对最终判决的贡献大小Y对 将方向值量化到n个方向： 各相似度加权，得到待检测图像特征矢量MT与标 准矢量模板ST的匹配相似度S: f=2mk/n(k=0,1,··,n-1) 式中：n为方向个数划分。然后，由中心点与关键点 S=∑y,S。(p=1,2,…,P) K。重合的高斯窗口函数G.对窗口W内梯度幅值A 在试验中，可以发现对P个关键点的相似度求平 进行加权： 均作为总体相似性时，S的值可以很好的实现分类， G.(x,y)=exp(-(x2+2)/20)/2mo2 即对y取值为y。=1/P(式中，p=1,2,…,P)。设 AW(x,y)=Ax G=A(x,y)exp(-(x2+y2)/20) 判定阈值为Seau,对于S≥mebold的待测试图像， 式中：σ为加权因子，取值σ=w/2,AW为加权后梯 判断其为正确配准人脸图像，否则判断为定位错误人 度幅值，(x,y)∈W,x',y∈[-0,0]。 脸图像，实验中，Sreshold取值范围为0.68-0.74。 对单元c,统计n个方向的加权梯度幅值AW形 2.4算法分析和讨论 成方向梯度直方图T。。在单元c中扫描每个像素 人脸配准判断应该引起足够的重视，但是，该步 点梯度方向，则T。为 骤的算法复杂度不应大于人脸特征提取和识别等更 (T.+AW:,0:=2πk/n T)= 重要的步骤，这一点限定了配准判断算法所允许的 T,其他 复杂度。 式中：k=0,1,…,n-1,i∈c,n为方向个数，i为 ST特征提取在图像匹配方面表现出了优良 单元c中像素点索引。将所有单元格T(c=1,2, 的性质，例如：对旋转、尺度、亮度变化的稳定性、图
键点的选择具有 杂陨云栽 关键点定位的理论依据袁也符 合一定的观察经验遥 对于定位正确的人脸图像袁这 些关键点位置总是特征信息最丰富的点遥 圆援圆援猿摇 提取特征向量 本文采用基于关键点邻域梯度方向直方图统计 的特征提取方法提取人脸图像特征遥 对图像 陨 和某 一个关键点 运责袁 以关键点为中心取 憎 伊 憎 的窗口 渊记为 宰 冤作为一个块渊 月造燥糟噪冤 袁再将该窗口 宰 划分 为 皂 伊 皂 个单元渊悦藻造造冤 袁如图 源 所示遥 图 源摇 关键点块和单元划分 云蚤早援源摇 月造燥糟噪 葬灶凿 糟藻造造 凿蚤增蚤泽蚤燥灶 枣燥则 贼澡藻 噪藻赠 责燥蚤灶贼泽 摇 摇 在图像 云 中袁像素点 蕴渊曾袁赠冤 的梯度幅值和方 向的计算公式为 粤渊曾袁赠冤 越渣 蕴渊曾 垣 员袁赠冤 原 蕴渊曾 原 员袁赠冤 渣 垣 渣 蕴渊曾袁赠 垣 员冤 原 蕴渊曾袁赠 原 员冤 渣 渍渊曾袁赠冤 越 葬则糟贼葬灶 蕴渊曾袁赠 垣 员冤 原 蕴渊曾袁赠 原 员冤 蕴渊曾 垣 员袁赠冤 原 蕴渊曾 原 员袁赠冤 摇 摇 计算各单元中像素点的梯度幅值 粤 和方向 韵袁 将方向值量化到 灶 个方向院 枣 越 圆仔噪辕灶 渊噪 越 园袁员袁窑窑窑袁灶 原 员冤 式中院 灶 为方向个数划分遥 然后袁由中心点与关键点 运孕 重合的高斯窗口函数 郧憎 对窗口 宰 内梯度幅值 粤 进行加权院 郧憎渊曾袁赠冤 越 藻曾责渊 原 渊曾圆 垣 赠圆 冤 辕 圆滓冤 辕 圆仔滓圆 粤宰渊曾袁赠冤 越 粤 伊 郧 越 粤渊曾袁赠冤藻曾责渊 原 渊曾忆圆 垣 赠忆圆 冤 辕 圆滓冤 式中院 滓 为加权因子袁取值 滓 越 憎 辕 圆袁 粤宰 为加权后梯 度幅值袁 渊曾袁赠冤 沂 宰袁 曾忆袁赠忆 沂 咱 原 憎袁憎暂 遥 对单元 糟袁 统计 灶 个方向的加权梯度幅值 粤宰 形 成方向梯度直方图 栽糟 遥 在单元 糟 中扫描每个像素 点梯度方向袁则 栽糟 为 栽糟渊噪冤 越 栽糟渊噪冤 垣 粤宰蚤袁韵蚤 越 圆仔噪辕灶 {栽糟渊噪冤 袁其他 式中院 噪 越 园袁员袁窑窑窑袁灶 原 员袁蚤 沂 糟袁 灶 为方向个数袁 蚤 为 单元 糟 中像素点索引遥 将所有单元格 栽糟渊糟 越 员袁圆袁 窑窑窑袁皂 伊 皂冤 组合起来即构成了该关键点 运责 的特征 向量 栽渊责冤 院 栽渊责冤 越胰 栽糟 渊糟 越 员袁圆袁窑窑窑袁皂 伊 皂冤 摇 摇 最后袁将所有关键点的特征向量组合起来即得 到标准矢量模板 杂栽 院 杂栽 越 栽渊责冤 { } 渣 责 越 员袁圆袁噎袁孕 摇 摇 考虑算法不同的应用袁可以根据图像的复杂程 度和处理目标的要求选取窗口大小 憎 和方向个数 灶袁 需要突出细节信息时袁选取较小的窗口 憎 和较大 的方向个数 灶袁 一般来说袁块尧单元及方向划分个数 可以分别选择 憎 越 员远袁皂 越 源袁灶 越 愿遥 圆援猿摇 人脸图像配准判断 对待测试图像袁配准判断是通过待检测图像特 征矢量 酝栽 与标准矢量模板 杂栽 的匹配相似度来度 量袁该相似度也表示了待测试图像与标准人脸图像 的相似性渊文中图像间的相似度均由对应图像的特 征矢量间的相似度来表示冤 袁判断时袁该相似度达到 设定阈值即判定为正确配准人脸图像袁否则袁即是误 配准人脸图像遥 待检测图像特征矢量 酝栽 的求取统 一采用 圆援圆 节中产生标准矢量模板时用到的关键点 运 和特征向量的求取方法袁得到 孕 个关键点的特征 向量 栽贼藻泽贼袁 表示为 酝栽 越 栽贼藻泽贼渊责冤 { } 渣 责 越 员袁圆袁噎袁孕 摇 摇 求出待检测图像特征矢量 酝栽 与标准矢量模板 杂栽 中各关键点对应特征向量的余弦相似度 杂责 院 杂责 越 栽渊责冤窑栽贼藻泽贼渊责冤 渣 栽渊责冤 渣窑渣 栽贼藻泽贼渊责冤 渣 渊责 越 员袁圆袁窑窑窑袁孕冤 摇 摇 再根据各关键点对最终判决的贡献大小 酌 对 各相似度加权袁得到待检测图像特征矢量 酝栽 与标 准矢量模板 杂栽 的匹配相似度 杂 院 杂 越 移责 酌责杂责 渊责 越 员袁圆袁窑窑窑袁孕冤 摇 摇 在试验中袁可以发现对 孕 个关键点的相似度求平 均作为总体相似性时袁 杂 的值可以很好的实现分类袁 即对 酌 取值为 酌责 越 员辕 孕渊式中袁责 越 员袁圆袁窑窑窑袁孕冤 遥 设 判定阈值为 杂贼澡则藻泽澡燥造凿 袁 对于 杂 逸 杂贼澡则藻泽澡燥造凿 的待测试图像袁 判断其为正确配准人脸图像袁否则判断为定位错误人 脸图像袁实验中袁 杂贼澡则藻泽澡燥造凿 取值范围为 园援远愿耀 园援苑源遥 圆援源摇 算法分析和讨论 人脸配准判断应该引起足够的重视袁但是袁该步 骤的算法复杂度不应大于人脸特征提取和识别等更 重要的步骤袁这一点限定了配准判断算法所允许的 复杂度遥 杂陨云栽 特征提取在图像匹配方面表现出了优良 的性质袁例如院对旋转尧尺度尧亮度变化的稳定性尧图 第 员 期摇摇摇摇摇摇摇摇摇摇摇摇摇摇 阮晓虎袁等院 一种基于特征匹配的人脸配准判断方法 窑员缘窑
·16 智能系统学报 第10卷 像特征描述的准确性等。但是，关键点的寻找和方 要进行人脸剪切使得用于识别的图片只包含人脸信 向的分配需要很大的计算开销，很难进行实时应用。 息，如图6(a)所示。但是由于定位算法的缺陷，人 本文要解决的人脸配准判断，是针对正常人脸图像 脸可能被错误定位，使剪切后的图片与正确定位的 通过定位剪切并规格化后的人脸图片，通常规格为 人脸图像存在偏离，出现错误配准现象，如图6(b) 40×40。这些图片的匹配有一些特点：对实时性有 所示，因此，需要对定位剪切后的人脸图像进行配准 较高要求，需要高效的特征描述，图像相对固定，不 判断和筛选。本实验的目的是判断人脸图像是否配 需要考虑旋转、尺度和亮度等因子的变化。因此，本 准。实验采用文献[17]中给出的基于图像几何复 文算法基于SFT关键点定位理论，对所有图像都采 杂度的方法定位人脸和眼睛，经过统一的图像分割 用标准人脸的关键点，使用标准人脸特征作为比较 和规格化处理，定位正确的图像可以生成正确配准 模板，方便图像的配准判断。图像匹配过程中关键 图像，否则，生成的图像为错误配准图像。选取500 点位置的先验性，大大降低了算法复杂度。在不存 张正确配准图像用于生成标准人脸，如图6（©）所 在旋转和尺度变化而又有较高实时性要求的图像匹 示，由2.2.2节方法得到的关键点位置和个数如图 配应用中，这种改进表现出了良好应用效果。 6(d)所示。 图像特征提取方法运用了SFT在关键点选择 上的合理性，汲取方向梯度直方图(histogram of ori- ented gradient,HOG)描述子的优点[us),将关键点的 位置信息转换成先验知识，采用关键点邻域梯度方 向直方图统计的图像特征进行配准检测，很好地实 现了配准判断，这是本文算法应用上的创新和特色。 同时，舍弃SFT尺度空间的建立和关键点方向的分 (a)定位正常 (b)定位错误 配，极大降低了算法的复杂度，该复杂度可以表示为 O(nwP),其中，n为方向个数，w为窗口大小，P为 关键点个数，本文算法中n=8,0=16,P=10。 实验证明，该算法花费了很小的计算开销（约 为一张人脸图像识别过程总时间的1%，此处，一张 人脸图像的识别时间为图像预处理，图像特征提取 标准人脸 (d关键点 及特征匹配和识别的总时间，实验采用的相关算法 图6规格化后的图像 是Local Gobar和主成分分析法(principal compo- Fig.6 Normalized face image nents analysis,.PCA)结合的方法)，保证了用于人脸 用数据库中剩下的图像重复试验得到1175张 注册和识别的人脸图像的配准正确性。 正确配准人脸图像和约170张错误配准人脸图像， 3实验分析 并对图像做标准人脸同样的规格化和剪切处理。为 了更全面地考虑错误配准的情况，试验中使用的错 3.1人脸配准判断 误配准的人脸图像除了程序自动定位时产生的错误 实验采用的人脸数据库来自于我国深圳地区采 配准图像，还加入了正确定位的图像通过人为制造 集的不同人的正面人脸照片总共1863张，人群为普 各个方向偏移、旋转后的图片，甚至包含少量不含人 通亚洲人，年龄段为16~80周岁。该数据库图片采 脸的图片，并对实验图片做相同的亮度和尺寸规格 用单色位图格式，图片尺寸为292×336，人脸面部细 化。最终错误配准人脸图像数量为350张。用第2 节清晰，姿态、表情单一，固定光照条件，示例如图5。 节的方法提取标准矢量模板和各待测试图像特征向 量，计算1175张正确配准的人脸图像特征向量与 标准矢量模板的相似度，以及350张错误配准的人 脸图像特征向量与标准矢量模板的相似度，用该相 似度表示待测试图像和标准人脸图像的相似度。此 图5实验用人脸数据库样本 处，定位正确（即正确配准）的人脸图像是指定位脸 Fig.5 The face database for experiments 和眼睛位置偏差不大于图片尺寸的5%，脸部区域 在实际人脸识别系统中，人脸经过定位以后，需 偏转角度小于5°的图片，否则，就是定位错误的图
像特征描述的准确性等遥 但是袁关键点的寻找和方 向的分配需要很大的计算开销袁很难进行实时应用遥 本文要解决的人脸配准判断袁是针对正常人脸图像 通过定位剪切并规格化后的人脸图片袁通常规格为 源园伊源园遥 这些图片的匹配有一些特点院对实时性有 较高要求袁需要高效的特征描述袁图像相对固定袁不 需要考虑旋转尧尺度和亮度等因子的变化遥 因此袁本 文算法基于 杂陨云栽 关键点定位理论袁对所有图像都采 用标准人脸的关键点袁使用标准人脸特征作为比较 模板袁方便图像的配准判断遥 图像匹配过程中关键 点位置的先验性袁大大降低了算法复杂度遥 在不存 在旋转和尺度变化而又有较高实时性要求的图像匹 配应用中袁这种改进表现出了良好应用效果遥 图像特征提取方法运用了 杂陨云栽 在关键点选择 上的合理性袁汲取方向梯度直方图渊 澡蚤泽贼燥早则葬皂 燥枣 燥则蚤鄄 藻灶贼藻凿 早则葬凿蚤藻灶贼袁 匀韵郧冤描述子的优点咱员愿暂 袁将关键点的 位置信息转换成先验知识袁采用关键点邻域梯度方 向直方图统计的图像特征进行配准检测袁很好地实 现了配准判断袁这是本文算法应用上的创新和特色遥 同时袁舍弃 杂陨云栽 尺度空间的建立和关键点方向的分 配袁极大降低了算法的复杂度袁该复杂度可以表示为 韵渊灶憎孕冤 袁 其中袁 灶 为方向个数袁 憎 为窗口大小袁 孕 为 关键点个数袁本文算法中 灶 越 愿袁憎 越 员远袁孕 越 员园遥 实验证明袁该算法花费了很小的计算开销渊约 为一张人脸图像识别过程总时间的 员豫袁此处袁一张 人脸图像的识别时间为图像预处理袁图像特征提取 及特征匹配和识别的总时间袁实验采用的相关算法 是 蕴燥糟葬造 郧燥遭葬则 和主成分分析法渊 责则蚤灶糟蚤责葬造 糟燥皂责燥鄄 灶藻灶贼泽 葬灶葬造赠泽蚤泽袁 孕悦粤冤结合的方法冤 袁保证了用于人脸 注册和识别的人脸图像的配准正确性遥 猿摇 实验分析 猿援员摇 人脸配准判断 实验采用的人脸数据库来自于我国深圳地区采 集的不同人的正面人脸照片总共 员 愿远猿 张袁人群为普 通亚洲人袁年龄段为 员远 耀 愿园 周岁遥 该数据库图片采 用单色位图格式袁图片尺寸为 圆怨圆伊猿猿远袁人脸面部细 节清晰袁姿态尧表情单一袁固定光照条件袁示例如图 缘遥 图 缘摇 实验用人脸数据库样本 云蚤早援缘摇 栽澡藻 枣葬糟藻 凿葬贼葬遭葬泽藻 枣燥则 藻曾责藻则蚤皂藻灶贼泽 摇 摇 在实际人脸识别系统中袁人脸经过定位以后袁需 要进行人脸剪切使得用于识别的图片只包含人脸信 息袁如图 远渊葬冤所示遥 但是由于定位算法的缺陷袁人 脸可能被错误定位袁使剪切后的图片与正确定位的 人脸图像存在偏离袁出现错误配准现象袁如图 远渊遭冤 所示袁因此袁需要对定位剪切后的人脸图像进行配准 判断和筛选遥 本实验的目的是判断人脸图像是否配 准遥 实验采用文献咱 员苑暂中给出的基于图像几何复 杂度的方法定位人脸和眼睛袁经过统一的图像分割 和规格化处理袁定位正确的图像可以生成正确配准 图像袁否则袁生成的图像为错误配准图像遥 选取 缘园园 张正确配准图像用于生成标准人脸袁如图 远渊糟冤 所 示袁由 圆援圆援圆 节方法得到的关键点位置和个数如图 远渊凿冤所示遥 图 远摇 规格化后的图像 云蚤早援远摇 晕燥则皂葬造蚤扎藻凿 枣葬糟藻 蚤皂葬早藻 用数据库中剩下的图像重复试验得到 员 员苑缘 张 正确配准人脸图像和约 员苑园 张错误配准人脸图像袁 并对图像做标准人脸同样的规格化和剪切处理遥 为 了更全面地考虑错误配准的情况袁试验中使用的错 误配准的人脸图像除了程序自动定位时产生的错误 配准图像袁还加入了正确定位的图像通过人为制造 各个方向偏移尧旋转后的图片袁甚至包含少量不含人 脸的图片袁并对实验图片做相同的亮度和尺寸规格 化遥 最终错误配准人脸图像数量为 猿缘园 张遥 用第 圆 节的方法提取标准矢量模板和各待测试图像特征向 量袁计算 员 员苑缘 张正确配准的人脸图像特征向量与 标准矢量模板的相似度袁以及 猿缘园 张错误配准的人 脸图像特征向量与标准矢量模板的相似度袁用该相 似度表示待测试图像和标准人脸图像的相似度遥 此 处袁定位正确渊即正确配准冤的人脸图像是指定位脸 和眼睛位置偏差不大于图片尺寸的 缘豫袁脸部区域 偏转角度小于 缘毅的图片袁否则袁就是定位错误的图 窑员远窑 智 能 系 统 学 报摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇 第 员园 卷
第1期 阮晓虎，等：一种基于特征匹配的人脸配准判断方法 ·17 像。分析实验数据，得到的结果如图7所示，图中纵 由于偏差接近阈值，这些图像与标准人脸的相似度 坐标表示相似度，对于正确配准图像与标准人脸图 相对较高。同时，一些图像中的噪声也可能导致其 像相似度曲线，横坐标表示大于曲线表示的相似度 与标准人脸相似度的下降（例如：图8(a)和图8(b) 的图像占所有正确配准图像的百分比，对于错误配 中第3幅图像)，所以，该方法还可以排除被噪声污 准图像与标准人脸图像相似度曲线，横坐标表示小 染的图像。 于曲线表示的相似度的图像占所有错误配准图像的 实验中，正确配准的人脸图像与标准人脸的高 百分比。 相似性及错误配准的人脸图像与标准人脸的低相似 1.0 定位错误图像与平 性表明了该人脸配准判断方法的有效性。 均人脸图像相似度 定位正确图像与平 同时，实验在特征提取的速度方面也进行了测 0.9 均人脸图像相似度 试，对相同大小的人脸图片，分别用SFT特征提取 0.8 方法和本文算法提取图像特征，在选用同样的关键 三0.7 点时，ST算法和本文算法的耗时情况如表1。 0.6 表1 算法的耗时比较 Table 1 Time-consuming comparison 0.5 算法 关键点个数 特征向量维度 耗时/s 0.4 0 20 4060 80 100 SIFT o 128 0.125 累积占比/% 本文算法 10 128 0.005 图7关键点平均相似性曲线 从以上结果看出，本文提取算法相对于SFT来 Fig.7 The mean similarity curve of key-points 说，极大地降低了耗时，由此验证了本文特征提取算 从图中可以看出，采用关键点相似度平均值作 法的高效性。 为总体相似性，应用于人脸数据库的建模阶段时，在 3.2判别辨识度分析 全部排除错误配准人脸图片的情况下（对应阈值为 实验得到正确配准的人脸图像与标准人脸图像 0.74),对正确配准的人脸图片的筛选率为95.5%， 的相似度（记为SR),可接受的最大定位偏移或最 即几乎可以保留全部的正确配准图片。若应用于人 大偏转角度下的人脸图像与标准人脸图像的相似度 脸识别阶段，在保证正确配准图像全部通过的情况 (记为SM),则定义人脸配准判断的辨识度（记为 下（对应阈值为0.68），对错误配准图像的排除率为 SD)为 95.7%,即可以排除绝大部分错误配准图像。对图7 SD SR SM 中处于曲线末端的数据（即与标准人脸相似度较低 辨识度越大表明越容易判别出错误配准的 的正确配准的人脸图像和与标准人脸相似度较高的 图像。人脸定位偏移距离和偏转角度定义为理 错误配准的人脸图像)进行边缘情况分析，发现在 论上正确人脸定位的位置和方向与实际人脸定 正确配准的图像中存在如图8(a)所示的图片，在错 位位置和方向间的距离和角度，可以接受的最大 误配准的人脸图像中存在如图8(b)所示的图像。 定位偏移和偏转角度的图像是指在不影响后续 识别的情况下允许的最大定位偏差（偏移距离和 偏转角度)，通常情况下，该偏移距离不大于图像 (a)相似度较低的正确配准的图片 尺寸的5%)，而偏转角度不大于5°。为了研究 该人脸配准判别方法的辨识度，该实验分别将人 脸定位偏移距离和图像旋转角度作为自变量，人 为地偏移正确配准的人脸图像，如图9所示，其 (b) 相似度较高的错误配准的图片 中，图9(a)为正确配准的人脸图像，图9(b)~ 图8边缘情况分析 (e)各组图像中，第一张图像均为最大允许偏移 Fig.8 Marginal data analysis 量，即偏移为2个像素，后续图像偏移量分别为5 图8(a)中的图像虽然根据眼睛和脸判别为正 个像素、10个像素；图9()~(g)各组图像中，第 确配准图像，但定位还是存在少量偏差，导致其相似 一张均为最大允许偏转角度，即偏转5°，其余图 度相对较低，只是这种偏差在允许的范围之内：相应 像偏转量分别为30°、55°。 地，图8(b)为定位偏差超出设定阈值的图像，但是
像遥 分析实验数据袁得到的结果如图 苑 所示袁图中纵 坐标表示相似度袁对于正确配准图像与标准人脸图 像相似度曲线袁横坐标表示大于曲线表示的相似度 的图像占所有正确配准图像的百分比袁对于错误配 准图像与标准人脸图像相似度曲线袁横坐标表示小 于曲线表示的相似度的图像占所有错误配准图像的 百分比遥 图 苑摇 关键点平均相似性曲线 云蚤早援苑摇 栽澡藻 皂藻葬灶 泽蚤皂蚤造葬则蚤贼赠 糟怎则增藻 燥枣 噪藻赠鄄责燥蚤灶贼泽 从图中可以看出袁采用关键点相似度平均值作 为总体相似性袁应用于人脸数据库的建模阶段时袁在 全部排除错误配准人脸图片的情况下渊对应阈值为 园援苑源冤袁对正确配准的人脸图片的筛选率为 怨缘援缘豫袁 即几乎可以保留全部的正确配准图片遥 若应用于人 脸识别阶段袁在保证正确配准图像全部通过的情况 下渊对应阈值为 园援远愿冤袁对错误配准图像的排除率为 怨缘援苑豫袁即可以排除绝大部分错误配准图像遥 对图 苑 中处于曲线末端的数据渊即与标准人脸相似度较低 的正确配准的人脸图像和与标准人脸相似度较高的 错误配准的人脸图像冤 进行边缘情况分析袁发现在 正确配准的图像中存在如图 愿渊葬冤所示的图片袁在错 误配准的人脸图像中存在如图 愿渊遭冤所示的图像遥 图 愿摇 边缘情况分析 云蚤早援愿摇 酝葬则早蚤灶葬造 凿葬贼葬 葬灶葬造赠泽蚤泽 摇 摇 图 愿渊葬冤中的图像虽然根据眼睛和脸判别为正 确配准图像袁但定位还是存在少量偏差袁导致其相似 度相对较低袁只是这种偏差在允许的范围之内曰相应 地袁图 愿渊遭冤为定位偏差超出设定阈值的图像袁但是袁 由于偏差接近阈值袁这些图像与标准人脸的相似度 相对较高遥 同时袁一些图像中的噪声也可能导致其 与标准人脸相似度的下降渊例如院图 愿渊葬冤和图 愿渊遭冤 中第 猿 幅图像冤 袁所以袁该方法还可以排除被噪声污 染的图像遥 实验中袁正确配准的人脸图像与标准人脸的高 相似性及错误配准的人脸图像与标准人脸的低相似 性表明了该人脸配准判断方法的有效性遥 同时袁实验在特征提取的速度方面也进行了测 试袁对相同大小的人脸图片袁分别用 杂陨云栽 特征提取 方法和本文算法提取图像特征袁在选用同样的关键 点时袁杂陨云栽 算法和本文算法的耗时情况如表 员遥 表 员摇 算法的耗时比较 栽葬遭造藻 员摇 栽蚤皂藻鄄糟燥灶泽怎皂蚤灶早 糟燥皂责葬则蚤泽燥灶 算法 关键点个数 特征向量维度 耗时辕 泽 杂陨云栽 员园 员圆愿 园援员圆缘 本文算法 员园 员圆愿 园援园园缘 摇 摇 从以上结果看出袁本文提取算法相对于 杂陨云栽 来 说袁极大地降低了耗时袁由此验证了本文特征提取算 法的高效性遥 猿援圆摇 判别辨识度分析 实验得到正确配准的人脸图像与标准人脸图像 的相似度渊记为 杂砸 冤 袁可接受的最大定位偏移或最 大偏转角度下的人脸图像与标准人脸图像的相似度 渊记为 杂酝 冤 袁则定义人脸配准判断的辨识度渊记为 杂阅 冤为 杂阅 越 杂砸 原 杂酝 摇 摇 辨识度越大表明越容易判别出错误配准的 图像遥 人脸定位偏移距离和偏转角度定义为理 论上正确人脸定位的位置和方向与实际人脸定 位位置和方向间的距离和角度袁可以接受的最大 定位偏移和偏转角度的图像是指在不影响后续 识别的情况下允许的最大定位偏差渊 偏移距离和 偏转角度冤 袁通常情况下袁该偏移距离不大于图像 尺寸的 缘豫咱员暂 袁而偏转角度不大于 缘毅 遥 为了研究 该人脸配准判别方法的辨识度袁该实验分别将人 脸定位偏移距离和图像旋转角度作为自变量袁人 为地偏移正确配准的人脸图像袁如图 怨 所示袁其 中袁图 怨渊葬冤 为正确配准的人脸图像袁图 怨渊 遭冤 耀 渊 藻冤各组图像中袁第一张图像均为最大允许偏移 量袁即偏移为 圆 个像素袁后续图像偏移量分别为 缘 个像素尧员园 个像素曰图 怨渊枣冤 耀 渊 早冤 各组图像中袁第 一张均为最大允许偏转角度袁即偏转 缘毅袁 其余图 像偏转量分别为 猿园毅 尧 缘缘毅 遥 第 员 期摇摇摇摇摇摇摇摇摇摇摇摇摇摇 阮晓虎袁等院 一种基于特征匹配的人脸配准判断方法 窑员苑窑
·18· 智能系统学报 第10卷 析，没有加入本文方法的判断筛选之前，这些图像中 包含一些错误配准的图像如图11所示。用本文的 算法进行筛选，在选定合适阈值时，这些错误配准的 (a)正确配准图像 图像均被剔除。通过实验验证，可以采用Local Go- bar和主成分分析法相结合的算法，在3.1节用到的 人脸数据库上测试，加入该人脸筛选判断后，识别率 )定位偏左图 (c)定位偏右 由96.5%提高到98.5%。 表2各偏移量下辨识度 Table 2 Resolution of the offsets (d定位偏下 (e) 定位偏上 定位偏移 SM SD 偏左 0.7845 0.1030 偏右 0.7873 0.1002 (0 定位顺时针偏转 (g)定位逆时针偏转 偏上 0.7725 0.1150 图9各偏移量对应的图像 Fig.9 Corresponding images under the offsets 偏下 0.7725 0.1150 分析各偏移量下图像与标准人脸图像的相似度 顺时针偏转 0.7800 0.1075 变化，得到曲线如图10所示。 逆时针偏转 0.7773 0.1102 1.0 注：SR为正确配准图像与标准人脸图像相似度，SM为可接 ◆一定位左偏 受的最大偏移量图像与标准人脸图像相似度，SD为辨识度 0.9 。一定位右偏 ★一定位下偏 0.8 ·定位上偏 图11排除的错误配准人脸图像 0.7 Fig.11 Mis-alignment face image that been excluded 以上试验验证了本文提出的判断人脸配准方法 0.6 的有效性，同时，运用基于梯度方向直方图统计的图 0.5 像特征提取及匹配方法也是一种新的尝试。在图像 6 4681012141 偏移距离/像素 匹配中，这种特征提取方法得到的图像特征能准确地 0.9 表达图像信息，以向量相似性作为度量工具，可以在 一顺时针旋转 保持高匹配准确性的同时极大地提高算法的效率。 型0.8 ·一逆时针旋转 结论 4 0.7 本文主要做了两方面的工作：1)通过待检测图 0.6 像与正确配准的标准人脸的比较，解决了人脸配准 的判断问题，这有利于提高人脸识别的识别率，增强 0.50102030405060708090100 算法的鲁棒性：2)运用基于关键点邻域梯度方向直 偏移角度/() 方图统计的图像特征提取方法，分别提取待测试图 图10各偏移量下的相似度 像和标准人脸特征，在该特征空间进行相似度计算， Fig.10 The similarities under the related offsets 提出了一种新的图像匹配思路。 对各定位偏移的最大允许偏移量进行讨论，得 考虑算法的应用条件，本文方法有以下有待改 到各定位偏移下的人脸配准判断辨识度如表2。 进的方面：1)本文的方法需要一定数量正确配准人 通过以上各偏移距离和偏转角度下的相似度走 脸图像做训练样本（得到标准人脸）才能进行后续 势及表2数据，可以看出，该方法的辨识度对每种偏 的人脸配准判断：2)图像匹配选取的关键点为标准 移量均在01以上，可以很好地实现配准判断。从 图像的SFT关键点，这决定了本算法只适用于人脸 各相似度与偏移量的变化趋势也可以看出本文方法 识别步骤中经过人脸定位、剪切、规格化后的图像 判断人脸配准的有效性。 筛选正面人脸图像，而对于多姿态多表情的人脸图 3.3实验结果分析 像配准判断，算法还需要做一定改进。此外，对于人 对人脸定位切分归一化后的人脸图像进行分 脸识别中人脸的“误配准灾难问题”，除了对规格化
图 怨摇 各偏移量对应的图像 云蚤早援怨摇 悦燥则则藻泽责燥灶凿蚤灶早 蚤皂葬早藻泽 怎灶凿藻则 贼澡藻 燥枣枣泽藻贼泽 摇 摇 分析各偏移量下图像与标准人脸图像的相似度 变化袁得到曲线如图 员园 所示遥 图 员园摇 各偏移量下的相似度 云蚤早援员园摇 栽澡藻 泽蚤皂蚤造葬则蚤贼蚤藻泽 怎灶凿藻则 贼澡藻 则藻造葬贼藻凿 燥枣枣泽藻贼泽 摇 摇 对各定位偏移的最大允许偏移量进行讨论袁得 到各定位偏移下的人脸配准判断辨识度如表 圆遥 通过以上各偏移距离和偏转角度下的相似度走 势及表 圆 数据袁可以看出袁该方法的辨识度对每种偏 移量均在 园援员 以上袁可以很好地实现配准判断遥 从 各相似度与偏移量的变化趋势也可以看出本文方法 判断人脸配准的有效性遥 猿援猿摇 实验结果分析 对人脸定位切分归一化后的人脸图像进行分 析袁没有加入本文方法的判断筛选之前袁这些图像中 包含一些错误配准的图像如图 员员 所示遥 用本文的 算法进行筛选袁在选定合适阈值时袁这些错误配准的 图像均被剔除遥 通过实验验证袁可以采用 蕴燥糟葬造 郧燥鄄 遭葬则 和主成分分析法相结合的算法袁在 猿援员 节用到的 人脸数据库上测试袁加入该人脸筛选判断后袁识别率 由 怨远援缘豫提高到 怨愿援缘豫遥 表 圆摇 各偏移量下辨识度 栽葬遭造藻 圆摇 砸藻泽燥造怎贼蚤燥灶 燥枣 贼澡藻 燥枣枣泽藻贼泽 定位偏移 杂酝 杂阅 偏左 园援苑愿源 缘 园援员园猿 园 偏右 园援苑愿苑 猿 园援员园园 圆 偏上 园援苑苑圆 缘 园援员员缘 园 偏下 园援苑苑圆 缘 园援员员缘 园 顺时针偏转 园援苑愿园 园 园援员园苑 缘 逆时针偏转 园援苑苑苑 猿 园援员员园 圆 注院 杂砸 为正确配准图像与标准人脸图像相似度袁 杂酝 为可接 受的最大偏移量图像与标准人脸图像相似度袁 杂阅 为辨识度 图 员员摇 排除的错误配准人脸图像 云蚤早援员员摇 酝蚤泽鄄葬造蚤早灶皂藻灶贼 枣葬糟藻 蚤皂葬早藻 贼澡葬贼 遭藻藻灶 藻曾糟造怎凿藻凿 以上试验验证了本文提出的判断人脸配准方法 的有效性袁同时袁运用基于梯度方向直方图统计的图 像特征提取及匹配方法也是一种新的尝试遥 在图像 匹配中袁这种特征提取方法得到的图像特征能准确地 表达图像信息袁以向量相似性作为度量工具袁可以在 保持高匹配准确性的同时极大地提高算法的效率遥 源摇 结论 本文主要做了两方面的工作院员冤通过待检测图 像与正确配准的标准人脸的比较袁解决了人脸配准 的判断问题袁这有利于提高人脸识别的识别率袁增强 算法的鲁棒性曰圆冤运用基于关键点邻域梯度方向直 方图统计的图像特征提取方法袁分别提取待测试图 像和标准人脸特征袁在该特征空间进行相似度计算袁 提出了一种新的图像匹配思路遥 考虑算法的应用条件袁本文方法有以下有待改 进的方面院员冤本文的方法需要一定数量正确配准人 脸图像做训练样本渊得到标准人脸冤才能进行后续 的人脸配准判断曰圆冤图像匹配选取的关键点为标准 图像的 杂陨云栽 关键点袁这决定了本算法只适用于人脸 识别步骤中经过人脸定位尧剪切尧规格化后的图像袁 筛选正面人脸图像袁而对于多姿态多表情的人脸图 像配准判断袁算法还需要做一定改进遥 此外袁对于人 脸识别中人脸的野误配准灾难问题冶 袁除了对规格化 窑员愿窑 智 能 系 统 学 报摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇摇 第 员园 卷
第1期 阮晓虎，等：一种基于特征匹配的人脸配准判断方法 ·19· 后的人脸图像进行判断筛选操作外，研究能够克服 [12]苏延超，艾海舟，劳世竑，等.基于非线性Boosting回归 配准偏差的识别算法是另一个途径。 的多视角人脸配准[J].自动化学报，2010.36(4)： 522.527. 参考文献： SU Yanchao,AI Haizhou,LAO Shihong,et al.Non-linear [1]山世光，高文，唱轶钲，等.人脸识别中的“误配准灾难” boosting regression for multi-view face alignment[J.Acta 问题研究[J刀.计算机学报，2005,28(5)：782-791 Automatica Sinica,2010,36(4):522-527. SHAN Shiguang,GAO Wen,CHANG Yizheng,et al. [13]彭地.图像配准技术与优化算法研究[D].上海：复旦大 学，2011：8-25 Curse of mis-alignment"problem in face recognition[J]. Chinese Journal of Computers,2005,28 (5):782-791. PENG Di.Image alignment technology and optimization al- [2]唱轶钲，山世光，高文，等.Gbor特征判别分析人脸识别 gorithm research[D].Shanghai:Fudan University,2011: 8-25. 方法的误配准鲁棒性分析「J].计算机工程与运用，2005 (5):56-59. [14]LOWE D.Distinctive image features from scale-invariant CHANG Yizheng,SHAN Shiguang,GAO Wen,et al.Eval- keypoints[J].International Joumal of Computer Vision, 2004,60(2):91-110. uation of gabor features for face recognition from the angle of robustness to mis-alignment[.Computer Engineering and [15]LOWE D.Object recognition from local scale invariant fea- Applications,2005(5):56-59. tures[C]//International Conference on Computer Vision. [3]JUNG C,SUN Tian,JIAO Licheng,et al.Eye detection Corfu,Greece,1999:1150-1157. under varying illumination using the retinex theory [J]. [16]LINDEBERG T.Seale-space theory:A basic tool for analy- Elsevier Science,2013,113:130-137. sing structures at different scales[J].Journal of Applied Statistics,1994,21(2）:224-270. [4]GU Jiayu,LIU Chengjun.Feature local binary patterns with [17]LI Weijun,XU Jian,WANG Shoujue.A fast eye location application to eye detection[J].Neurocomputing,2013, 113:138-152. algorithm based on geometric complexity[C]//Proceedings [5]WANG Shangfei,LIU Zhilei,SHEN Peijia,et al.Eye lo- of the 5th World Congress on Intelligent Control and Auto- calization from thermal infrared images[].Pattern Recog- mation.Hangzhou,China,2004:4105-4107. nition,2013,46:2613-2621. [18]DALAL N,TRIGGS B.Histograms of oriented gradients for [6]翟倩茹.不同姿态人脸配准方法研究[D].大连：大连海 human detection[C]//IEEE Computer Society Conference 事大学，2012：112. on Computer Vision and Pattern Recognition.San Diego, CA,USA,2005,1:886-893. ZHAI Qianru.Research on various poses face image regis- 作者简介： tration[D].Dalian:Dalian Maritime University,2012:1-12. 阮晓虎，男，1986年生，硕士研究 [7]SETHURAM A,SARAGIH J,RICANEK K,et al.Ex- 生，主要研究方向为图像、视频处理与 tremely dense face registration:comparing automatic land- 模式识别。参与国家自然科学基金重 marking algorithms for general and ethno-gender models 大研究计划1项，获得专利1项。 [C]//IEEE Fifth International Conference.Arlington VA 2012:135-142. [8]LIN H,LIANG L,DU P,et al.Image registration based on 李卫军，男，1975年生，研究员，博 Fourier-Mellin transform J].Geomatics and Information 士生导师，博士，主要研究方向为高维 Science of Wuhan University,2012,37(6):649-652. 形象计算、模式识别、计算机视觉，主要 [9]刘小军，杨杰，孙坚伟，等.基于ST的图像配准方法 研究方向为仿生图像处理技术、仿生模 [J].红外与激光工程，2008,37(1)：156-160. 式识别理论与方法，近红外光谱定性分 LIU Xiaojun,YANG Jie,SUN Jianwei,et al.Image regis- 析技术、高维信息计算。近年来主持国 tration approach based on SIFT[J].Infrared and Laser En- 家自然科学基金项目2项，企业合作研 gineering,2008,37(1):156-160 究项目3项，发表学术论文18篇。 [10]FUMIHIKO S.Image matching based on relation between 罩鸿，女，1977年生，工程师，博士. pixels located on the maximum and minimum gray-levels in 主要研究方向为智能信息处理、仿生信 local area[J].IEEE Transactions on Electrical and Elec- 息学理论与技术应用、模式识别。 tronic Engineering,2007,12(2):169-178. [11]TRAJKOCIC M,HEDLEY M.Fast corner detection [J]. Image and Vision Computing,1998,16(2):75-87
后的人脸图像进行判断筛选操作外袁研究能够克服 配准偏差的识别算法是另一个途径遥 参考文献院 咱员暂山世光袁高文袁唱轶钲袁等援 人脸识别中的野误配准灾难冶 问题研究咱允暂援 计算机学报袁 圆园园缘袁 圆愿渊缘冤 院 苑愿圆鄄苑怨员援 杂匀粤晕 杂澡蚤早怎葬灶早袁 郧粤韵 宰藻灶袁 悦匀粤晕郧 再蚤扎澡藻灶早袁 藻贼 葬造援 寓 悦怎则泽藻 燥枣 皂蚤泽鄄葬造蚤早灶皂藻灶贼寓 责则燥遭造藻皂 蚤灶 枣葬糟藻 则藻糟燥早灶蚤贼蚤燥灶 咱 允 暂援 悦澡蚤灶藻泽藻 允燥怎则灶葬造 燥枣 悦燥皂责怎贼藻则泽袁 圆园园缘袁 圆愿 渊缘冤院 苑愿圆鄄苑怨员援 咱圆暂唱轶钲袁山世光袁高文袁等援 郧葬遭燥则 特征判别分析人脸识别 方法的误配准鲁棒性分析咱允暂援 计算机工程与运用袁圆园园缘 渊缘冤 院缘远鄄缘怨援 悦匀粤晕郧 再蚤扎澡藻灶早袁 杂匀粤晕 杂澡蚤早怎葬灶早袁 郧粤韵 宰藻灶袁 藻贼 葬造援 耘增葬造鄄 怎葬贼蚤燥灶 燥枣 早葬遭燥则 枣藻葬贼怎则藻泽 枣燥则 枣葬糟藻 则藻糟燥早灶蚤贼蚤燥灶 枣则燥皂 贼澡藻 葬灶早造藻 燥枣 则燥遭怎泽贼灶藻泽泽 贼燥 皂蚤泽鄄葬造蚤早灶皂藻灶贼咱 允暂援 悦燥皂责怎贼藻则 耘灶早蚤灶藻藻则蚤灶早 葬灶凿 粤责责造蚤糟葬贼蚤燥灶泽袁 圆园园缘 渊缘冤 院缘远鄄缘怨援 咱猿暂 允哉晕郧 悦袁 杂哉晕 栽蚤葬灶袁 允陨粤韵 蕴蚤糟澡藻灶早袁 藻贼 葬造援 耘赠藻 凿藻贼藻糟贼蚤燥灶 怎灶凿藻则 增葬则赠蚤灶早 蚤造造怎皂蚤灶葬贼蚤燥灶 怎泽蚤灶早 贼澡藻 则藻贼蚤灶藻曾 贼澡藻燥则赠 咱 允 暂援 耘造泽藻增蚤藻则 杂糟蚤藻灶糟藻袁 圆园员猿袁 员员猿院 员猿园鄄员猿苑援 咱源暂郧哉 允蚤葬赠怎袁 蕴陨哉 悦澡藻灶早躁怎灶援 云藻葬贼怎则藻 造燥糟葬造 遭蚤灶葬则赠 责葬贼贼藻则灶泽 憎蚤贼澡 葬责责造蚤糟葬贼蚤燥灶 贼燥 藻赠藻 凿藻贼藻糟贼蚤燥灶 咱 允 暂援 晕藻怎则燥糟燥皂责怎贼蚤灶早袁 圆园员猿袁 员员猿院 员猿愿鄄员缘圆援 咱缘暂宰粤晕郧 杂澡葬灶早枣藻蚤袁 蕴陨哉 在澡蚤造藻蚤袁 杂匀耘晕 孕藻蚤躁蚤葬袁 藻贼 葬造援 耘赠藻 造燥鄄 糟葬造蚤扎葬贼蚤燥灶 枣则燥皂 贼澡藻则皂葬造 蚤灶枣则葬则藻凿 蚤皂葬早藻泽咱 允暂援 孕葬贼贼藻则灶 砸藻糟燥早鄄 灶蚤贼蚤燥灶袁 圆园员猿袁 源远院圆远员猿鄄圆远圆员援 咱远暂翟倩茹援 不同姿态人脸配准方法研究咱阅暂援 大连院大连海 事大学袁 圆园员圆院 员鄄员圆援 在匀粤陨 匝蚤葬灶则怎援 砸藻泽藻葬则糟澡 燥灶 增葬则蚤燥怎泽 责燥泽藻泽 枣葬糟藻 蚤皂葬早藻 则藻早蚤泽鄄 贼则葬贼蚤燥灶咱阅暂援 阅葬造蚤葬灶院阅葬造蚤葬灶 酝葬则蚤贼蚤皂藻 哉灶蚤增藻则泽蚤贼赠袁 圆园员圆院员鄄员圆援 咱苑暂 杂耘栽匀哉砸粤酝 粤袁 杂粤砸粤郧陨匀 允袁 砸陨悦粤晕耘运 运袁 藻贼 葬造援 耘曾鄄 贼则藻皂藻造赠 凿藻灶泽藻 枣葬糟藻 则藻早蚤泽贼则葬贼蚤燥灶院 糟燥皂责葬则蚤灶早 葬怎贼燥皂葬贼蚤糟 造葬灶凿鄄 皂葬则噪蚤灶早 葬造早燥则蚤贼澡皂泽 枣燥则 早藻灶藻则葬造 葬灶凿 藻贼澡灶燥鄄早藻灶凿藻则 皂燥凿藻造泽 咱悦暂 辕 辕 陨耘耘耘 云蚤枣贼澡 陨灶贼藻则灶葬贼蚤燥灶葬造 悦燥灶枣藻则藻灶糟藻援 粤则造蚤灶早贼燥灶 灾粤袁 圆园员圆院 员猿缘鄄员源圆援 咱愿暂蕴陨晕 匀袁 蕴陨粤晕郧 蕴袁 阅哉 孕袁 藻贼 葬造援 陨皂葬早藻 则藻早蚤泽贼则葬贼蚤燥灶 遭葬泽藻凿 燥灶 云燥怎则蚤藻则鄄酝藻造造蚤灶 贼则葬灶泽枣燥则皂 咱 允 暂援 郧藻燥皂葬贼蚤糟泽 葬灶凿 陨灶枣燥则皂葬贼蚤燥灶 杂糟蚤藻灶糟藻 燥枣 宰怎澡葬灶 哉灶蚤增藻则泽蚤贼赠袁 圆园员圆袁 猿苑渊远冤院 远源怨鄄远缘圆援 咱怨暂刘小军袁杨杰袁孙坚伟袁等援 基于 杂陨云栽 的图像配准方法 咱允暂援 红外与激光工程袁 圆园园愿袁 猿苑渊员冤 院 员缘远鄄员远园援 蕴陨哉 载蚤葬燥躁怎灶袁 再粤晕郧 允蚤藻袁 杂哉晕 允蚤葬灶憎藻蚤袁 藻贼 葬造援 陨皂葬早藻 则藻早蚤泽鄄 贼则葬贼蚤燥灶 葬责责则燥葬糟澡 遭葬泽藻凿 燥灶 杂陨云栽咱 允暂援 陨灶枣则葬则藻凿 葬灶凿 蕴葬泽藻则 耘灶鄄 早蚤灶藻藻则蚤灶早袁 圆园园愿袁 猿苑渊员冤 院 员缘远鄄员远园援 咱员园暂 云哉酝陨匀陨运韵 杂援 陨皂葬早藻 皂葬贼糟澡蚤灶早 遭葬泽藻凿 燥灶 则藻造葬贼蚤燥灶 遭藻贼憎藻藻灶 责蚤曾藻造泽 造燥糟葬贼藻凿 燥灶 贼澡藻 皂葬曾蚤皂怎皂 葬灶凿 皂蚤灶蚤皂怎皂 早则葬赠鄄造藻增藻造泽 蚤灶 造燥糟葬造 葬则藻葬咱 允暂援 陨耘耘耘 栽则葬灶泽葬糟贼蚤燥灶泽 燥灶 耘造藻糟贼则蚤糟葬造 葬灶凿 耘造藻糟鄄 贼则燥灶蚤糟 耘灶早蚤灶藻藻则蚤灶早袁 圆园园苑袁 员圆渊圆冤 院 员远怨鄄员苑愿援 咱员员暂 栽砸粤允运韵悦陨悦 酝袁 匀耘阅蕴耘再 酝援 云葬泽贼 糟燥则灶藻则 凿藻贼藻糟贼蚤燥灶 咱 允暂援 陨皂葬早藻 葬灶凿 灾蚤泽蚤燥灶 悦燥皂责怎贼蚤灶早袁 员怨怨愿袁 员远渊圆冤 院 苑缘鄄愿苑援 咱员圆暂苏延超袁艾海舟袁劳世竑袁等援 基于非线性 月燥燥泽贼蚤灶早 回归 的多视角人脸配准咱允暂援 自动化学报袁 圆园员园袁 猿远 渊 源冤 院 缘圆圆鄄缘圆苑援 杂哉 再葬灶糟澡葬燥袁 粤陨 匀葬蚤扎澡燥怎袁 蕴粤韵 杂澡蚤澡燥灶早袁 藻贼 葬造援 晕燥灶鄄造蚤灶藻葬则 遭燥燥泽贼蚤灶早 则藻早则藻泽泽蚤燥灶 枣燥则 皂怎造贼蚤鄄增蚤藻憎 枣葬糟藻 葬造蚤早灶皂藻灶贼咱 允暂援 粤糟贼葬 粤怎贼燥皂葬贼蚤糟葬 杂蚤灶蚤糟葬袁 圆园员园袁 猿远渊源冤 院 缘圆圆鄄缘圆苑援 咱员猿暂彭地援图像配准技术与优化算法研究咱阅暂援 上海院复旦大 学袁 圆园员员院 愿鄄圆缘援 孕耘晕郧 阅蚤援 陨皂葬早藻 葬造蚤早灶皂藻灶贼 贼藻糟澡灶燥造燥早赠 葬灶凿 燥责贼蚤皂蚤扎葬贼蚤燥灶 葬造鄄 早燥则蚤贼澡皂 则藻泽藻葬则糟澡咱 阅暂援 杂澡葬灶早澡葬蚤院云怎凿葬灶 哉灶蚤增藻则泽蚤贼赠袁 圆园员员院 愿鄄圆缘援 咱员源暂 蕴韵宰耘 阅援 阅蚤泽贼蚤灶糟贼蚤增藻 蚤皂葬早藻 枣藻葬贼怎则藻泽 枣则燥皂 泽糟葬造藻鄄蚤灶增葬则蚤葬灶贼 噪藻赠责燥蚤灶贼泽咱 允暂援 陨灶贼藻则灶葬贼蚤燥灶葬造 允燥怎则灶葬造 燥枣 悦燥皂责怎贼藻则 灾蚤泽蚤燥灶袁 圆园园源袁 远园渊圆冤 院 怨员鄄员员园援 咱员缘暂蕴韵宰耘 阅援 韵遭躁藻糟贼 则藻糟燥早灶蚤贼蚤燥灶 枣则燥皂 造燥糟葬造 泽糟葬造藻 蚤灶增葬则蚤葬灶贼 枣藻葬鄄 贼怎则藻泽咱 悦暂 辕 辕 陨灶贼藻则灶葬贼蚤燥灶葬造 悦燥灶枣藻则藻灶糟藻 燥灶 悦燥皂责怎贼藻则 灾蚤泽蚤燥灶援 悦燥则枣怎袁 郧则藻藻糟藻袁 员怨怨怨院 员员缘园鄄员员缘苑援 咱 员远暂蕴陨晕阅耘月耘砸郧 栽援 杂糟葬造藻鄄泽责葬糟藻 贼澡藻燥则赠院 粤 遭葬泽蚤糟 贼燥燥造 枣燥则 葬灶葬造赠鄄 泽蚤灶早 泽贼则怎糟贼怎则藻泽 葬贼 凿蚤枣枣藻则藻灶贼 泽糟葬造藻泽 咱 允暂援 允燥怎则灶葬造 燥枣 粤责责造蚤藻凿 杂贼葬贼蚤泽贼蚤糟泽袁 员怨怨源袁 圆员渊圆冤 院 圆圆源鄄圆苑园援 咱员苑暂蕴陨 宰藻蚤躁怎灶袁 载哉 允蚤葬灶袁 宰粤晕郧 杂澡燥怎躁怎藻援 粤 枣葬泽贼 藻赠藻 造燥糟葬贼蚤燥灶 葬造早燥则蚤贼澡皂 遭葬泽藻凿 燥灶 早藻燥皂藻贼则蚤糟 糟燥皂责造藻曾蚤贼赠咱悦暂 辕 辕 孕则燥糟藻藻凿蚤灶早泽 燥枣 贼澡藻 缘贼澡 宰燥则造凿 悦燥灶早则藻泽泽 燥灶 陨灶贼藻造造蚤早藻灶贼 悦燥灶贼则燥造 葬灶凿 粤怎贼燥鄄 皂葬贼蚤燥灶援 匀葬灶早扎澡燥怎袁 悦澡蚤灶葬袁 圆园园源院 源员园缘鄄源员园苑援 咱员愿暂阅粤蕴粤蕴 晕袁 栽砸陨郧郧杂 月援 匀蚤泽贼燥早则葬皂泽 燥枣 燥则蚤藻灶贼藻凿 早则葬凿蚤藻灶贼泽 枣燥则 澡怎皂葬灶 凿藻贼藻糟贼蚤燥灶咱 悦暂 辕 辕 陨耘耘耘 悦燥皂责怎贼藻则 杂燥糟蚤藻贼赠 悦燥灶枣藻则藻灶糟藻 燥灶 悦燥皂责怎贼藻则 灾蚤泽蚤燥灶 葬灶凿 孕葬贼贼藻则灶 砸藻糟燥早灶蚤贼蚤燥灶援 杂葬灶 阅蚤藻早燥袁 悦粤袁 哉杂粤袁 圆园园缘袁 员院 愿愿远鄄愿怨猿援 作者简介院 阮晓虎袁男袁 员怨愿远 年生袁硕士研究 生袁主要研究方向为图像尧视频处理与 模式识别遥 参与国家自然科学基金重 大研究计划 员 项袁获得专利 员 项遥 李卫军袁男袁员怨苑缘 年生袁研究员袁博 士生导师袁博士袁主要研究方向为高维 形象计算尧模式识别尧计算机视觉袁主要 研究方向为仿生图像处理技术尧仿生模 式识别理论与方法尧近红外光谱定性分 析技术尧高维信息计算遥 近年来主持国 家自然科学基金项目 圆 项袁企业合作研 究项目 猿 项袁发表学术论文 员愿 篇遥 摇 摇 覃鸿袁女袁员怨苑苑 年生袁工程师袁博士袁 主要研究方向为智能信息处理尧仿生信 息学理论与技术应用尧模式识别遥 第 员 期摇摇摇摇摇摇摇摇摇摇摇摇摇摇 阮晓虎袁等院 一种基于特征匹配的人脸配准判断方法 窑员怨窑
