一种定位人脸部特征的光学聚类方法_周冕
一种处理遮掩的人脸特征点定位方法

一种处理遮掩的人脸特征点定位方法
邹北骥;曾阳;王磊;彭小宁
【期刊名称】《系统仿真学报》
【年(卷),期】2009()8
【摘要】AAM(Active Appearance Models,主动表观模型)是一种定位人脸特征点的有效方法,它由人脸动态表观建模和拟合算法两部分组成。
在多种拟合算法中,投影式反向组合算法(Project-Out Inverse Compositional Algorithm)具有快速高效的特点。
但当人脸的某部分被遮掩时,算法的精度会明显下降。
提出一种采用逐层细分掩模消除干扰的正规化反向组合算法,该算法既保留了反向组合算法快速高效的优点又提高了算法处理遮掩的能力。
实验结果表明:在采用标准的IMM人脸库作为训练集的情况下,当脸部被遮掩0%-30%时,算法能够保证定位特征点的标准误差值介于0.01-0.1之间。
【总页数】6页(P2229-2234)
【作者】邹北骥;曾阳;王磊;彭小宁
【作者单位】中南大学信息科学与工程学院;怀化学院计算机科学与技术系
【正文语种】中文
【中图分类】TP391.9
【相关文献】
1.一种基于改进的ASM的人脸特征点定位方法
2.一种快速高效的人脸特征点定位方法
3.一种基于偏转角度的AAM人脸特征点定位方法
4.一种鲁棒的全自动人脸特征点定位方法
5.一种基于肤色特征的人脸特征点定位方法
因版权原因,仅展示原文概要,查看原文内容请购买。
一种改进的提取人脸面部特征点的AAM拟合算法

一种改进的提取人脸面部特征点的AAM拟合算法王磊;邹北骥;彭小宁;周凌【期刊名称】《电子学报》【年(卷),期】2006(34)8【摘要】AAM(Active Appearance Model)是一种用来提取人脸特征点的有效方法,由人脸动态表观建模和拟合算法两部分组成.在多种AAM拟合算法中,反向组合法以快速高效著称.但在遇到外物遮挡时,AAM算法的拟合效果会变差.本文在反向组合法的基础上提出了一种基于分层细化掩模的改进算法.实验结果表明,该算法能较好地去除干扰并保留对拟合有用的信息,具有较强的抗干扰鲁棒性.【总页数】4页(P1424-1427)【作者】王磊;邹北骥;彭小宁;周凌【作者单位】中南大学信息科学与工程学院,湖南,长沙,410083;浙江大学计算机辅助设计与图形学国家重点实验室,浙江,杭州,310058;中南大学信息科学与工程学院,湖南,长沙,410083;浙江大学计算机辅助设计与图形学国家重点实验室,浙江,杭州,310058;中南大学信息科学与工程学院,湖南,长沙,410083;浙江大学计算机辅助设计与图形学国家重点实验室,浙江,杭州,310058;华为技术有限公司,广东,深圳,518129【正文语种】中文【中图分类】TP391.41【相关文献】1.基于改进AAM的人脸特征点提取 [J], 牛星;席志红;金子正秀2.一种改进的AAM人脸特征点快速定位方法 [J], 范小九;彭强;Jim X Chen;夏旭3.基于AAM和ASM的面部特征点提取研究 [J], 王智4.基于 AAM 关键特征点提取的人脸照片分类方法的研究与应用 [J], 王建涛5.基于改进AAM的人脸特征点检测 [J], 王磊;刘辉;余四洋;毕学霞;曾令军因版权原因,仅展示原文概要,查看原文内容请购买。
一种改进的提取人脸面部特征点的AAM拟合算法

终消除干扰 . 在利用反向组合算法进行拟合计算的过程中 , 若遇到 外物遮挡 , 模型与输入图像之间的误差值必然会大于正常 情况下的误差值 . 由于这类干扰出现时多集中在某个区域 内 , 因此考虑设置掩模 M ( x) 来消除干扰影响 . 这样把求式 ( 2 ) 的极小值转化为求式 ( 3 ) 的极小值 :
Key words: ac tive app earance m ode l ( AAM ) ; fitting algo rithm; inverse com p ositiona l a lgo rithm; ex trac t facial
feature
1 引言
面部特征点勾勒了人脸的主要形状特征 , 一般位于人 脸五官轮廓的尖端或突出处 , 如内外眼角 、 嘴角和鼻尖等 . 特征点的准确定位对于人脸识别 、 表情分析和基于视觉的 人机交互等研究具有重要的意义 . 现有的研究大多是采用 无监督统计方法 . 这些方法的主要思想是 : 首先找出一组 人脸基图像 , 然后用基图像的线性组合来表示人脸 . 近年 [ 1 ~3 ] 来寻找快速有效的人脸特征点提取方法 已成为计算机 视觉 研 究 的 一 个 热 点 . AAM ( A c tive A ppea rance M od 2 [ 4 ~6 ] e l) 是一种快速有效的人脸特征点提取方法 . 该方法由 人脸动态表观建模和拟合算法两部分组成 . 其基本思想 是 : 首先对一组已标记特征点的人脸图像进行训练 , 根据
M ( x) ・ ∑
x
T (W ( x; Δp ) ) - I (W ( x; p ) )
2
( 3)
反向组合算法 由 L ucas 2Kanade 算法演化而来 , 是 一种快速有效的 AAM 拟合算法 . L ucas 2Kanade 算法通过 求解式 ( 1 )的极小值实现输入图像与模板图像的最大匹配 :
基于深层特征聚类的人脸表情识别的实现方法[发明专利]
![基于深层特征聚类的人脸表情识别的实现方法[发明专利]](https://img.taocdn.com/s3/m/a72354be3c1ec5da51e27014.png)
专利名称:基于深层特征聚类的人脸表情识别的实现方法专利类型:发明专利
发明人:吴晨,李雷,吴婧漪
申请号:CN201910240401.7
申请日:20190327
公开号:CN109993100A
公开日:
20190709
专利内容由知识产权出版社提供
摘要:本发明揭示了一种基于深层特征聚类的人脸表情识别的实现方法,该方法包括以下步骤:S1:采集各种人脸表情图片,并根据人脸表情逐一分类;S2:图片预处理,去除模糊照片,再用基于卷积神经网络的级联多任务人脸检测算法得到人脸关键点,并根据关键点统一裁剪人脸图片;S3:构建基于卷积神经网络的人脸表情识别网络,并将预处理后的人脸表情图片分别输入网络当中计算损失函数并进行训练;S4:获取训练好的人脸表情识别网络,并应用于实测。
该方法解决了人脸表情识别精确率较低和过拟合等问题。
申请人:南京邮电大学
地址:210003 江苏省南京市鼓楼区新模范马路66号
国籍:CN
代理机构:南京苏科专利代理有限责任公司
代理人:范丹丹
更多信息请下载全文后查看。
一种定位人脸部特征的光学聚类方法

r s o s s n r mo i g o e p n e a d e v n l w ma n td r s o e , t e i e p i t beo g n t f ca f a r s g u e e p ns s h p x l o n s i l n i g o a i l e t e wee u r
(.天 津 大 学 精 密 测 试 技 术 及 仪 器 国 家 重 点 实验 室 , 津 30 7 1 天 0 02; 2 英 国 雷 丁 大 学 系 统 工 程 学 院 , 丁 英 国 R 66 Y ; . 雷 G A 3 天 津 外 国语 大 学 教 育技 术 与 信 息 学 院 , 津 3 00 ) . 天 0 24 摘 要 :人 脸 识 别 技 术 需要 对 脸 部 特 征 进 行 定 位 , 而 有 助 于 确 保 图 像 一 致 和 建 立 人 脸 模 型 。 e h d f r l c tn a i lf a ur s i a l s e i g m t o o o a i g f c a e t e
Z o a _ WagX a g n h uMi ’ . n i j n v n u
(. tt e aoa r fPei o auig T cn lg n nt met, i j ies y Taj 0 0 2 C ia 1 Sa K y L b rt yo rcs n Mesr eh oo y adIs u ns Ta i Unv rt, i i 3 0 7 , hn e o i n r n n i n n
Ab t a t Th lc l ain n a il e tr s i n e e f r a e r c g i o sn e i ep k e i g sr c : e o ai to o f ca f au e s e d d o f c e o nt n i c t z i h l s e pn a c r a c ewe n f c ma e 抽 d b idn a e mo e .I h spa e .a n v lm eh d f r l c t g f ca c od n eb t e ae i g s u li g f c d 1 n t i p r o e t o o a n a il o i fau e s p e e td wh c n ld d t t p :fl rn n lse i g a e i a e r isl r c s e e tr s wa r s n e ih icu e wo se s i t ig a d cu trn .F c m g swe e frt p o e s d e y
一种基于黄金分割法的人脸图像聚类方法[发明专利]
![一种基于黄金分割法的人脸图像聚类方法[发明专利]](https://img.taocdn.com/s3/m/24ae45050622192e453610661ed9ad51f01d548a.png)
专利名称:一种基于黄金分割法的人脸图像聚类方法专利类型:发明专利
发明人:钱丽萍,俞宁宁,周欣悦,吴远,黄亮
申请号:CN201910663745.9
申请日:20190723
公开号:CN110532867B
公开日:
20220617
专利内容由知识产权出版社提供
摘要:一种基于黄金分割法的人脸图像聚类方法,包括以下步骤:1)应用深度卷积神经网络DCNN实现对数据库中所有人脸图片的特征表示;2)应用K‑Means++聚类算法实现对图像表征的聚类;3)基于0.618黄金分割法确定最优聚类数目,过程为:首先,给定聚类范围[a,b],K∈[a,b]。
在范围内任意初始化给定聚类数目K0,基于聚类结果的内部性能评估指标构建优化函数f(K);接着,基于0.618黄金分割优化算法一维动态搜索函数最优解。
该最优解即为最优聚类数目K*,对应聚类结果C*即为该人脸图像库的最佳聚类。
本发明显著提升人脸图像聚类性能。
申请人:浙江工业大学
地址:310014 浙江省杭州市下城区朝晖六区潮王路18号
国籍:CN
代理机构:杭州斯可睿专利事务所有限公司
代理人:王利强
更多信息请下载全文后查看。
一种基于人脸检测的人眼特征定位方法

IA (P ) =
为 A 的测度 (实际计算中
(A ) 为区域 A 的面积 ) 。
以 ( 1)式作为卷积核与左眼所在 区域的图像 f ( x, y ), ( x, y ) # 做卷积 e( x, y ) = f ( x, y ) * M ( x, y ), ( x, y ) # 若 e( x c, y c ) =
图 2 人脸 三庭五 眼 示意图
人眼特征点应该选择最能代表人眼特征的某 些位置 , 主 要 包括 眼 珠 中 心 点 和 人 眼 轮 廓。 在 M PEG 4 标 准
[ 7]
图 5 人眼区域的灰度图像
中, FDP ( F ace Def in ition Param e 首先检测左眼特征点, 利用类似的方法可以检
ters)定义了 人 脸面 部 几何 特 征信 息。 本文 参 照
第 1期
王
罡 等 : 一种基于人脸检测的人眼特征定位方法
39
测到右眼特征点。用二元函数 f ( x, y ) 表示人脸图 像 , 集合 为左眼所在的区域。 首先估计出左眼的一些参数 (主要是左眼的宽 度 l 和高度 ) , 这可以根据检测到的左眼区域的大 小来估计。左眼珠直径也可以估计出来, 约为左眼 宽的 1 /3 , 即 l /3 。我们检测左眼珠位置是基于以 下事实 : 左眼区域中, 眼珠所在区域的灰度值与其 他区域相比是最小的。故设法得到左眼区域内灰 度值最小的区域。下面介绍用特征区域灰度极小 检测法检测左眼中心点。 1 假设左眼珠直径为 d ( d ! l) , 构造大 小为 3 1 1 1 1 ( - d, d ) ∀ ( - d, d ) 的模板 , 在左眼区域 2 2 2 2 内逐像素移动模板。假设模板覆盖到的区域为 A, 则其位置可由 A 的中心位置 (x, y ) 确定。令: M ( x, y ) = 其中 P # 1 I (P ) (A ) A 1 P# A , 0 P A ( 1)
一种人脸图像聚类方法、系统、产品及介质[发明专利]
![一种人脸图像聚类方法、系统、产品及介质[发明专利]](https://img.taocdn.com/s3/m/783f2a3533d4b14e8424689a.png)
专利名称:一种人脸图像聚类方法、系统、产品及介质专利类型:发明专利
发明人:朱金华,陈婷,蔡振伟,何俊豪,王赟,裴卫斌
申请号:CN201910784939.4
申请日:20190823
公开号:CN110516586A
公开日:
20191129
专利内容由知识产权出版社提供
摘要:一种人脸图像聚类方法,首先获取M张目标人脸图像,分别提取M张目标人脸图像的人脸特征向量和时空特征,时空特征包括拍摄目标人脸图像的摄像头的空间位置、摄像头类别及拍摄时刻中的任意一者或多者,然后根据预设的聚类中心数N对所述M张目标人脸图像的人脸特征向量进行粗聚类划分以得到N个分区,最后基于所述M张目标人脸图像的信息特征,根据各个分区对应的预设基础索引进行聚类,得到K个图像集。
由于预设基础索引包括预设时空逻辑,用于在各个分区中,对于聚为同一类的若干人脸特征向量,去除其中不符合预设时空逻辑的人脸特征向量,或者将其中不符合预设时空逻辑的人脸特征向量取出并聚为另一类,达到高效高质量的聚类。
申请人:深圳力维智联技术有限公司,南京中兴力维软件有限公司
地址:518057 广东省深圳市南山区粤海街道科苑南路3099号储能大厦六层
国籍:CN
代理机构:深圳鼎合诚知识产权代理有限公司
更多信息请下载全文后查看。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
收稿日期:2010-06-15;修订日期:2010-07-20基金项目:精密测试及仪器国家重点实验室开放基金资助项目作者简介:周冕(1979-),男,副教授,博士,主要从事计算机视觉方面的研究。
Email:zhoumian@一种定位人脸部特征的光学聚类方法周冕1,2,3,王向军1(1.天津大学精密测试技术及仪器国家重点实验室,天津300072;2.英国雷丁大学系统工程学院,雷丁英国RG66AY ;3.天津外国语大学教育技术与信息学院,天津300204)摘要:人脸识别技术需要对脸部特征进行定位,从而有助于确保图像一致和建立人脸模型。
提出了一种新的脸部特征定位方法,通过Gabor 滤波器处理得到人脸图像的强度响应,其中,脸部特征表现为强响应,而其他部分表现为弱响应,如面颊和额头。
通过保留强响应以及过滤弱响应,可以获得属于脸部特征的所有像素点。
采用了聚类算法———k 均值算法将不同的像素点分配到不同的簇里面,每一个簇都代表一个脸部特征。
通过在ORL 人脸数据库上的测试表明:此方法能精确、快速地定位诸如眼睛、鼻子、嘴等脸部特征。
此外,此方法能够在有浓密胡须的对象上成功定位脸部特征,表现出较高的鲁棒性。
关键词:Gabor 滤波器;聚类;人脸识别中图分类号:TN29文献标志码:A文章编号:1007-2276(2011)03-0576-05Optical clustering method for locating facial featuresZhou Mian 1,2,3,Wang Xiangjun 1(1.State Key Laboratory of Precision Measuring Technology and Instruments,Tianjin University,Tianjin 300072,China;2.School of Systems Engineering,University of Reading,Reading RG66AY,United Kingdom;3.School of Educational Technology and Information,Tianjin Foreign Studies University,Tianjin 300204,China)Abstract:The localization on facial features is needed for face recognition since it helps keeping accordance between face images and building face model.In this paper,a novel method for locating facial features was presented which included two steps:filtering and clustering.Face images were firstly processed by Gabor filter into magnitude responses.In the responses,facial features demonstrated relatively high magnitude responses than other facial parts,such as cheek and forehead.By reserving high magnitude responses and removing low magnitude responses,the pixel points belonging to facial features were collected.The method adopted a clustering approach —k -means for separating pixel points into different clusters.Each cluster represented a facial feature.By testing on the ORL face database,the method shows its accuracy and speed on locating facial features,such as eyes,nose and mouth.It also exhibits high robustness in locating features on faces which have thick beard or mustache.Key words:Gabor filter;clustering;face recognition第40卷第3期红外与激光工程2011年3月Vol.40No.3Infrared and Laser EngineeringMar.2011第3期0引言近10年来,人脸识别技术得到了飞速地发展,越来越多被应用于通关、企业安全和管理、刑侦、人机交互等众多领域。
人脸识别技术按处理方式可以分为两种:基于外表的人脸识别和基于模型的人脸识别。
基于外表的人脸识别是利用人脸图像中像素值的统计分布规律来实现的,主要代表为基于主成分分析的人脸识别方法[1]。
而基于模型的人脸识别需要先建立人脸模型,然后根据模型对人脸图像进行匹配,得出模型的参数,从而实现最终识别。
其典型代表为弹性图匹配[2]和主动外观模型[3]。
虽然这两类方法有着不同的处理模式,但是他们几乎都需要先定位脸部特征。
例如,在基于外表的人脸识别中,需要找到眼睛、鼻子、嘴巴等特征的位置,然后根据所得到的位置来预处理所有的人脸图像,如所有的眼睛必须在同一高度。
而在基于模型的人脸识别中,模型是由一系列的关键点组成,而这些关键点就是脸部特征,通过自动搜寻脸部特征,即可建立起模型。
由此可见,对脸部特征的定位是人脸识别技术的关键。
该过程处理的好坏将决定最终识别的成功与否。
文中提出的是一种基于聚类的脸部特征定位方法。
首先通过Gabor滤波器对人脸图像进行转换,将面部的信息以强度响应的形式表现出来。
通过保留强响应,过滤弱响应的方法,使得脸部特征得以全部保留下来。
最后根据k均值聚类的方法,将所保留的强响应分为多个不同的簇,每一个簇代表一个脸部特征。
这种方法具有快速、准确、强壮等优点,尤其适合于定位眼睛、鼻子、嘴等常见的脸部特征。
1Gabor滤波器二维的Gabor滤波器最早是由J.Daugman[4]在1985年提出来的。
现已广泛地应用于纹理处理[5]和目标检测[6]。
Gabor滤波器由傅里叶级数方程与高斯方程相乘得到的,为受三角函数调制的高斯函数,它由两部分组成:实数部分和虚数部分。
实数部分是高斯函数和余弦函数的乘积,具有对称结构;虚数部分是高斯函数与正弦函数的乘积,为非对称结构。
通常Gabor滤波器表示为指数型式:H(x,y,σ,U,V)=12πσ2e-x2+y22σe j2π(U x+V y)(1)式中:第一个指数代表高斯函数;第二个指数表示三角函数的调制。
Gabor滤波器为具有5个变量的方程:x和y分别表示图像上的横坐标和纵坐标;σ是二维高斯函数的标准偏差(x坐标上和y坐标上的标准偏差相同);U和V分别决定滤波器在x和y坐标上的空间频率。
实际处理中,Gabor滤波器表示为N×N的方阵模板,N一般为奇数,如:7×7、13×13、19×19等。
x和y 变量的取值范围为[-(N-1)/2,(N-1)/2]。
模板中心的坐标为(0,0)。
Gabor滤波器的射频F由U和V两个空间频率决定:F=U2+V2姨(2) Gabor滤波器的方向也是由U和V来决定。
方向的角度表示为:θ=arctan UV(3)因此,两个空间频率又可以表示为U=F×cosθ和V=F×sinθ。
变量σ和F之间的关系源于:σ=κF,其中κ=2ln2姨2φ+12-1姨姨(4)式中:φ是以倍频程来衡量的带宽。
根据参考文献[7],Gabor滤波器最好选择1~1.5的倍频程。
这里,带宽采用的倍频程为1.0。
因此,标准偏差σ为π/F。
空间频率将分别为:U=πσcosθ,V=πσsinθ(5)因此,可以将Gabor滤波器转换为以4个变量表示的形式:H(x,y,σ,θ)=12πσ2e-x2+y22σ2e j2π2(x cosθ+y sinθσ)(6)式中:σ不仅表示标准偏差,而且还决定Gabor滤波器的大小;θ为空间方向。
滤波的结果通过Gabor滤波器与数字图像进行离散卷积得到。
如上所述,Gabor滤波器可以离散化为N×N的模板形式。
然而,对于不同的标准偏差σ,N不是唯一值。
如果σ的取值很小而N的取值很大,那周冕等:一种定位人脸部特征的光学聚类方法577红外与激光工程第40卷么Gabor滤波器只在模板中占有很小的部分,其他部分都为空白。
这样造成在卷积中,大部分的计算都被浪费掉了。
因此,需要根据标准偏差σ来动态地决定N的取值。
Dunn和Higgins[8]提出了Gabor滤波器的宽度应为6σ+1,如标准偏差σ为24pixel,那么模板的大小将为145×145。
图1所示为一个Gabor滤波器的模板,σ为8,方向θ为π/4。
其中,图(a)为其实部,图(b)为其虚部。
图1一个方向为π/4,标准偏差为8的Gabor滤波器Fig.1An example of Gabor filter,whose orientation is π/4andσis8如上所述,Gabor滤波器由实部和虚部两部分组成,因此,需将实部和虚部分别与图像进行卷积。
卷积的结果包括两种响应,即实部响应和虚部响应。
而强度响应是实部响应和虚部响应平方和的开方,强度响应广泛应用于图像分割和边缘检测中,因此,文中的人脸识别采用的是强度响应。
图2为人脸图像与Gabor滤波器(σ=1,θ=π/2)卷积之后强度响应的结果。
图2人脸图像(a)和其强度响应的结果(b) Fig.2Human face image(a)and its magnitude response(b)by a Gabor filter2k均值算法k均值算法是一种基于样本间相似度的间接聚类方法。
聚类是将一系列样本重组或分割为不相连的簇。
由聚类所生产的簇是一组样本的集合,这些样本与同一个簇中的样本彼此相似,而与其他簇中的样本相异。
聚类方法已经广泛应用于数据挖掘、人工智能和图像处理等领域。
k均值算法属于传统聚类分析中划分方法的一种。
在此算法中,需要预先假设存在k个簇,然后将n 个样本分别划分到k个簇中以便使得聚类满足:同一簇中的样本相似度较高;而不同簇中的样本相似度较低。