吉林大学学报(工学版) ›› 2013, Vol. 43 ›› Issue (02): 459-465.

• 论文 • 上一篇    下一篇

基于主动机器视觉的人脸跟踪与表情识别系统

万川1, 田彦涛1,2, 刘帅师1, 陈宏伟1   

  1. 1. 吉林大学 通信工程学院, 长春 130022;
    2. 吉林大学 工程仿生教育部重点实验室, 长春 130022
  • 收稿日期:2012-05-18 出版日期:2013-03-01 发布日期:2013-03-01
  • 通讯作者: 田彦涛(1958-),男,教授,博士生导师.研究方向:复杂系统建模,模式识别与机器视觉.E-mail:tianyt@jlu.edu.cn E-mail:tianyt@jlu.edu.cn
  • 作者简介:万川(1985-),男,博士研究生.研究方向:模式识别,计算机视觉.E-mail:wanchuan523@qq.com
  • 基金资助:

    吉林省科技发展计划重点项目(20071152).

Face tracking and facial expression recognition system based on active machine vision

WAN Chuan1, TIAN Yan-tao1,2, LIU Shuai-shi1, CHEN Hong-wei1   

  1. 1. College of Communication Engineering, Jilin University, Changchun 130022, China;
    2. Key Laboratory of Bionic Engineering of Ministry of Education, Jilin University, Changchun 130022, China
  • Received:2012-05-18 Online:2013-03-01 Published:2013-03-01

摘要: 搭建了一个基于主动机器视觉平台的人脸跟踪与表情识别系统,并进行了相关实验研究。阐述了该平台的系统结构,以及实现人脸表情识别系统的关键功能模块。该系统在主动机器视觉平台基础上,对注意力选择的区域进行人脸检测,通过控制云台完成跟踪动作,并对人脸区域进行实时地表情识别。同时在实验平台上做了大量的人脸检测跟踪和表情识别实验,包括对复杂和简单背景下人脸跟踪及表情识别的准确性进行了实验,实验结果验证了平台的有效性。

关键词: 计算机应用, 主动机器视觉, 人脸跟踪, 表情识别

Abstract: A human face tracking and expression recognition system was built based on the active machine vision platform and the related experiments were performed. The system architecture and its key functional modules to realize the facial expression recognition were described. The system detects the human face area selected by the attention, tracks the face by controlling with PTZ, recognizes the facial expression real-timely. A lot of face tracking experiments were carried out on the system, including those in complex and simple background, proving the effectiveness of the system.

Key words: computer application, active machine vision, face tracking, expression recognition

中图分类号: 

  • TP391.4
[1] 刘晓旻,谭华春,章毓晋. 人脸表情识别研究的新进展[J].中国图象图形学报,2006,11(10):1359-1368. Liu Xiao-min, Tan Hua-chun, Zhang Yu-jin. New research advances in facial expression recognition[J]. Journal of Image and Graphics, 2006, 11(10):1359-1368.

[2] 刘帅师,田彦涛,万川. 基于Gabor多方向特征融合与分块直方图的人脸表情识别方法[J]. 自动化学报,2011,37(12): 1455-1463. Liu Shuai-shi, Tian Yan-tao, Wan Chuan. Facial expression recognition method based on Gabor multi-orientation features fusion and block histogram[J]. Acta Automatica Sinica, 2011, 37(12):1455-1463.

[3] 姜铁君,田彦涛,李金辉. 基于连续模板的主动机器视觉注意力选择算法[J]. 吉林大学学报:工学版,2003,33(4):95-99. Jiang Tie-jun, Tian Yan-tao, Li Jin-hui. Attention selection algorithm of active machine vision based on sequential templet[J]. Journal of Jilin University (Engineering and Technology Edition), 2003, 33(4):95-99.

[4] Lienhart R, Maydt J. An extended set of Haar-like features for rapid object detection//Proc of 2002 Int Conf on Image Processing, NewYork,USA,2002.

[5] Freund Y, Schapire R E. Experiments with a new boosting algorithm//Proc of the 13th Int Conf on Machine Learning, Bari Italy,1996.

[6] 郭冬梅.基于混合特征和神经网络集成的人脸表情识别.长春:吉林大学通信工程学院,2009. Guo Dong-mei. Facial expression recognition based on the hybrid feature and neural network ensemble. Changchun: College of Communication Engineering, Jilin University, 2009.

[7] 姜铁君.主动机器视觉目标特征提取及注意力选择.长春:吉林大学通信工程学院,2003. Jiang Tie-jun. Object feature extraction and attention selection of active machine vision.Changchun: College of Communication Engineering, Jilin University, 2003.

[8] 徐洁,章毓晋.基于多种采样方式和Gabor特征的表情识别[J].计算机工程,2011,37(18):195-197. Xu Jie, Zhang Yu-jin. Expression recognition based on variant sampling method and Gabor features[J]. Computer Engineering, 2011, 37(18):195-197.

[9] Xie Xu-dong, Lam Kin-Man. Gabor-based kernel PCA with doubly nonlinear mapping for face recognition with a single face image[J]. IEEE Trans on Image Processing, 2006, 15(9): 2481-2492.

[10] 邓洪波,金连文.一种基于局部Gabor滤波器组及PCA+LDA的人脸表情识别方法[J].中国图象图形学报,2007,12(2):322-329. Deng Hong-bo, Jin Lian-wen. Facial expression recognition based on local Gabor filter bank and PCA+LDA[J]. Journal of Image and Graphics, 2007,12(2):322-329.

[11] 李俊华,彭力. 基于特征块主成分分析的人脸表情识别[J].计算机工程与设计,2008,29(12): 3151-3153. Li Jun-hua, Peng Li. Facial expression recognition based on feature block principal component analysis[J]. Computer Engineering and Design, 2008, 29(12):3151-3153.

[12] 高智勇,王林.基于Gabor变换的表情识别系统的设计[J].中南民族大学学报:自然科学版,2010,29(1):78-82. Gao Zhi-yong, Wang Lin. Design of facial expression recognition system based on Gabor transformation[J]. Journal of South Central University for Nationalities (Nat Sci Edition), 2010, 29(1):78-82.
[1] 刘富,宗宇轩,康冰,张益萌,林彩霞,赵宏伟. 基于优化纹理特征的手背静脉识别系统[J]. 吉林大学学报(工学版), 2018, 48(6): 1844-1850.
[2] 王利民,刘洋,孙铭会,李美慧. 基于Markov blanket的无约束型K阶贝叶斯集成分类模型[J]. 吉林大学学报(工学版), 2018, 48(6): 1851-1858.
[3] 金顺福,王宝帅,郝闪闪,贾晓光,霍占强. 基于备用虚拟机同步休眠的云数据中心节能策略及性能[J]. 吉林大学学报(工学版), 2018, 48(6): 1859-1866.
[4] 赵东,孙明玉,朱金龙,于繁华,刘光洁,陈慧灵. 结合粒子群和单纯形的改进飞蛾优化算法[J]. 吉林大学学报(工学版), 2018, 48(6): 1867-1872.
[5] 刘恩泽,吴文福. 基于机器视觉的农作物表面多特征决策融合病变判断算法[J]. 吉林大学学报(工学版), 2018, 48(6): 1873-1878.
[6] 欧阳丹彤, 范琪. 子句级别语境感知的开放信息抽取方法[J]. 吉林大学学报(工学版), 2018, 48(5): 1563-1570.
[7] 刘富, 兰旭腾, 侯涛, 康冰, 刘云, 林彩霞. 基于优化k-mer频率的宏基因组聚类方法[J]. 吉林大学学报(工学版), 2018, 48(5): 1593-1599.
[8] 桂春, 黄旺星. 基于改进的标签传播算法的网络聚类方法[J]. 吉林大学学报(工学版), 2018, 48(5): 1600-1605.
[9] 刘元宁, 刘帅, 朱晓冬, 陈一浩, 郑少阁, 沈椿壮. 基于高斯拉普拉斯算子与自适应优化伽柏滤波的虹膜识别[J]. 吉林大学学报(工学版), 2018, 48(5): 1606-1613.
[10] 车翔玖, 王利, 郭晓新. 基于多尺度特征融合的边界检测算法[J]. 吉林大学学报(工学版), 2018, 48(5): 1621-1628.
[11] 赵宏伟, 刘宇琦, 董立岩, 王玉, 刘陪. 智能交通混合动态路径优化算法[J]. 吉林大学学报(工学版), 2018, 48(4): 1214-1223.
[12] 黄辉, 冯西安, 魏燕, 许驰, 陈慧灵. 基于增强核极限学习机的专业选择智能系统[J]. 吉林大学学报(工学版), 2018, 48(4): 1224-1230.
[13] 傅文博, 张杰, 陈永乐. 物联网环境下抵抗路由欺骗攻击的网络拓扑发现算法[J]. 吉林大学学报(工学版), 2018, 48(4): 1231-1236.
[14] 曹洁, 苏哲, 李晓旭. 基于Corr-LDA模型的图像标注方法[J]. 吉林大学学报(工学版), 2018, 48(4): 1237-1243.
[15] 侯永宏, 王利伟, 邢家明. 基于HTTP的动态自适应流媒体传输算法[J]. 吉林大学学报(工学版), 2018, 48(4): 1244-1253.
Viewed
Full text


Abstract

Cited

  Shared   
  Discussed   
No Suggested Reading articles found!