面部表情自动分类的方法和系统的分析.pdf

摘要 摘要 面部表情在人与人的交流方面传递着丰富的信息，因而可以通过面部表情分析去探究人 的情感状态与认知状态方面的内容。面部表情分析可以为社交、教学、谈判、公安检察的刑 侦、儿童的性格特征分析以及精神病医学研究提供信息参考与帮助。正因为如此，它具有很 高的研究价值。在实际应用方面，它在可视通讯领域以及新的人机交互界面方面具有重要的 潜在应用价值。 近年来，随着图像分析、计算机视觉以及模式识别等技术的发展，基于计算机科学的自 动面部表情分析逐渐发展起来。本文的工作立足于前人在相关领域的研究成果，着力于研究 实现面部表情自动分析的关键技术与方法，为将来最终实现自动表情分析系统而努力。本文 的主要]：作与创新包括以F几点： 1． 提出了一种结合小波分析与神经网络的人脸检测方法。该方法主要包括两个阶段。在训 练阶段首先借鉴图形学中的背景生成方法对AR人脸数据库中的人脸样本进行背景叠 加，然后对经过预处理的训练样本进行小波分解并将得到的小波系数输入精心设计的神 经网络进行训练。在人脸检测阶段，通过将缩放后的图像的各个区域输入神经网络，由 神经网络判断输入区域中是否包含人脸。在得到检测结果后，本文通过基于规则的方法 以及基于最小同值分割吸收核方法(susAN方法)进行人脸区域验证、取舍与合并， 最后通过实验结果的分析比较可以发现本文的方法不仅可以实现人脸区域的快速检测， 而且不受光照变化以及噪声的影响。 2． 提出了一种结合金字塔图像分解方法以及小波矩的面部特征点匹配预测方法。采用小波 矩方法可以实现图像区域信息的多尺度表征，而应用图像的金字塔分解表征方式可以实 现在幽像金字塔结构的各层之问传递信息并撮终建立局部处理与全局处理之间的关联。 该方法在实际应用中能够较好的实现面部特征点集之间的匹配预测。 3． 设计了一种基于本征模态的面部形变分析方法。这种方法可以在一种源于特定对象的坐 标系下对特定对象的形变进行表征。另外这种新的坐标系提供了一组从整体到局部的用 以刻画形变的本征模态。通过选择中间部分的本征模态可以实现较稳定的形变刻画。本 文依据两幅图像的特征点集之间的笛卡尔坐标系下的位移，通过正则化方法计算与笛卡 尔坐标系下的位移相对应的新坐标系下的位移。然后以新坐标系下的位移的模值构建面 部表情特征向量并依据该面部表情特征向量实现表情的自动分类与识别。 4． 比，本文算法有效地减少了算术运算的次数，从而提高了计算速度。实验结果表明了该 摘要 方法的有效性。 5． 设计了一种基于神经网络树的面部表情自动分类方法。神经网络树的整体结构为决策 树，通过在决策树的中间结点上嵌入专家神经网络增强了分类特征的能力，从而使得它 在分类能力上优于多层感知器和决策树方法。另外，它不仅可以完成复杂的模式识别任 务而且在有效特征的发现与验证方面也具有较高的能力。 关键词： 小波分析神经网络小波矩模态分析方法主分量分析矩方法 面部表情分类神经网络树 lI Abstract In lifeandsocial intercourse，facialcan re们ectone’s daily expressions emotion dynamically stateand state hasreceivedconsiderable perceiveTherefore，itsanalysis anentjoninthe矗elds such asbusjness children’scharacters crinlinal nego