人体行为识别概述课件.ppt

人体行为识别概述机器视觉团队：欧阳寒人体行为识别概述

行为识别现状VSAM(VisualSurveillanceandMonitoring)1997IVPL实验室(TheImageandVideoProcessingLaboratory)AIRVL实验室(ArtificialIntelligence，Robotics，andVisionLaboratory)LPAC实验室(LaboratoryforPerception，ActionandCognition)KNIGHT系统ISCAPs(IntegratedSurveillanceofCrowdedAreasforPublicSecurity)REASON(RobustMethodsforMonitoringandUnderstandingPeopleinPublicspaces)CANTATA(ContentAwareNetworkedsystemsTowardsAdvancedandTailoredAssistance)中国科学院自动化所的生物识别与安全技术研究中心CBSR微软亚洲研究院参考文献：监控视频中的人体异常行为检测研究2人体行为识别概述

行为识别前景high-levelvideoindexingandretrieval“smart”videosurveillancesystems自动检测异常行为，辅助检索一个特定的事件。Theanalysisofsportvideos帮助教练进行战略分析。识别不同的游泳风格。Handgesturerecognition虚拟现实Human-ComputerInteraction(HCI)systemskidsRoom、Smartroom、Facialaction用于分析精神病病人的情感行为。roboticsmedicalarea辅助诊断病人的运动问题。另一个是对老年人提供远程协助。参考文献：ActionRecognitioninVideos:fromMotionCaptureLabstotheWeb3人体行为识别概述

行为识别的流程参考文献：运动人体行为分析视频中的人体运动分析及其应用研究目标的运动特征，可以用于运动表述，是行为理解等高层部分的基础。常见的运动表述方法有：运动轨迹、时空图表述和光流。4人体行为识别概述

行为识别的流程。5人体行为识别概述

目录目标检测01目标分类02特征提取04行为理解05目标跟踪036人体行为识别概述

运动目标检测参考文献：视频中的人体运动分析及其应用研究.nh运动目标跟踪算法研究综述.pdf对于不依赖先验知识的目标跟踪来讲，运动检测是实现跟踪的第一步运动检测即为从序列图像中将变化区域从背景图像中提取出来。7人体行为识别概述

目标检测——时间差分法在连续的图像序列中两幅或三幅相邻帧之间采用基于像素的时间差分，并对差分结果进行阈值化处理以提取图像中的前景运动区域。缺点：前景、背景区域的确定与阈值的选取有很大的关系当灰度图像序列对比度较低时，由于相邻两帧的差(前景与背景之差)的范围很小，阈值难以选取，影响前景目标的分割结果。区域灰度值变化较为平坦时，容易在人体二值图像内产生空洞现象，给后续的目标分类、跟踪和识别造成不便。优点：对于动态环境有较强的自适应性8人体行为识别概述

目标检测——光流法基于光流法的运动检测，是利用运动物体随时间变化在图像中表现的光流特性，通过计算位移向量光流场来提取运动目标。光流是空间运动物体在观测成像面上对应像素运动的瞬时速度，是空间物体可见点的三维速度矢量在成像平面上的投影，它携带了丰富的运动和结构信息。优点：即使在摄像机运动的情况下也能检测出独立的运动目标。缺点：由于噪声、多光源、阴影和遮挡等原因，计算出的光流场分布并不十分可靠和准确。多数光流法计算复杂、耗时，在实际的系统中没有特殊的硬件支持时，很难实现实时检测。9人体行为识别概述

目标检测——背景减除法最常用且有效的是背景减除法。背景减除法最简单的实现方法是预先选取不含前景运动目标的背景图像，然后将当前图像帧与背景图像相减得到前景目标。背景减除法通常在摄像机固定的情况下使用，关键是建立随场景变化不断更新的背景模型。有两类常用的背景更新方法:1、建立背景模型并采用自适应方法对模型参数进行调整，从而获得新背景图像;2、从过去的一组观测图像中按一定的假设选择像素值构成当前背景图像。10人体行为识别概述

目标分类参考文献：视频中的人体运动分析及其应用研究11人体行