基于卷积神经网络的行为识别分析-计算机应用技术专业论文.docxVIP

摘要 摘要 I I 摘 要 行为识别技术是计算机从包含人的视频或图像序列中对人的行为进行理解和 分类的技术，本文使用深度学习的方法来进行行为识别。深度学习是近几年来机 器学习领域非常热门的方向，卷积神经网络（CNN）作为深度学习的代表性网络， 比传统的神经网络的识别效果有巨大的提高而且该方法是一种端到端的识别方 法，不需要手工设计特征，它已经吸引了大量的人对其进行研究，并且已经在计 算机视觉的某些领域取得了成功。它具有一定的平移不变性、尺度不变性,并且其 计算方式和哺乳动物的视觉系统有很大的相似性。 本文介绍了卷积神经网络的理论基础。首先介绍了传统的神经网络，然后自 然过度到卷积神经网络，对关键的卷积层和下采样层进行了阐述。然后介绍了小 型数据库上的卷积神经网络 LeNet-5 的网络结构以及它在 MNIST 数据库上的实验 效果。紧接着，介绍了用于大型数据库的 ImageNet，这种网络与 LeNet-5 在结构 上有些区别，包括使用 ReLU 非线性激活函数、最大重叠下采样、Softmax 分类器 等。最后，简要说明了卷积神经网络在视频上的用法。 本文再介绍了用于视频的 3D CNN 的网络结构，这种结构使用了两个卷积 层、两个下采样和一个全连接层和一个输出层，而且在输入层使用了五个通道 （一个像素灰度通道、两个梯度通道、两个光流通道）。然后，本文详细描述了 作者设计的一种改进的 3D CNN。改进的 3D CNN 使用了七个通道（一个像素灰 度、四个 Gabor 滤波器通道、两个光流通道），网络的核的数量比 3D CNN 要多， 而且，在下采样层，有时间域上的下采样。 本文重点阐述了一个作者全新设计的网络，这种网络使用了 Network in Network(NIN)技术、时空金字塔技术、ReLU 非线性激活函数和 softmax 分类器。 本章首先介绍了 NIN 技术，这种技术是线性卷积的非线性扩展，能够学习到非线 性的特征。然后介绍了时空金字塔的技术，这种技术使得网络的输入能够是不同 分辨率、不同帧长的视频。接着详细描述了新网络的总体结构。最后，分析了新 网络对比 3D CNN 的优点。 最后，对改进的 3D CNN 和新网络进行了分析，包括对在 KTH 数据库上的实 验结果进行了分析，对网络的时间复杂度和空间复杂度的分析，对网络 feature map 进行可视化分析。最后，分析了两种网络的优缺点和适用范围。 关键词：行为识别，卷积神经网络，KTH 数据库，Gabor 滤波器 AB ABSTRACT II II ABSTRACT Action recognition is the technology of understanding peoples behavior and classification from video or image sequence, this thesis uses the deep learning approach for action recognition. Deep learning is very popular domain in machine learning in recent years. Convolutional neural network (CNN), as a representative of the deep learning network, has better recognition performance than the traditional neural network and the method is a kind of end-to-end recognition method that need not manually design features, and it has attracted a lot of people to study, and have made a success in some areas of computer vision. It has translation invariance and scale invariance, and its calculation and has a lot of similarities with the mammalian visual system. First of all, this thesis introduces the theoretical basis of convolutional neural network. The traditional neural network is introduced first, and then