人体行为识别概述ppt课件.ppt
- 【下载声明】
1. 本站全部试题类文档,若标题没写含答案,则无答案;标题注明含答案的文档,主观题也可能无答案。请谨慎下单,一旦售出,不予退换。
2. 本站全部PPT文档均不含视频和音频,PPT中出现的音频或视频标识(或文字)仅表示流程,实际无音频或视频文件。请谨慎下单,一旦售出,不予退换。
3. 本页资料《人体行为识别概述ppt课件.ppt》由用户(三亚风情)主动上传,其收益全归该用户。163文库仅提供信息存储空间,仅对该用户上传内容的表现方式做保护处理,对上传内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知163文库(点击联系客服),我们立即给予删除!
4. 请根据预览情况,自愿下载本文。本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
5. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007及以上版本和PDF阅读器,压缩文件请下载最新的WinRAR软件解压。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 人体 行为 识别 概述 ppt 课件
- 资源描述:
-
1、2022-5-20.1人体行为识别概述人体行为识别概述机器视觉团队:欧阳寒机器视觉团队:欧阳寒Page 22022-5-20.行为识别现状行为识别现状n VSAM(Visual Surveillance and Monitoring) 1997n IVPL实验室实验室(The Image and Video Processing Laboratory)n AIRVL实验室实验室(Artificial Intelligence,Robotics,and Vision Laboratory)n LPAC实验室实验室(Laboratory for Perception,Action and Cogn
2、ition)n KNIGHT系统系统n ISCAPs(Integrated Surveillance of Crowded Areas for Public Security)n REASON(Robust Methods for Monitoring and Understanding People in Public spaces)n CANTATA(Content Aware Networked systems Towards Advanced and TailoredAssistance)n 中国科学院自动化所的生物识别与安全技术研究中心中国科学院自动化所的生物识别与安全技术研究中心C
3、BSRn 微软亚洲研究院微软亚洲研究院参考文献:监控视频中的人体异常行为检测研究Page 32022-5-20.行为识别前景行为识别前景n high-level video indexing and retrievaln “smart” video surveillance systems 自动检测异常行为,辅助检索一个特定的事件。自动检测异常行为,辅助检索一个特定的事件。n The analysis of sport videos 帮助教练进行战略分析。识别不同的游泳风格。帮助教练进行战略分析。识别不同的游泳风格。n Hand gesture recognition 虚拟现实虚拟现实n Hu
4、man-Computer Interaction (HCI) systems kidsRoom、Smart room 、Facial action用于分析精神病病人的情感行为。用于分析精神病病人的情感行为。n roboticsn medical area 辅助诊断病人的运动问题。另一个是对老年人提供远程协助。辅助诊断病人的运动问题。另一个是对老年人提供远程协助。参考文献:Action Recognition in Videos:from Motion Capture Labs to the WebPage 42022-5-20.行为识别的流程行为识别的流程参考文献:运动人体行为分析 视频中的人
5、体运动分析及其应用研究 n 目标的运动特征,可以用于运动表述,是行为理解等高层部分的基础。目标的运动特征,可以用于运动表述,是行为理解等高层部分的基础。n 常见的运动表述方法有:常见的运动表述方法有:运动轨迹、时空图表述运动轨迹、时空图表述和光流。和光流。Page 52022-5-20.行为识别的流程行为识别的流程。Page 65/20/2022.目录目录目标检测目标检测目标分类目标分类特征提取特征提取行为理解行为理解目标跟踪目标跟踪Page 72022-5-20.运动目标检测运动目标检测参考文献:视频中的人体运动分析及其应用研究.nh 运动目标跟踪算法研究综述.pdfn 对于不依赖先验知识的
6、目标跟踪来讲,运动检测是实现跟踪的第一步对于不依赖先验知识的目标跟踪来讲,运动检测是实现跟踪的第一步n 运动检测即为从序列图像中将变化区域从背景图像中提取出来。运动检测即为从序列图像中将变化区域从背景图像中提取出来。Page 82022-5-20.目标检测目标检测时间差分法时间差分法n 在连续的图像序列中在连续的图像序列中两幅或三幅相邻帧两幅或三幅相邻帧之间采用之间采用基于像素基于像素的时间差分,的时间差分,并对差分结果进行并对差分结果进行阈值化处理阈值化处理以以提取提取图像中的图像中的前景前景运动区域。运动区域。n 缺点:缺点:n 前景、背景区域的确定与前景、背景区域的确定与阈值的选取阈值的
7、选取有很大的关系有很大的关系 当灰度图像序列对比度较低时,由于相邻两帧的差当灰度图像序列对比度较低时,由于相邻两帧的差(前景与背景之差前景与背景之差)的范围很小,的范围很小,阈值难以选取阈值难以选取,影响前景目标的分割结果。,影响前景目标的分割结果。n 区域区域灰度值灰度值变化较为变化较为平坦时平坦时,容易在人体二值图像内产生,容易在人体二值图像内产生空洞现象空洞现象,给后续的目标分类、跟踪和识别造成不便。给后续的目标分类、跟踪和识别造成不便。n 优点:优点:n 对于对于动态环境动态环境有有较强较强的自的自适应性适应性Page 92022-5-20.目标检测目标检测光流法光流法n 基于光流法的
8、运动检测,是利用运动物体随时间变化在图像中表现的基于光流法的运动检测,是利用运动物体随时间变化在图像中表现的光流特性,通过计算位移向量光流场来提取运动目标。光流特性,通过计算位移向量光流场来提取运动目标。n 光流是空间运动物体在观测成像面上对应像素运动的瞬时速度,是空光流是空间运动物体在观测成像面上对应像素运动的瞬时速度,是空间物体可见点的三维速度矢量在成像平面上的投影,它携带了丰富的间物体可见点的三维速度矢量在成像平面上的投影,它携带了丰富的运动和结构信息。运动和结构信息。n 优点优点:n 即使在摄像机运动的情况下也能检测出独立的运动目标。即使在摄像机运动的情况下也能检测出独立的运动目标。n
9、 缺点缺点:n 由于噪声、多光源、阴影和遮挡等原因,计算出的光流场分布并不十由于噪声、多光源、阴影和遮挡等原因,计算出的光流场分布并不十分可靠和准确。分可靠和准确。n 多数光流法计算复杂、耗时,在实际的系统中没有特殊的硬件支持时,多数光流法计算复杂、耗时,在实际的系统中没有特殊的硬件支持时,很难实现实时检测。很难实现实时检测。Page 102022-5-20.目标检测目标检测背景减除法背景减除法n 最常用且有效的是背景减除法。最常用且有效的是背景减除法。n 背景减除法最简单的实现方法是预先选取不含前景运动目标的背景图背景减除法最简单的实现方法是预先选取不含前景运动目标的背景图像,然后将当前图像
10、帧与背景图像相减得到前景目标。像,然后将当前图像帧与背景图像相减得到前景目标。n 背景减除法通常在背景减除法通常在摄像机固定的情况下使用摄像机固定的情况下使用,关键关键是建立随场景变化是建立随场景变化不断更新的背景模型不断更新的背景模型。n 有有两类两类常用的背景更新方法常用的背景更新方法:n 1、建立背景模型并采用自适应方法对模型参数进行调整,从而获得、建立背景模型并采用自适应方法对模型参数进行调整,从而获得新背景图像新背景图像;n 2、从过去的一组观测图像中按一定的假设选择像素值构成当前背景、从过去的一组观测图像中按一定的假设选择像素值构成当前背景图像。图像。Page 112022-5-2
11、0.目标分类目标分类参考文献:视频中的人体运动分析及其应用研究Page 122022-5-20.人体描述人体描述参考文献:Human Motion: Modeling and Recognition of Actions and Interactions Page 132022-5-20.运动跟踪运动跟踪参考文献:运动目标跟踪算法研究综述n 运动目标的跟踪,即通过目标的有效表达,在图像序列中寻找与目标运动目标的跟踪,即通过目标的有效表达,在图像序列中寻找与目标模板最相似候选目标区位置的过程。模板最相似候选目标区位置的过程。n 就是在序列图像中为就是在序列图像中为目标定位目标定位。n 范例范例P
12、age 142022-5-20.四种跟踪方法的比较四种跟踪方法的比较。Page 152022-5-20.运动目标的特征运动目标的特征参考文献:自动目标识别与跟踪技术研究综述Page 162022-5-20.运动表征运动表征。Page 172022-5-20.行为识别行为识别n 人的行为理解与描述是指对人的运动模式进行分析和识别人的行为理解与描述是指对人的运动模式进行分析和识别, 并用自然语并用自然语言等加以描述言等加以描述. n 可以简单地认为是时变数据的分类问题,即将测试序列与预先标定的代可以简单地认为是时变数据的分类问题,即将测试序列与预先标定的代表典型行为的参考序列进行匹配表典型行为的参
13、考序列进行匹配. n 行为理解的行为理解的关键问题关键问题是如何从学习样本中是如何从学习样本中获取参考行为序列获取参考行为序列, 并且学习并且学习和匹配的行为序列能够处理在相似的运动模式类别中空间和时间尺度上和匹配的行为序列能够处理在相似的运动模式类别中空间和时间尺度上轻微的特征变化轻微的特征变化.Page 182022-5-20.行为识别方法行为识别方法Page 192022-5-20.基于模板匹配的方法基于模板匹配的方法n 首先将图像序列转换成一组静态形状模式首先将图像序列转换成一组静态形状模式n 然后在识别过程中用输入图像序列提取的特然后在识别过程中用输入图像序列提取的特征与在训练阶段预
14、先存储的动作行为模板进征与在训练阶段预先存储的动作行为模板进行行相似度比较相似度比较,在比较数据可以有轻微变化,在比较数据可以有轻微变化下识别人体行为。下识别人体行为。M H V(Motion History Volumes)Page 202022-5-20.基于模板匹配的方法之基于模板匹配的方法之DTWn DTW(dynamic time warping)动态时间规整动态时间规整n DTW是一种时变数据序列匹配方法是一种时变数据序列匹配方法n DTW 优点:概念简单、算法鲁棒,能够对图像序列进行分类。优点:概念简单、算法鲁棒,能够对图像序列进行分类。n DTW缺点:算法计算量较大,缺乏考虑相
展开阅读全文