TMS320C5000系列DSP原理及应用（第二版）课件8-4（3）画卷视频预览和导航.pptx

基于画卷形式的视频预览和导航

及其在OMAP平台上的实现2012年05月12日西安交通大学电子与信息工程学院乔瑞萍

报告内容一、研究背景和意义二、画卷形式的预览和导航三、核心算法的研究和实现四、系统在OMAP平台上的实现五、实现结果展示六、总结

视频预览及视频导航研究背景和意义◆利用视频、图片、文字等形式◆使用户对视频的内容有粗略地了解◆例如内容简介、电影海报、DVD章节等◆向用户提供一种便捷的方法◆能够调整视频播放中的时间位置◆例如：时间轴形式的导航条视频预览视频导航

随着视频数量的急剧增加，当前急需一种更合理的预览导航形式以提高用户体验◆现有的若干改进优酷视频网——预览小窗口文字描述的兴趣点优酷视频网——预览小窗口研究背景和意义

研究目标 研究背景和意义◆一种高效的、直观的形式◆将预览与导航功能紧密结合◆能更快更好地完成视频的预览及导航

报告内容一、研究背景和意义二、画卷形式的预览和导航三、核心算法的研究和实现四、系统在OMAP平台上的实现五、实现结果展示六、总结

画卷形式的预览和导航整体效果

多尺度预览示意画卷形式的预览和导航

核心问题关键帧的选取◆关键帧反映一段视频的主要内容◆一个合理的关键帧集合能提高预览和导航的效果◆在不同的时间间隔下选取不同的关键帧集合图像的拼贴◆紧凑、美观地将若干张图片拼合在一起◆好的拼贴能显示更多的预览内容画卷形式的预览和导航

报告内容一、研究背景和意义二、画卷形式的预览和导航三、核心算法的研究和实现四、系统在OMAP平台上的实现五、实现结果展示六、总结

核心算法的研究和实现关键帧的选取关键帧内容方面的考虑◆更丰富的内容◆与相邻帧更大的差异内容—时间相结合的考虑◆时间间隔较大时更注重代表性◆时间间隔较小时更注重分布的均匀性

关键帧的选取核心算法的研究和实现◆函数：图像颜色的方差，反映该图像内容的丰富程度◆函数：当前帧与相邻帧的像素差值的绝对值之和，反映该帧与相邻帧的差异程度◆函数f：高斯函数

两张图像，有一定的重叠区域。寻找一条将重叠区域分开的分割线，完成拼贴。图像的拼贴AB核心算法的研究和实现AB

报告内容一、研究背景和意义二、画卷形式的预览和导航三、核心算法的研究和实现四、系统在OMAP平台上的实现五、实现结果展示六、总结

硬件平台系统在OMAP平台上的实现◆ARM+DSP双核架构◆先进的CortexA8结构◆DSP64x+内核◆2D/3D图形加速器评估板OMAP3530◆显示屏、鼠标、串口、音响、SD卡

操作系统◆Linux-Ubuntu10.04交叉编译链◆ARMGNU/Linux开发工具◆TIDVSDK◆Qt系统在OMAP平台上的实现开发环境

图像拼贴模块导航器主模块视频播放模块关键帧提取模块OMAP端鼠标键盘显示设备关键帧计算模块PC端视频文件关键帧信息文件存储设备系统设计框图 系统在OMAP平台上的实现数据流控制流

导航器主模块图像拼贴模块关键帧提取模块视频播放模块关键帧计算模块系统在OMAP平台上的实现◆核心，连接并控制各模块，同时响应鼠标事件◆计算视频关键帧◆读取并传递关键帧信息◆完成图像的拼贴任务◆完成视频文件的播放任务

软件结构系统在OMAP平台上的实现Qt◆前端图形界面◆进程间通信Mplayer◆视频播放软件

报告内容一、研究背景和意义二、画卷形式的预览和导航三、核心算法的研究和实现四、系统在OMAP平台上的实现五、实现结果展示六、总结

实现结果展示效果展示

实现结果展示效果展示

报告内容一、研究背景和意义二、画卷形式的预览和导航三、核心算法的研究和实现四、系统在OMAP平台上的实现五、实现结果展示六、总结

总结◆本参赛队实现了一种快速的图像拼贴算法，并将其与关键帧计算等算法相结合，在OMAP3530-EVM平台上实现了具有基于画卷形式的视频预览与导航功能的视频播放系统。 ◆这种形式的预览与导航更加直观、更加高效、更加美观。◆该系统还具有良好的模块化结构，便于在以后对系统进行升级、改造，增加其所适用的领域。

THANKYOU！