个人智能手持移动设备上的卡拉OK应用实现.ppt

个人智能手持移动设备上的卡拉OK应用实现 * 目录 研究内容 4 选题背景和意义 1 相关发展现状 2 研究基础 3 成果展示 5 * 选题背景和意义 市面上出现大量个人智能移动手持设备，这些设备具有小型个人PC的特性，且有可供第三方技术人员开发的工具和技术支持，因此，这些设备有很大的使用潜力需要发掘。 背景： 中国目前移动娱乐市场中，音乐服务的渗透率较高，但创新产品形式有待突破。借助于现有的音乐应用，用户只能把个人智能移动手持设备作为音乐播放器使用。此类应用中缺少了用户和应用之间的交互性，成为了打破这种音乐应用市场被动状态的瓶颈。 * 选题背景和意义 意义： 充分利用个人智能移动手持设备的强大功能，结合当前中国音乐娱乐市场最受大众喜爱的卡拉OK娱乐方式，开发出一款能够吸引用户，增加用户和应用之间的互动性，以此来更好的满足用户对音乐的需求的应用。 * 通过对当前个人智能移动手持设备上应用的分析研究发现：目前，在个人智能移动手持设备上的音乐应用大多是音乐播放器。虽然有部分应用宣称有卡拉OK功能，但实际上，这些应用只是实现了卡拉OK系统中，歌词和歌曲同步显示的功能；而无法实时的在原唱和伴音之间进行切换、无法同步获取用户的演唱数据。因此，这类应用不能算是真正实现了卡拉OK功能的应用。 相关发展现状 * 研究基础 为了实现卡拉OK边放歌曲边对用户演唱进行录音的功能，需要个人智能移动手持设备的操作系统支持多任务运行。并且，因为卡拉OK这种娱乐形式对实时性的要求很高，因此这种多任务运行的实现方式必须以多线程的方式实现。 通过对当前个人智能移动手持设备的操作系统进行分析，发现Android、Symbian系统能够满足上面所述的卡拉OK实时性要求。另外，强大的智能手机操作系统还提供了流式的处理音频数据的API，这使得后续为应用添加卡拉OK附加功能（如：在演唱者的演唱效果和原唱之间进行相似度评价）成为可能。 * 研究内容 应用程序架构设计研究 卡拉OK歌曲文件管理机制研究 卡拉OK歌曲演唱相似度评价算法研究 * 研究内容 应用程序架构设计研究 移动智能终端上两种多任务处理机制的对比 协同式多任务处理机制时序图 * 研究内容 应用程序架构设计研究 移动智能终端上两种多任务处理机制的对比 抢占式多任务处理机制时序图 * 研究内容 应用程序架构设计 * 研究内容 应用程序架构设计 * 研究内容 卡拉OK文件管理机制 这首“卡拉OK”歌曲的原唱音频数据文件 这首“卡拉OK”歌曲的去除掉原唱中的人声后的伴奏音频数据文件 这首“卡拉OK”歌曲的同步歌词数据文件 为“卡拉OK”演唱相似度评价功能预备的通过对这首“卡拉OK”歌曲的原唱音频数据进行音高提取算法后得到的音高序列数据文件 众多的为这首“卡拉OK”歌曲提供额外的媒体信息的数据文件。 * 研究内容 卡拉OK文件管理机制 54 50 49 54即“TPIT”是自定义的ID3标签帧，它表示存储内容是“卡拉OK”原唱音高序列信息数据的标签帧的ID； 00 00 21 DF即该ID3标签帧的数据的总长度：21 * FF + DF = 8671字节； 该帧的数据部分即为对“卡拉OK”原唱数据经过音高提取算法提取出来的音高序列信息。 54 50 49 54 00 00 21 DF 00 00 01 00 00 …… 自定义的存储有“卡拉OK”原唱音高序列信息的ID3标签帧 TPIT标签帧 原文内容及解释 二进制数据表示（16进制表示） 功能描述 名称 * 研究内容 卡拉OK文件管理机制 面对现今众多的音频数据格式，在本研究课题选取“卡拉OK”文件存储的音频数据格式时，主要是从移动智能终端对音频格式的支持、是否支持流式播放、该种音频格式下的数据压缩率、音质等几个方面来综合考虑的。 128 Kbps（相当于光盘音质） 恒定采样精度（CBR） 44100 Hz 立体声（双声道） 比特率 采样精度 采样率 声道数 * 研究内容 卡拉OK文件管理机制 * 研究内容 卡拉OK歌曲演唱相似度评价算法 * 研究内容 卡拉OK歌曲演唱相似度评价算法 基音提取 * 研究内容 卡拉OK歌曲演唱相似度评价算法 基音提取 * 研究内容 卡拉OK歌曲演唱相似度评价算法 基音提取 * 研究内容 卡拉OK歌曲演唱相似度评价算法 基音提取 * 研究内容 卡拉OK歌曲演唱相似度评价算法 基音提取