多媒体信息存取系统课件.ppt

多媒體資訊存取系統8.1多媒體概述多媒體概念多媒體技術：以數位化為基礎，能夠對多種媒體資訊進行採集、編碼、存儲、傳輸和表現，綜合處理多種媒體資訊並建立有機的邏輯聯繫，集成為一個存取系統使之具有良好交互性的技術。多媒體系統：是一具由多媒體終端設備、多媒體網路設置、多媒體服務系統、多媒體軟體及有關媒體數據組成的有機整體。

第8章多媒體資訊存取系統多媒體資訊存取系統的特徵?資訊載體的多樣性?交互性?即時性?集成性

8.1.2常見媒體元素多媒體元素指多媒體應用中可以顯示給用戶的媒體形式。目前，常見的媒體元素主要有文本、圖像、聲音、動畫和視頻。音頻影響數字聲音波形品質的主要因素有三個採樣頻率採樣精度通道數

8.1.2常見媒體元素圖像圖像處理一般要考慮三方面因素：解析度圖像灰度圖像檔大小視頻在視頻中有如下幾個重要的技術參數數據量圖像品質

8.2多媒體資料庫結構與標引

8.2.1多媒體資料庫結構目前常用的多媒體數據存儲模型面向對象的關係數據模型純粹面向對象模型關係+面向對象模型8.2.2多媒體資料庫標引多媒體資訊標引的特殊性標引對象的特殊性：數據量大，更新速度快；內容豐富，語義關聯；時空相關性。標引策略的特殊性

8.2多媒體資料庫結構與標引依外在特徵的標引法----標籤法圖像、圖像的標題、繪製者與收藏者、音樂的曲調名稱、詞曲作家、演奏者或演奏團體、動畫的策劃、編排者等。以內容分析為主的標引方法編碼系統法自由文本法特徵描述法全方位語義分析法多媒體資料庫標引應注意的問題：標準化、多樣化、集成化、網路化

8.3基於內容的多媒體資訊檢索兩種多媒體資訊檢索途徑基於外部特徵的檢索基於文本描述的檢索8.3.1基於內容的多媒體檢索對多媒體資訊檢索需要借助電腦從多媒體資訊的底層到高層進行處理、分析和理解，以有效獲取其內容特徵，並根據內容實現方便快捷的檢索，稱之為基於內容的多媒體資訊檢索基於內容的檢索主要是利用媒體對象的語義、視覺特徵、聽覺特徵和文本資訊來進行檢索。

8.3基於內容的多媒體資訊檢索8.3.2基於內容的多媒體資訊檢索特點提供重建查詢機制查詢方式的交互性相似度檢索多媒體同步檢索技術多層次檢索資訊

8.3基於內容的多媒體資訊檢索8.3.3基於內容檢索系統的基本框架目標標識特徵抽取資料庫查詢介面檢索引擎索引/過濾

8.3基於內容的多媒體資訊檢索8.3.4基於內容檢索的關鍵技術資訊模型和表示檢索技術查詢語言資訊壓縮和恢復資訊存儲管理多媒體同步技術

8.4基於內容的音頻檢索8.4.1音頻內容分析音頻特徵的提取音頻時域特徵的提取音頻頻域特徵的提取音頻時頻特徵的提取音頻片段特徵提取音頻分割與識別

8.4基於內容的音頻檢索8.4.2基於內容的音頻資訊檢索基於片斷的音頻檢索基於片段的音頻檢索建立音頻片段相關回饋機制音樂檢索三個步驟建立特徵音樂資料庫進行音調跟蹤音樂檢索

8.5基於內容的圖像檢索8.5.1基於內容的圖像檢索概述基於內容的圖像檢索原理基於內容的圖像檢索系統?查詢模組利用採樣圖像利用範例圖像利用局部圖像利用繪製圖像利用圖示利用（概括）描述

8.5基於內容的圖像檢索?描述模組?匹配模組?提取模組?驗證模組和技術

8.5基於內容的圖像檢索8.5.2基於內容的圖像檢索方法基於顏色特徵的圖像檢索方法基於紋理特徵的圖像檢索基於形狀特徵的圖像檢索基於空間關係和綜合特徵的圖像檢索

8.5基於內容的視頻檢索視頻存取系統的基本特點視頻分割自動分割方案半自動分割方案視頻索引基於注釋的索引基於特徵的索引基於特定領域的索引

8.7多媒體資訊檢索的局限性與發展方向8.7.1多媒體資訊檢索的局限檢索效果不理想用戶查詢介面單一圖像特徵資訊表示與檢索不完善資訊的自動加工與人工標引方面存在困難

8.7多媒體資訊檢索的局限性與發展方向8.7.2多媒體資訊檢索的發展方向人機結合高層語義和底層特徵之間的差距面向萬維網多模式融合分析性能評價和測試集