多模式使用者介面系统之开发以急诊检伤为例.doc

多模式使用者介面系統之開發：以急診檢傷為例 沈鈺翔 陳櫻鐙 朱原嘉 張博論 國立陽明大學衛生資訊與決策研究所 normansheng1211@.tw　genego@.twyuanchia@　polun@.tw 論文摘要 圖一Logitech?Cordless Freedom Headset Model No. 8701 圖二 SONY PCV LX900 本研究目的整合語音與觸控技術以急診檢傷為例，透過語音與觸控技術結合，提供一套適用於急診檢傷之系統，協助護理人員更精確辨識病人病情，與所需要的照顧。所開發之系統包含大而清楚的觸控介面、可免用手及眼的語音輸入，並使用簡單的規則，透過使用者輸入的一些檢傷資料來提供檢傷分級、分類、分區的建議值，可作為護理同仁分類的參考依據，進而達到減少人工作業、增加病患醫療資訊的正確性及即時性。更重要的是藉此機會建立語音與觸控技術應用於急診檢傷的雛形架構。並請三十名急診護理同仁協助測試，藉此為多模式使用者介面導入護理資訊系統提供先導測試的經驗。本研究開發環境為微軟Visual Basic 6.0、Speech SDK 5.1、無線耳機麥克風Logitech cordless freedom headset以及大尺寸觸控螢幕SONY PCV LX900，所開發之系統包含大而清楚的觸控介面、可免用手及眼的語音輸入，並使用簡單的規則，透過使用者輸入的一些檢傷資料來提供檢傷分級、分類、分區的建議值，可作為護理同仁分類的參考依據。此系統共有26個畫面，語音詞彙338個。評估結果顯示若是採用語音觸控混用之多模式介面，可比單純語音介面有更高之容錯性。比較語音與觸控，雖然觸控正確率高，但語音平均速度快。比較多模式、單模式以及舊系統接受度，護理同仁最喜愛多模式介面開發一多模式互動急診檢傷輔助系統，而本研究所建置之系統平均每106秒可以完成一次檢傷作業，於63分貝之噪音環境下可達94%的語音辨識率。 關鍵字 多模式使用者介面 (Multi-Modal Interaction)、急診檢傷(Emergency Triage) 背景介紹 為了改善醫療品質和效用近年來觸控、語音辨識技術的研究相當的普遍，許多於大學的實驗室不斷的發展更好用更有效率的語音識別技術：如麻省理工學院的電腦科學實驗室的對話語言系統(Spoken Language System)[1]小組開發了一系列的語音系統，使用者可以透過電話用說的跟電腦對話來獲得資訊；而同於麻省理工學院的媒體實驗室（Media Lab）[2]則致力於研發滲透式計算（pervasive computing）環境，語音為其重要的人機介面之一。史丹福大學的Media X實驗室則開發對話控制系統(Dialog Control System)[3]，希望開發流暢(seamless)自然(transparent)的會話介面；柏克萊大學的使用者介面研究小組(Group of User Interface Research，GUIR)[4]開發了一個名為SUEDU的軟體主要是希望能夠提供一個開發語音應用程式的環境，透過這個整合式的開發環境，開發者可以很輕鬆的開發語音應用程式。還有許多國內外的研究單位也都持續不斷的研究語音科技相關的議題。 一、開發原則 為了讓系統能相似於先前護士們所操作的舊系統，達到可用性中的「跟原來工作相像」及「容易學習」之原則[5]，本研究先對護士們所使用的舊3270終端機檢傷系統進行分析，以護士們熟習之系統架構為基礎，重新其使用者介面。而於圖形化使用者介面之設計，參考其新版PDA系統之設計[6]，盡量採取原先使用者熟習之互動模式，但調整為適合大型觸控螢幕之設計。語音介面的分析則請護士協助分別於白天班、大夜班、小夜班對檢傷的實際情況進行錄音，以分析實際為病患進行檢傷時語音互動的情形，找尋最佳的語音介面模式。系統開發時則採用雛形開發法（prototyping），持續的與護理同仁進行修改與討論。 二、開發工具 本系統所使用的程式開發工具為微軟公司之Microsoft Visual Basic 6.0，搭配其語音辨識開發工具Microsoft Speech SDK 5.1 及簡體中文語言包[7]。無線耳機麥克風則採用羅技公司的Logitech Cordless Freedom Headset，如圖一所示，觸控螢幕桌上型電腦為SONY PCV LX900 其搭載Intel Pentium III 1GHz 、128 RAM 、以及十七吋觸控螢幕[8]，如圖二所示。 三、多模式互動設計 本觸控螢幕的設計依照使用者的需求，設計出大螢幕，大按鈕，大字形的視覺介面。螢幕中所有的方框都是可以觸控的按鍵，左上角第一塊桃紅色的部份為基本資料區，是由急診掛號區所傳送過來的資