人機交互論文.doc

武漢工程大學 計算機科學與工程學院課程報告課程名稱： 人機交互的軟件工程方法 報告題目： 人機交互的進展及未來 學生學號： 0805060313 專業(yè)班級： 08雙特3班 學生姓名： 劉云 學生成績： 2011年6月報告題目 人機交互的進展及未來劉云（0805060313）（武漢工程大學 計算機科學與工程學院 軟件工程專業(yè) 08級3班）摘 要：隨著以計算科學為核心的人機交互，虛擬現實技術的不斷發(fā)展，人機交互技術產生了巨大的影響，并且還將繼續(xù)影響全人類的生活。本文敘述了人機交互的最近進展和發(fā)展歷史，闡述了它們的主要內容，尤其是我國的一些優(yōu)秀成果 ,包括多通道交互、交互模型、虛擬現實和三維交互、可穿戴計算和移動計算、智能空間、標準化 ;并結合我國的實際情況，指出了我國人機交互的發(fā)展方向，論述了無所不在計算等對人機交互提出的未來所面臨的挑戰(zhàn)。一個好的用戶界面不僅是要滿足用戶對功能的需求，還要讓用戶能夠簡單、愉悅的使用。據現在統計，語音無庸置疑地成為人與計算機等信息設備進行交互的最重要的人機界面。關鍵詞:人機交互；虛擬現實技術；進展；歷史；用戶界面自1946年世界上第一臺數字計算機eniac誕生以來，計算機技術取得了驚人的發(fā)展。計算機不僅作為一種普通的計算工具為人們所使用，而且在新的產業(yè)革命中，與通信技術、新材料技術等結合在一起，扮演著一個重要的角色?，F代計算機已經應用在社會生活的各個領域，它可以代替人做大量重復性的工作，它在這方面的能力，有的已大大超過了人。但計算機仍然是一種工具，一種高級的工具，它是人腦、人手、人眼等的擴展，因此它仍然受到人的支配、控制、操縱和管理?，F在越來越多，各式各樣的技術和產品在不斷的淘汰和更新，總結它們盛、衰的緣由，可以得出這樣一個規(guī)律，即：凡有助于縮小人機隔閡，有助于建立和諧人機環(huán)境的理論、方法、技術和產品都具有強大的生命力。例如，大規(guī)模并行處理（massively parallel processing）、多媒體（multimedia）、開放系統（open system）、面向對象（object-oriented）、網絡計算（network computing）和嵌入式計算（embedded computing）等，均因為在建立和諧人機環(huán)境方面成效顯著，而成為當今的主流技術。所謂建立和諧的人機環(huán)境，決不僅限于設計并實現一個友好的人機界面和靈活的交互功能，其最終目的是：從人在應用計算機的過程中增長了知識，發(fā)展到計算機在被人應用的過程中優(yōu)化了功能：從計算機系統“初解人意”逐步發(fā)展成計算機系統能夠“善解人意”。用戶在開始時都極力追求“更快、更高、更全|”的計算機，但隨著信息技術的發(fā)展和信息應用系統的普及，用戶已經致力于尋求更為“好用、適用、易用”的計算機的“學問”一起增長，這種“人機智能共增”的技術水平和應用結果是計算機技術和人工智能技術發(fā)展到一個新的階段的重要標志之一。在以計算機或類計算機為核心的電子產品時代，人機交互技術正成為各國研究的重點之一。計算機發(fā)展的早期，人機交互的主要特點是人去適應現在看來是十分笨拙的計算機，例如多數計算機是二進制機器，人們就使用二進制的機器語言編寫程序地，人們用各種開關、指示燈、卡片上的孔來表示數據或指令進行人機交互。采用依賴于機器的方法來使用計算機是十分不方便的，但當時計算機尚未大批生產，只是在軍事或研究部門單獨研制使用，而且多數計算機的使用者往往就是設計者本人，或者在設計者的單位內使用。那么人機交互究竟是什么呢？所謂人機交互（human-computer interaction, hci），是研究人、計算機及它們間相互影響的技術。而用戶界面是人與計算機之間傳遞、交換信息的媒介和對話接口，是計算機系統的重要組成部分。人機交互和用戶界面有緊密的聯系，但又是兩個不同的概念：前者強調的是技術和模型，后者是計算機的關鍵組成部分。計算機是20世紀的一項偉大發(fā)明，它對21世紀人類生活的各個方面將帶來深刻影響。計算機的發(fā)展歷史，不僅是處理器速度、存儲器容量飛速提高的歷史，也是不斷改善人機交互技術的歷史。人機交互技術，如鼠標器、窗口系統、超文本、瀏覽器，已對計算機的發(fā)展產生了巨大的影響，而且還將繼續(xù)影響全人類的生活。人機交互技術是當前信息產業(yè)競爭的一個焦點，世界各國都將人機交互技術作為重點研究的一項關鍵技術。美國總統信息技術顧問委員會的“21世紀的信息技術報告”中將“人機交互和信息管理”列為新世紀4項重點發(fā)展的信息技術（還包括軟件、可伸縮信息基礎設施、高端計算）之一，它的目標是研制“能聽、能說、能理解人類的計算機”，并指出“現在美國40%以上的家庭擁有計算機，然而，對于大多數美國人來說，計算機仍然難以使用。調查，由于不理解計算機正在做什么，用戶浪費了12%以上的上機時間。更好的人機交互將使計算機易于使用，并使使用者更愉快，因而可提高生產率，考慮到現在經常使用計算機的人數多，研制這種計算機的回報將非常巨大。最理想的是，人們可以和計算機交談，而不像現在這樣僅限于窗口、圖標、鼠標，指針（wimp）界面”。微軟中國（后改為亞洲）研究院從成立一開始，就將新一代人機交互技術作為其主要研究方向。acm圖靈獎1992年獲得者、微軟研究院軟件總工程師butler lampson在題為“二十一世紀的計算研究”報告中指出“計算機有三個作用：第一是模擬；第二個是計算成本機可以幫助人們進行通信；第三個是互動，也就是與實際世界的交流”；“人們希望計算機能夠看、聽、講，甚至比人做得更好，并能夠進行實時處理”。我國國家自然科學基金會、國家重點基礎研究發(fā)展計劃（973）、國家高技術研究發(fā)展計劃（863）等項目指南中，均將先進的人機交互、虛擬現實技術列為予以特別關注的資助項目。當前互聯網、虛擬現實、移動計算無所不在計算等飛速發(fā)展，對人機交互技術提出了新的挑戰(zhàn)和更高的要求，同時也提供了許多新的機遇。計算機系統的擬人化，以虛擬現實為代表；計算機的微型化、隨身化和嵌入化，以手持電腦、智能手機為代表，將是計算機兩個重要的應用趨勢。人機交互技術是其中的瓶頸技術。以人為中心、自然、高效將是發(fā)展新一代人機交互的主要目標。人類自然形成的與自然界溝通的認知習慣和形式必定是人機交互的發(fā)展方向?！蔽④泟?chuàng)始人比爾.蓋茨如是說。因此，研究者們也正在努力讓未來的計算機能聽、能看、能說、能感覺。過去，一直都是人類去適應計算機，學習計算機語言；未來，計算機將朝著適應人類的方向發(fā)展，計算機要理解人類的語言和動作。在人機交互的發(fā)展中，一大批專家為此做出了卓越的貢獻，下面是最有影響的一些事件和成果：（1）1945年，美國羅斯福總統的科學顧問bush(18941974)在大西洋月刊上發(fā)表的“as we may think”的著名論文，提出了應采用設備或技術來幫助科學家檢索、記錄、分析及傳輸各種信息的新思路和名為“memex”的一種工作站構想，影響著一大批最著名計算機科學家。（2）1963年，美國麻省理工學院sutherland開創(chuàng)了計算機圖形學的新領域，并獲1988年acm圖靈獎。他還在1968年開發(fā)了頭盔式立體顯示器，成為現代虛擬現實技術的重要基礎。（3）1963年，美國斯坦福研究所的engelbart發(fā)明了鼠標器，他預言鼠標器比其他輸入設備都好，并在超文本系統、導航工具方面取得了杰出的成果（augmented human intellect project），獲1997年acm圖靈獎。10年后，鼠標器經過不斷地改進，成為影響當代計算機使用的最重要成果。（4）20世紀70年代，當時在xerox研究中心的alan kay提出了smalltalk面向對象程序設計等思想，并發(fā)明了重疊式多窗口系統，后經蘋果、微軟、麻省理工學院等單位的不斷研究和開發(fā)，形成了目前廣泛使用的圖形用戶界面的標準范式。（5）1989年，tim berners-lee在日內瓦的cern用html及www網，隨后出現了各種瀏覽器（網絡用戶界面），使互聯網飛速發(fā)展起來。（6）20世紀90年代，美國麻省理工學院negroponte（他早在30年前提出了“交談式計算機”概念）領導的媒體實驗室在新一代多通道用戶界面方面（包括語音、手勢、智能體等）做了大量開創(chuàng)性的工作。他是暢銷書數字化生存（being digital）的作者。（7）20世紀90年代，美國xerox公司parc的首席科學家mark weiser(19521999),首先提出“無所不在計算（ubiquitous computing）”思想，并在此領域估了大量開拓性的工作。下面我們來看看人機交互的進展：（1）自然、高效的多通道交互多通道交互（multi-modal interaction, mmi）是近年來迅速發(fā)展的一種人機交互準則，也推動了互聯網時代信息產業(yè)（包括移動計算、移動通信、網絡服務器等）的快速發(fā)展。mmi是指“一種使用多種通道與計算機通信的人機交互方式。通道（modality）涵蓋了用戶表達意圖、執(zhí)行動作或感知反饋信息的各種通信方法，如言語、眼神、臉部表情、唇動、手動、手勢、頭動、肢體姿勢、觸覺、嗅覺或味覺等”，采用這種方式的計算機用戶界面稱之為“多通道用戶界面”。（2）人機交互模型和設計方法模型在人機交互領域中十分重要，用得很多，類型也很多。一類是從系統的結構出發(fā)，討論界面在系統中的地位和分解，我們稱它為“界面結構模型”。其典型的例子是將界面分成三部分（表示部件、對話控制、應用接口）的seeheim模型。另一類是從系統設計的角度來了解用戶的“用戶特性模型”。它分析不同用戶的特點，以提高系統的針對性和適應性，增強界面?zhèn)€性化和提高效率。其典型例子是按照用戶對系統、領域的這里討論的是從認知科學出發(fā)，分析用戶如何和計算機互動的“人機交互模型”，即行為模型。任務分析模型就是其中的一例。近年來，國際上已廣泛采用“以用戶為中心的設計（user centered design, ucd）方法，該方法已被國際標準化組織機構（iso）作為正式標準以人為中心的交互系統設計過程而發(fā)布。ucd方法的主要特征是用戶的積極參與，對用戶及其任務要求的清楚了解；在用戶和技術之間適當分配功能；反復設計解決方案；多學科設計，其主要設計活動是了解并確定使用背景；確定用戶和組織要求；提出設計解決方案；根據要求評價設計。在具體交互設計中，目前廣泛使用carroll的“基于劇情的設計（scenario-based design）方法。（3）虛擬現實和三維交互二維圖形用戶界面的一個發(fā)展方向是在桌面上顯示三維效果，同時虛擬現實技術的一個重要特征是它的立體的沉浸感，并構造三維用戶界面（3d-ui），人們先后發(fā)明了立體眼鏡、頭盔式顯示器、雙目全方位監(jiān)視器、墻式顯示屏的自動聲像虛擬環(huán)境等。它們已廣泛用于不同需求、不同平臺的虛擬現實系統中。（4）智能空間及智能用戶界面智能空間（smart space）是指一個嵌入了計算、信息設備和多通道傳感器的工作空間。由于在物理空間中嵌入了計算機視覺、語音識別、墻面投影等mimi能力，使隱藏在視線之外的計算機可以識別這個物理空間中人的姿態(tài)、手勢、語音和上下文等信息，進而判斷出人的意圖并做出合適的反饋或動作，幫助人們更加有效地工作，提高人們的生活質量。這個物理空間可以是一張辦公桌、一個教室或一幢住宅。由于在智能空間里用戶能方便地訪問信息和獲得計算機的服務，因而可高效地單獨工作或與他人協同工作?；仡櫲祟惖臍v史,人類生存空間中的信息最開始是存貯在紙張、大腦、物體等介質上。是計算機構建了一個01空間，它像一個有強大引力的黑洞，將人類生存空間中的各式各樣的信息都逐漸吸進去變成010101，黑洞用這些010101通過一些基本運算產生新的010101, 并可將這些010101組成一些虛構的圖象呈現在人們面前,甚至將人類生存的世界也開始建成010101的代碼。人機交互研究已經歷了兩個界限分明的時代，第一代是以文本為基礎的交互, 如菜單、命令、對話等，難用且不靈活。第二代則是直接操作界面，它引出更自然的視覺通信交互。是交互多媒體集成方法，需要大量使用語言，自然語言和高級圖形，也可使用其它交互媒體，如人的動作、手勢和三維圖像等。 隨著虛擬技術的發(fā)展,在某一天圖形用戶界面也會被新的虛擬界面淘汰,新一代的用戶界面將向用戶提供身臨其境和多感覺通道體驗,在你煩惱的時候，想吹海風、聽海浪、看雪山、小橋流水、將臥室的窗戶推開，而不論你在哪里！計算機都將會為你完成這一切，計算機模擬人類感覺的世界而生成一種世界，這里的“世界”是指具有真實感的立體圖形，它既可以是某種特定現實世界的真實再現，也可以是純粹構想的世界。操作者可以通過視覺、聽覺、觸覺、力覺等與之交互，從而能產生“身臨其境”場景。簡介: 這種虛擬的現實是以用戶對界面的需求變化為出發(fā)點，使用戶界面的外在形式和內部機制能符合不同用戶的需要，這就是以用戶為中心的設計思想。非特定人的連續(xù)語音識別技術將使計算機能理解人們的要求，是一種重要的輸入界面和手段?，F在我們已經有的魚眼技術使屏幕觀察（或光標）位置附近的內容被放大，便于用戶觀察。在傳統的人機系統中，人被認為是操作者，人去適應機器；在一般的人機系統中，人被稱為用戶，能與機器對話，但無主動控制能力；而在虛擬現實系統中，人才是主動的參與者，機器將對人的各種動作做出反應。另外計算機可以充分利用它的感覺和運動通道的互補特性來捕捉用戶的意向，從而增進人機交互中的自然性。人的感覺通道有視覺、聽覺、觸覺、嗅覺和平衡等；人的運動通道有手、嘴、眼、頭、足及身體等?，F在，計算機操作時，人的眼和手十分累，效率也不高。若將聽、說和手、眼等協同動作，采用多通道、以自然方式交互，可以實現高效人機通信，也可以由人或機器選擇最佳反應通道，從而不會使某一通道負擔過重。并且由于人們的動作或思想往往并不很精確，計算機應該理解人的要求，甚至于糾正人的錯誤，而不需要人通過鍵盤或者鼠標做出精確的操作。實現: 一個未來的界面能使最終用戶能完全投入于自己要完成的工作，無需耗費精力于界面操作，甚至進入一個同現實完全一樣的虛擬世界，為此模型的建立至關重要。需要利用虛擬現實系統及人機界面的基本理論知識、多通道用戶界面的關鍵技術、vrml、軟件工程，知識工程的原型方法及其它相關知識來進行。使用:虛擬現實是針對某一類型的人而設計的,計算機預先記錄了用戶需要進行的操作,并且在人活動的空間自動感應,接受用戶發(fā)出的命令,人不再需要對著電腦屏幕,用鼠標鍵盤等工具發(fā)出命令.只需要一個手勢甚至只是腦子里面形成這個命令,計算機就可以智能的作出準確的操作,隨著技術的發(fā)展,電腦甚至可以直接從人的大腦提取命令信息,不需要任何介質,計算機通過檢測人的腦波等信號,形成命令,完成操作,并且將結果反饋到人的大腦。除了上述的虛擬技術以外，據現在統計，在日常生活中人類的溝通大約有75左右是通過語音來完成的，語音無庸置疑地成為人與計算機等信息設備進行交互的最重要的人機界面。語音識別技術的研究工作始于20世紀50年代，經過近半個世紀來的發(fā)展，語音識別技術開始走出實驗室，進入到社會生活的各個領域。語音聽寫技術（即大詞匯量連續(xù)語音識別技術）始終是語音識別研究的核心問題，基于這一技術的產品也是語音識別系列技術產品在大眾中知名度最高的一種。這個領域國內外已經出現了一些商業(yè)化的產品，其中比較有代表性的是ibm公司的via voice和dragon公司的naturally speaking。語音識別技術的另一重要應用是用在各種產品的命令導航中，它