滑鼠再戰10年，但新的人機介面蓄勢待發

今年 7 月 4 號，科技界公認的滑鼠之父 Douglas Engelbart 在家中辭世，這位前瞻的科學家不僅可以說是革新了人機對話模式，發明了滑鼠，他的研究還促進了諸如 hypertext、圖形化使用者介面等技術的發展。

1973 年Xerox PARC 研究中心推出的 Alto 電腦首先使用了滑鼠，而滑鼠的真正原型早在 1964 年就已經於 Douglas Engelbart 之手誕生，距今已經差不多半個世紀了。經歷這麼多年的發展，滑鼠的技術也日趨完善，似乎在功能上到達了一個瓶頸。雖然筆記型電腦在形態上並不一定需要滑鼠，但我們可以認為觸控板仍然是另一種形態的滑鼠。

在統治了電腦對話模式這麼多年並且進步開始乏力的滑鼠之外，我們也在探尋著另外一些人機對話模式，觸控螢幕無疑是其中一種，也是我們現在切實可以看到的，但未來的多樣性遠不止如此。

Leap Motion 可能是大家熟知的一款手勢操控設備，而這款設備背後所代表的的手勢操控在未來很可能是和滑鼠抗衡一種方式，目前在這個領域進行研究的團隊可不少。

▲作為 PC 端人機交互的最主要方式，鍵盤和滑鼠這種已經存在了近二十年。

比如說蘋果最近申請了一個關於識別觸控螢幕表面上方手勢的系統的專利，運用這個系統可以識別手指的擊打捏合動作，進而操縱虛擬的 3D 物件。這樣的場景我們在《阿凡達》、《鋼鐵人》或者再早一點的《關鍵報告》等科幻電影中已經見過許多次了。

John Underkoffler 就是《關鍵報告》中負責手勢計算場景的幕後成員，而更正式的身份則是 Oblong 公司的首席科學家，他目前的工作就是把科幻電影《關鍵報告》中的場景帶到現實中來。

在 Oblong 的波士頓實驗室，Oblong 產品開發部的副主管 Carlton Sparrell 面前樹立著三個巨大的顯示螢幕，他大拇指翹起，食指向前，做出一個「手槍」的的姿勢，隨即螢幕上出現隨著手指移動而移動的游標，Carlton Sparrell 把游標懸停在物件之上，按下大拇指選定並移動，物件便移動到了另外一個螢幕上去了，抬起大拇指完成釋放操作。

▲Oblong g-speak

Underkoffler 認為  Sparrell 剛才演示的手勢操作有潛力影響人機對話模式，自圖形化使用者介面出現後，已經有 30 年沒有在使用者介面思維和使用者介面技術上形成重大突破了。Oblong 的主要產品名為  g-speak，一個手勢識別軟體平台。原理則是在手套的手指和背面部分貼上標籤，而室內的相機追蹤光線在標籤上的折射來定位手和手指的x、y 和 z 座標。

Oblong 的另外的一套系統則摒棄了手套，而是採用了微軟 Kinect 中一樣的 Primesense 相機追蹤手勢，不過 Underkoffler 說這套追蹤紅外射線的系統目前可靠度並不算高。

除了上述兩者之外，Mezzanine 是一款針對小型或其他大型會議的空間作業系統，可以透過一根「魔棒」、陀螺儀和超音波感應器在螢幕上進行定位選擇等操作。而會議參與者則可以通過app在電腦平板手機等設備上協同操控螢幕。透過這些設備，每個人都可以對螢幕上資料進行操控，不論是加入新資訊、Hihglingt某些內容還是放大、刪減和修改內容，也就是說，每個人都可以真正成為會議的參與者。

▲Mezzanine

Underkoffler 如此比較手勢和滑鼠的等級，手勢是人腦獲取處理資訊的更高級方式，相比於滑鼠，手勢操作在研究處理諸如蛋白質的結構模型、人腦掃描或者城市全景的時候更具優勢，因為我們所見的東西更多更具體了。而微軟自然互動研究部門的 Andy Wilson 也持有類似看法，他認為手勢操作可以直觀地處理現實世界，一旦用了滑鼠，這種直觀的感覺就會在圖形化使用者介面消失掉。

Andy Wilson 正在研究的項目則是一個穿戴式觸控投影機，運用傳感系統，投影機可以檢測到使用者手部在投影圖像上的活動並在電腦上回應操作，也就是說在牆壁、布幕等可用的投影表面上建立一個虛擬的觸控螢幕。

除了手勢之外，眼球追蹤，語音辨識等等也成為了新的對話模式，這些技術目前都是出於興起的階段，至於未來的對話模式，Underkoffler 做了一個斷言：

「未來（的對話模式）將會呈現出美好的多元化狀態，你可以根據任務選擇正確的工具，但我認為鍵盤在很長的一段時間裡不會被替代，因為它在文本領域確有長處。」

在這個將要來臨的交互革命中，幕後英雄則是感測器技術的進步，而多元化的設備以及對話模式今後也將為不同的應用場景和不同的人群提供便利，語音辨識為司機解放了雙手，而手勢操作在以後的 3D 設計等領域發揮重要作用，眼球識別成熟以後則可以為部分殘疾人提供方便。

至於滑鼠和圖形化使用者介面已經深深地影響了幾代人，慣性和使用習慣以及仍然很廣的適用範圍決定了它仍將在歷史舞台上演出，在電競賽場上看到選手們人鼠合一屢屢上演十字圍殺等精彩的鍵鼠操作時，也經常感歎這種對話模式的魔力與潛力。誠如開頭我們悼念滑鼠之父 Douglas Engelbart 一樣，即使未來某一天滑鼠真的被更先進高效的對話模式取代，但它在歷史上的地位將永存。 

延伸閱讀：

「滑鼠之父」Doug Engelbart 辭世

滑鼠鍵盤可以扔了！3Gear System：比 Leap Motion 更靈活精準的手勢識別互動

鋼鐵人高科技實驗室 3D 體感操作有望成真，Elon Musk 透過 Leap Motion 和 Oculus Rift 做到了

第一台整合 Leap Motion 的筆記型電腦 HP Envy 17 Leap Motion SE 誕生了