回覆：「關於互動設計未來的一篇簡短抱怨」

十多年前，有一篇名為《關於互動設計未來的簡短控訴》（A Brief Rant on the Future of Interaction Design）的文章，指出我們似乎正將所有設備設計成光滑的玻璃全能介面。

文章開篇描繪了人們對未來的種種預期：

當你看像漫威（Marvel）電影這類描繪近未來的作品時，基本上也是一樣的東西，只是換成了全息投影：

雖然 3D 很酷，但總覺得有些根本上的……悲哀與匱乏。

文章指出：

在我們思考應該如何與「未來工具」互動之前，讓我們先考慮一下工具究竟是什麼。

我喜歡這個定義：工具透過放大人類的能力來滿足人類的需求。

也就是說，工具將「我們能做的」轉化為「我們想做的」。一個偉大的工具在設計上必須兼顧這兩端。

在這篇控訴中，我不打算談論人類的需求。每個人都在談論那個；那是歷史上最受歡迎的單一對話話題。

我也不打算談論技術。從某種意義上說，那是簡單的部分，因為我們控制著它。技術可以被發明；而人性是我們與生俱來的。

我要談論的是那個被忽視的第三個因素：人類的能力。人們能做什麼。因為如果一個工具不是為了讓人使用而設計的，它就不可能是一個好工具，對吧？

再看看我們的「未來人」是用什麼來與他們的「未來技術」互動的：

你看到每個人都在用什麼互動嗎？這個「互動未來」的核心組件是什麼？它出現在每一張照片中！

這太棒了！我覺得手簡直太神奇了！

手能做兩件事。它們是兩件極其奇妙的事情，你每天的每一刻都依賴它們，而大多數「未來互動概念」卻完全忽略了這兩點。

手能感知事物，手能操縱事物：

去拿一本書。翻到某一頁。

注意你是如何透過每隻手的重量分佈，以及手指間紙堆的厚度，來感知你在書中的位置。翻一頁，注意如果你一次抓了兩頁，當你揉搓它們時它們會如何滑開，你又是如何察覺到的。

去拿一杯水。喝一口。

注意你是如何透過重量隨傾斜而產生的位移，來感知還剩多少水。

世界上幾乎所有的物體都提供這種回饋。這被視為理所當然，以至於我們通常甚至察覺不到。花點時間拿起你身邊的物體。像平時一樣使用它們，感受它們的觸覺反應——它們的質地、柔韌性、溫度；它們的重量分佈；它們的邊緣、曲線和稜角；以及當你使用它們時，它們在你手中的反應。

我們指尖擁有全身神經末梢最密集的區域是有原因的。這就是我們近距離體驗世界的方式。這就是我們的工具與我們對話的方式。觸覺對於數百萬年來人類稱之為「工作」的一切事物都至關重要。

現在，拿出你最喜歡的「神奇且革命性的技術設備」。使用一會兒。

你感覺到了什麼？感覺像玻璃嗎？它與你正在執行的任務有任何聯繫嗎？

我稱這種技術為**「玻璃下的圖片」**（Pictures Under Glass）。「玻璃下的圖片」犧牲了用手工作的所有觸覺豐富性，取而代之的是一個虛假的視覺門面。

捨棄觸覺而追求視覺真的那麼糟糕嗎？試試這個：閉上眼睛繫鞋帶。完全沒問題，對吧？現在，如果你的一隻手麻木了，你覺得你能把鞋帶繫得多好？或者甚至只是手指麻木？當我們用手工作時，觸覺是駕駛員，視覺則在後座提供協助。

「玻璃下的圖片」是一種永久麻木的互動範式。它是滴入腕部的諾佛卡因（Novocaine，麻醉藥）。它剝奪了雙手最擅長的事。然而，它卻是每一個「未來願景」中的主角。

對我來說，聲稱「玻璃下的圖片」是互動的未來，就像聲稱黑白攝影是攝影的未來一樣。這顯然是一種過渡技術。我們過渡得越快越好。

你能對「玻璃下的圖片」做什麼？你可以滑動它。

這是這項技術的基本手勢。沿著平面滑動手指。

在自然界中，幾乎沒有任何東西是我們以這種方式操縱的。

這幾乎就是我能想到的全部了。

那麼，我們是如何操縱事物的呢？事實證明，我們的手指擁有極其豐富且具表現力的動作庫，我們在不假思索的情況下不斷地即興發揮。在以下每張照片中，請注意所有手指的位置、什麼東西在對什麼施加壓力，以及物體的重量是如何平衡的：

其中許多是四種基本抓握方式的變體。（如果你喜歡這類東西，你應該讀讀 John Napier 那本精彩的書。）

假設我給你一個罐子讓你打開。你實際上會在兩種不同的抓握方式之間切換：

你打開過的每一個罐子都經歷過這種切換。不僅沒人教過你，而且你可能從未意識到自己在這樣做。這才叫直觀的介面，不是嗎？

---

我幾年前讀到這篇文章，然後……大概以為會有人負責讓「非手指滑玻璃的 UI」成真。從那以後，我眼睜睜看著汽車把旋鈕之類的東西換成了「更多的玻璃」，感到很難過。我也越來越清楚，我和許多人都對閃亮的螢幕上癮了。

值得注意的是，將更多 UI 設備做成螢幕是有充分理由的：螢幕比硬模製的按鈕和小部件靈活得多。你可以製作執行各種任務的 App，而不僅僅是一件事。

有一種想法是我們可以回歸單一用途設備，在那裡你不需要所有的靈活性。這對我有吸引力，但我真的看不出這如何能成為大眾社會採納的平衡點。筆記型電腦太好用了。

但是，似乎可以有某種……我不知道，「基於智慧油灰（Smart Putty）的設備」，它可以真正地將自己重塑為各種小旋鈕和按鈕？

昨天我還在想：「天哪，某個 LessWrong 的傢伙，如果他出於某種原因不擔心 AI 的生存風險，但又雄心勃勃，應該把這當作他的人生使命。」

然後，我立刻想到：「喔，對了，UI 互動的未來已經來臨，它就是 LLM 代理（Agents）。」而且，下一個真正的 UI 大事件將會是一個以音訊為主的設備，讓你向 AI 索取東西，然後它們會準確地給你所要求的，並預測你下一步要問什麼。這雖然沒有利用到你作為人類在「手」方面的種族天賦，但確實利用了你在耳朵、嘴巴和社交互動方面的種族天賦，這也相當不錯。

但是，智慧油灰的東西聽起來還是很酷，而音訊 AI UI 仍然讓我對錯過更多觸覺體驗感到有些遺憾。

所以，誰來著手做一下吧。

我不指望這會很快，而且即將到來的 AGI 局勢也讓優先順序變得有些混亂（可能 AI 會以某種方式提供幫助，但這確實需要透過新型材料科學與原子世界打交道，我預計這將是加速最慢的事情之一）。

原文章在結尾提到，從某種意義上說，iPad 在 1968 年就已經被「發明」了，只是花了 40 年才實現：

1968 年——在微處理器發明的前三年——艾倫·凱（Alan Kay）偶然發現了唐·比策（Don Bitzer）早期的平板顯示器。它的解析度是 16 像素乘以 16 像素——比他們之前 4 像素乘以 4 像素的顯示器有了顯著的改進。

艾倫看著那 256 個發光的橙色方塊，回到家，拿起一支筆，畫了一張該死的 iPad 草圖。

然後，他在數十年的開創性研究中追逐這個目標，其中大部分研究成就了你現在用來閱讀這篇文章的硬體和軟體。

這就是我所說的那種雄心勃勃、長遠的願景。「玻璃下的圖片」已經是過時的新聞了。讓我們開始動手吧。