這支逗貓用的激光筆，真的能根治你的健忘症？

每次出門，總有一種“忘了點什麼東西”的感覺，最慘的是這種感覺通常還都是對的。
作為一名“遺忘·丟三落四·找不到東西·啥都能忘·綜合徵”晚期患者，我也嘗試過很多種提醒事項的辦法：記事本、App、每天厚着臉皮提醒別人提醒我，情況略有改善，但終究無法根治。

來自康奈爾大學和斯坦福大學的研究人員最近拿出了他們的解決方案——一隻智能激光筆。

真正智能的激光筆


看到這裏養貓一族肯定要跳出來了：“激光筆？那不是拿來逗貓貓狗狗的麼？”沒錯，這次換成了人，還要在普通激光筆上面加上了“新功能”：

引用拍攝、學習人的日常作息習慣，然後利用激光筆來提醒人有可能遺忘的東西。

研究人員將這個項目命名為 Watch-Bot，實際的產品形態更像是一個 加了三腳架的 Kinect，只不過在 Kinect 上面多了一個綁着激光筆的雲台相機，然後在三腳架的下面還隱藏着一台筆記本。


看上去元件並不複雜，那麼 Watch-Bot 究竟是怎麼實現提醒人有可能遺忘的東西呢？
首先將這一套東西放置在廚房和辦公室裏一個星期，期間 Kinect 一直在運作，和電腦一起分析人類在這個視角內的動作。最終，它收集了 458 個正常人類的活動視頻，以及 21 個不同的動作和 23 個不同類型的對象，其中有 222 個活動視頻中（實驗人員故意地）忘做了什麼事。

在他們的項目報告中舉了這樣一個例子：

引用試驗人員從冰箱裏面拿出一盒牛奶，在倒完牛奶之後卻忘了把牛奶放回冰箱，Watch-Bot 就會通過 Kinect 確定遺忘的“動作”和“對象”（牛奶），然後從 Kinect 中發送座標給雲台相機，然後雲台相機再將激光筆對準目標。

最重要的是，Watch-Bot 完成這一切沒有很多的人工介入，而是採用了依靠一套完全不需要監管設定的概率深度學習模型。只需要普通的 RGB 視頻信號以及 Kinect 提供的動作追蹤信號，就能從數據眾分析出動作以及他們之間的關係。

比如上方提到的倒牛奶這個例子，完整的動作應該是：從冰箱拿出牛奶；倒牛奶；把牛奶放回冰箱；然後離開。那麼 Watch-Bot 怎麼知道人究竟是忘了還是沒忘呢？

Watch-Bot 用了一個非常系統的“思考方式”（邏輯），他們將每個動作片段中的動作、對應物體、他們發生的關係同時建模，就比如“把牛奶放回冰箱”通常都是“從冰箱拿出牛奶的”的後續動作，如果牛奶這個物體在“離開”這個動作之後仍然存在於冰箱之外，那麼就是人忘了。

如何將激光指示到對應物體上？Watch-Bot 採用了一個相當巧妙的方法，拋棄了常用的“建立空間座標系然後校準雲台”，直接利用雲台相機的視頻信號與 Kinect 捕捉的座標進行匹配。

虛擬與現實已無屏障？


從提醒人遺忘事情這一用途來看，Watch-Bot 所產生的意義並不大，但正如他們在論文中最後總結的那樣：

引用Watch-Bot 易於安裝，而且我們的模型可以針對不同的場景進行修改。

這極有可能成為挽救現在智能類產品的因素，雖然目前帶有“智能”兩個字的產品極多，但是連個 WiFi、藍牙算不上“智能”，而真正的思考能力必須建立在感知能力之上。

或許將來的某一天，每個人的家裏都會擁有幾套 Watch-Bot 這樣的現實捕捉設備，從而將智能服務帶進我們的生活。

當然，我也想把 Watch-Bot 改裝一下來對付我們家的小貓咪。

題圖來自 Chasingthelaser

插圖來自 Eveningtelegraph、Qz


資料來源：愛範兒（ifanr）