Meta 推觸覺感知工具：要讓機器人「摸到」環境、提升 AI 對物理世界的理解

Meta 認為觸覺感知是機器人理解、和與物理世界互動的關鍵能力，而此領域的新研究將有助於開發更安全、更可靠、更能適應人類需求的機器人。

Meta 於上週公開發布了系列觸覺感知、機器人靈活性和人機互動方面的研究成果，旨在提升 AI 對物理世界的理解和互動能力，並促進機器人和 embodied AI （體現 AI）技術的進步。

Digit 360 是一款搭載超過 18 種感測功能的人工指尖，以及超過 800 萬個觸覺像素（taxel）和多個感知模組，能感知周遭環境中細微的變化，包括形狀、紋理、溫度和震動等，並可將觸覺訊號數位化。Digit 360 還搭載 AI 加速器，能快速地處理感測數據。

Digit 360 的應用場景含蓋機器人靈活性研究、醫療、義肢、虛擬實境等領域。Meta 將此技術提供給科學家使用，以促進 AI 研究發展，讓 AI 能夠更深入地學習和了解周遭物理世界。

Meta 目前已和觸覺感測器製造商 GelSight 公司合作生產 Digit 360，預計將於明年上市。

Sparsh 是一系列基於視覺的觸覺感測通用編碼器模型，利用自我監督學習技術，因少了要標記數據的要求，Sparsh 能應用於多種觸覺感測器和任務。

Sparsh 已在超過 46 萬份觸覺的數據資料（tactile images）上進行訓練，目標是賦予機器人觸覺感知能力，讓機器人能更有效地處理需要用到觸覺的任務，像是抓取易碎物品或判斷物體材質等。

Digit Plexus 是一個標準化的硬體軟體平台，可將各種指尖和皮膚觸覺感測器整合到單一個機器人手上。平台可整合基於視覺、皮膚的觸覺感測器（例如 Digit 360）至控制板，以便所有數據統一傳輸到電腦，進行無縫的數據收集、控制和分析。

Digit Plexus 要加以簡化了機器人應用程式的開發流程，並促進觸覺感知研究。Meta 也已公開 Digit Plexus 的程式碼和設計，讓開發者能在平台基礎上進行開發和應用。

Meta 正在和韓國機器人公司 Wonik Robotics 合作，在 Digit Plexus 平台上開發整合觸覺感測器的 Allegro 機器人手，預計將於明年上市。

PARTNR 適用於評估人機協作規劃和推理能力的新基準測試，用以評估評估大LLM 和視覺語言模型（VLM）遵循人類指令的能力，以及 AI 模型與人類協作完成家庭任務時的效率。PARTNR 模擬環境 Habitat 之上，包含了 10 萬個自然語言任務，涵蓋 60 間房屋和超過 5,800 個物件

Meta 的目標是通過 PARTNR 將 AI 模型從單獨運作的「代理人」，轉變成為能與人類共同合作的「合作夥伴」。

責任編輯：Jocelyn
核稿編輯：Mia

測試地帶