A comprehensive look at Meta Developer Conference: Cheaper mixed reality headsets, holographic AR glasses, AI assistants can now speak

華爾街見聞
2024.09.25 22:19
portai
I'm PortAI, I can summarize articles.

Meta 股價新高。混合現實頭顯 Quest 3S 起售價幾乎較 Quest 3 砍半,性能卻不減,被定位成 “多任務計算機”。Orion 眼鏡被稱為 “首款真正的增強現實眼鏡” 和 “迄今最先進 AR 眼鏡”,但暫時買不到。Meta AI 語音獲得好萊塢明星授權,發佈最新版大模型 Llama 3.2,能夠同時理解圖像和文本。

9 月 25 日週三,Meta 公司在 Connect 年度開發者大會上盡展 AI 與 VR 實力,推出了新一代更便宜的混合現實頭顯設備 Quest 3S、去年推出的 Quest 3 降價決策,以及首款 Orion 全息 AR 智能眼鏡的原型機。Meta 還發布了最新多模態 LLAMA 3.2 人工智能模型,能夠同時理解圖像和文本。

公司 CEO 扎克伯格稱,Meta 正致力於通過頭顯、眼鏡和人工智能系統 “將未來帶給每個人”。有分析稱,Meta 今日試圖展示其人工智能實力,以及超越智能手機和電腦的下一代計算平台。

上述消息推動 Meta 股價在午盤後觸及日高,一度漲 2.4%,儘管收盤時漲幅砍半,但股價創歷史新高。

Quest 3S 起售價幾乎較 Quest 3 砍半,性能卻不減,被定位成 “多任務計算機”

最新推出的 Meta Quest 3S 正式加入 Quest 3 產品線,共享與 Quest 3 相同的混合現實功能和快速性能,但價格更低,被公司稱為 “最實惠的混合現實頭顯設備”,適合剛開始接觸混合現實和沉浸式體驗的新手,以及一直等待 Quest 和 Quest 2 降價的忠實用户。

Quest 3S 中的 “S” 意味 “開始(Start)”,現在開啓預定,10 月 15 日正式上市,共有兩款,其中 128GB 內存版本起售價 299.99 美元,存儲空間更大的 256GB 版本起售價 399.99 美元。

同時 Meta 還宣佈,去年推出、“面向科技發燒友和遊戲玩家的最佳頭顯設備” Quest 3 512GB 版本從起售價 649.99 美元大幅降至 499.99 美元,128GB 版本從 499.99 美元降至 429.99 美元。

圖片來自 Meta 官網

值得注意的是,Meta 強調了 Quest 3S 混合現實頭顯設備的多任務處理和運行應用程序的能力,將其定位為 “多任務計算機”,而不僅僅是一台遊戲和娛樂設備。Meta 創始人兼 CEO 扎克伯格稱,Quest 可以完成通用計算機所能做的所有事情,“它是具有全套設備的完整計算機”。

例如展示中,在 Quest 3S 視界內的浮動屏幕上可以同時運行最多六個應用程序,包括 YouTube 視頻、網絡瀏覽器、亞馬遜音樂和 Meta 應用商店等。但也有人稱,演示體驗並不流暢,亞馬遜音樂的 app 會崩潰、窗口控件會消失、如果不按按鈕幾分鐘後 Meta 控制器就會休眠。

Meta 還重點介紹了 “全綵透視模式”(passthrough)功能的改進體驗,主要是在 Quest 3S 上增加了一個專門打開該功能的實體按鈕 “操作按鈕(Action Button)”,用來在透視模式和看不見外部世界的沉浸模式之間切換,此前在 Quest 3 和 Quest Pro 上需要通過 “雙擊” 來實現。

透視模式指的是通過 VR 頭顯設備的攝像頭和傳感器來在數字體驗上同步展示外部物理世界,方便用户與現實世界互動。有分析稱,新增實體按鈕可能會方便用户更頻繁地切換去查看周圍現實。

有報道稱,Meta 的最新頭顯設備是希望消費者花更多時間在關於 VR 和 AR 的遊戲、視頻、聊天上,這也將直接與蘋果售價高達 3500 美元的 Vision Pro 混合現實頭顯展開競爭,因為 Quest 3S 許多新功能都直接與 Vision Pro 對標。

例如,用户可以在影院大小的屏幕中沉浸式觀看電視節目,或者隨時隨地擁有健身私教,還能在飛機上使用頭顯,Quest 3S 甚至還搭載更貴 Quest 3 中的高通驍龍 XR2 第二代芯片,續航時間更長,Meta 稱:“再加上多任務處理和遊戲,市場上沒有比這個價格更好的混合現實設備了。”

圖片來自 Meta 官網

Meta 還發布了 Meta Horizon OS 操作系統的更新版本 “以實現空間計算”,更好地支持 YouTube、Facebook 和 Instagram 等基礎 2D 應用,還添加了更好的空間音頻,改進了透視模式的對比度和顏色,使其更加逼真和提供沉浸式身臨其境的體驗。

在外觀上,Quest 3S 與傳聞一致,總體比 Quest 3 稍大一些,將前置傳感器排列成兩個三角形,Quest 3 則排列成三個藥丸形切口。Quest 3S 沒有 Quest 3 的深度傳感器,顯示器分辨率更低且與舊款 Quest 2 一樣,Quest 3S 的視野也更窄,但平均使用時間 2.5 小時大於 Quest 3 的 2.2 小時。

圖片來自 Meta 官網,左上角為 Quest 3,右下角為 Quest 3S

此外,Meta 表示將停產 2022 年推出的售價 999 美元 Quest Pro 頭顯,對 Quest 2 的銷售也會到今年底或者庫存完全出清為止。公司稱未來希望將 “旅行模式” 拓展到火車上、支持躺下使用頭顯、繼續改進 Quest 上的 Meta AI 助手並啓用 “Hey Meta” 喚醒詞來調用它等。

有科技媒體的體驗者稱,儘管有些 Quest 3S 遊戲玩起來有點糟糕,但綁在頭上的 Y 形分體帶讓佩戴更加舒適,而且 Quest 3S 比預期更接近 Quest 3,售價則幾乎較後者砍半,對於從未擁有過混合現實頭顯設備的人來説,可能是非常具有吸引力的購買選擇。

Orion 眼鏡被稱為 “首款真正的增強現實眼鏡” 和 “迄今最先進 AR 眼鏡”,暫時買不到

Meta 還展示了首款 Orion 增強現實(AR)智能眼鏡的原型機,之前代號為 “Project Nazare”,暫時不面向消費者出售,而是為公司內部員工和特定外部受眾提供訪問權限,力爭不斷學習、迭代和構建在未來某個時刻適合消費者級別的 AR 眼鏡產品線。

圖片來自 Meta 官網

Meta 強調,這是該公司 “首款真正的增強現實眼鏡”,也是 “迄今為止最先進的 AR 眼鏡”,將搭配 Wristband 手環,從而支持用户進行手部控制,後者源於 Meta 於 2019 年收購的 CTRL-Labs:

“Orion 將普通眼鏡的外觀和佩戴感覺,與增強現實的沉浸式功能相結合,這是現代計算領域幾乎所有突破性發明的成果。Orion 連接了物理世界和虛擬世界,並以人為本,讓用户能夠更加身臨其境、更加互聯互通、更加強大。”

圖片來自 Meta 官網

公司稱,Orion 原型機是 “一窺未來的窗口”,並不是一個特別初期的研究原型機,而是 “我們開發過的最精緻的產品原型之一,真正代表了可以交付給消費者的產品,不過目前仍決定先專注於內部開發,接下來幾年將在研發成果基礎上推出新的設備。”

在功能方面,智能助手 Meta AI 可以在 Orion AR 眼鏡上運行,能理解用户在現實世界中看到的東西,並幫助進行有用的可視化,例如可以根據冰箱裏現有的原材料提供食譜,或者 “洗碗的同時調整數字家庭日曆,還一邊給朋友打視頻電話”。

圖片來自 Meta 官網

與此前推出的雷朋 Meta 智能眼鏡類似,Orion AR 眼鏡也無需拿出手機便可與 AI 智能助手交談、進行免提視頻通話、實時與朋友和家人保持聯繫、通過 WhatsApp 和 Messenger 應用程序查看和發送消息、拍照等,力圖構建 “新的沉浸式社交體驗”,但雷朋眼鏡沒有任何顯示屏。

公司稱,儘管雷朋 Meta 智能眼鏡已經開闢了一個全新、無顯示屏、由 AI 強力驅動的眼鏡類別,但 XR 行業長期以來一直夢想着真正的 AR 眼鏡,即將大型全息顯示屏和個性化 AI 輔助優勢結合在一起的產品,並具有舒適、全天候可佩戴的普通眼鏡外形,Orion 已可實現這些訴求:

“Orion 是微型化(miniaturization)的一項壯舉,其組件被壓縮到幾分之一毫米,需要進行數十項創新才能將設計變成現代化的形式,讓您每天都能舒適佩戴。

Orion 擁有迄今體型最小 AR 眼鏡中最大的視野,解鎖了真正身臨其境的沉浸式使用場景,從多任務窗口、大屏幕娛樂到真人大小的人物全息圖,所有數字內容都能與對物理世界的視野無縫融合。

但 Orion 的獨特之處在於,無論從外觀還是感覺上看,它都毫無疑問是一副眼鏡,配有透明鏡片。與當今的混合現實(MR)頭顯設備或其他增強現實(AR)眼鏡不同,用户仍然可以看到其他人的眼睛和表情,因此可以塑造現場感並與周圍的人分享體驗。”

圖片來自 Meta 官網

公司還稱,“增強現實眼鏡是開啓以人為本計算的下一個重大飛躍之關鍵”,首款 Orion AR 眼鏡原型機恰好提供了 “前所未有的突破性 AR 顯示體驗”:

“確定眼鏡的外形尺寸、提供全息顯示(holographic)、開發引人入勝的 AR 體驗、創建新的人機交互(HCI)模式,並將所有功能整合到一款統一的產品中,這是我們行業面臨最困難的挑戰之一。這個挑戰如此之大,以至於我們認為成功的可能性不到 10%。直到 Orion 的誕生。”

而 Orion 勢必將不斷迭代,未來將專注於調整 AR 顯示質量,使視覺效果更加清晰;儘可能進行優化,使外形尺寸更小,以及大規模生產,使售價更便宜。全行業的終極目標是希望開發出一款將可穿戴設備的便利性和即時性,與大顯示屏、高帶寬輸入和情境化人工智能相結合的產品,並讓人們在日常生活室內和户外的使用中都感到舒適。

扎克伯格表示,製造 AR 眼鏡的技術挑戰非常大,首先必須是眼鏡形態而不是笨重的頭顯,不能有電線、重量必須小於 100 克,除了與佩戴者的聲音、打字或手勢互動之外,Orion 還要有一個 “神經接口”(neural interface),讓用户可以將信號從大腦發送到設備:

“但它們是人工智能的完美形態。Orion AR 眼鏡可以讓人工智能助手看到你所看到的,聽到你所聽到的,並幫助你度過一天。比如,你可以讓眼鏡提醒你在哪裏停車或去取雜貨,看到一堆水果就給你一份製作冰沙的食譜,或者幫你挑選派對服裝。”

有報道稱,Orion 原型機的推出恰逢社交媒體公司 Snap 宣佈其第五代 Spectacles AR 眼鏡的一週後。Meta 的這款厚框眼鏡將僅向開發者提供,但必須承諾每月支付 99 美元且訂閲一整年。

此外,Meta 今日還發布了與雷朋合作智能眼鏡的全新 Meta AI 功能。例如能夠檢測用户是否正在看西班牙語的標識,如果用户提出要求將能通過聲音將其翻譯成英文,眼鏡攝像頭還能掃描二維碼、從拍攝的照片中提取書名、記住用户停車位置和酒店房間號等信息。

扎克伯格對雷朋 Meta 智能眼鏡非常興奮,據市場研究公司 IDC 統計,這款眼鏡在上市前三個季度的銷量已超過 73 萬副。今年 7 月的財報電話會上他稱,這款眼鏡 “比預期更早地取得了更大成功”。上週,雷朋母公司 EssilorLuxottica 宣佈擴大與 Meta 的合作伙伴關係,以開發更多智能眼鏡。

Meta AI“會説話了”,還提供好萊塢明星授權雲集的聲音,發佈最新版大模型 Llama 3.2

除了混合現實硬件設備,Meta 還發布了多模態 AI 大語言模型的最新版本 Llama 3.2,能夠同時理解圖像和文本。Meta AI 聊天機器人也升級成 “會説話了”,方便用户用語音、而不是書面文字與其進行直接互動。一天前,競爭對手 ChatGPT 也想付費用户提供了更高級的語音功能。

有報道稱,這項類似於蘋果 Siri 的全新 Meta AI 語音功能將於 10 月份向美國、加拿大、澳大利亞和新西蘭的 WhatsApp、Instagram、Facebook 和 Messenger 用户率先推出,可以通過上述 App 應用程序與 Meta AI 實現自然語音對話,比如讓 Meta AI 啓動智能手機來拍照等。

而且新款聊天機器人搭載了諸多好萊塢明星的計算機生成聲音,包括首位亞裔金球獎影后林家珍(Awkwafina)、英國 “老戲骨” 朱迪·丹奇(Judi Dench)和美國演員約翰·塞納(John Cena)等。

扎克伯格稱,語音有可能成為人類與人工智能互動的最常見方式之一,甚至是 “沒有之一”。據悉,超過 100 萬廣告主正在使用 Meta 的生成式 AI 工具,其人工智能聊天機器人每月有超過 4 億人至少使用過一次,每週有 1.85 億人使用。公司正在測試 Meta AI 翻譯工具,以實現英語和西班牙語短視頻的自動配音和口型同步。

不過,由於擔心違反歐盟數據保護法和可能被罰款,Meta AI 將無法在歐洲使用,其人工智能依賴於平台大量用户的內容和數據,這種做法在歐洲涉及許多義務和保障措施。與 ChatGPT 或谷歌 Gemini 一樣,Meta AI 是一款可以回答問題、創建圖像、編寫消息甚至提供陪伴的人工智能助手。

有分析指出,Meta 目前幾乎所有收入都來自廣告,在二季度超過 390 億美元的收入佔比 98%。但公司同時也在大力投資人工智能和扎克伯格口中的 “下一代計算平台”,例如 VR 頭顯和 AR 眼鏡。包括 2014 年收購 Oculus 在內,Meta 已在 VR/AR 硬件方面投入了超過 650 億美元,但其元宇宙部門的運營虧損超過 500 億美元,引發不少投資者擔憂,畢竟元宇宙尚且屬於 “非主流”。

對此,扎克伯格的説法是大力投資 VR/AR 是一項戰略舉措,目的是防止蘋果控制未來的硬件平台。而 Meta 之前的 Quest 設備受益於大力營銷和低於許多競爭對手的價格,成功躋身市面上最暢銷的 VR 頭顯設備,出貨量達數百萬台,相比之下蘋果的頭顯設備可能銷量較小。

但消費者科技研究機構 Creative Strategies 的分析師 Carolina Milanesi 表示,當想到人工智能時,目前 Meta 可能並不是人們首先想到的品牌,這令其重磅投資 AR/VR 的邏輯面臨一定質疑,畢竟不知道何時才展現增收和提升利潤的切實成果:

“而該公司面臨的最大障礙將是隱私和信任:很多消費者無法相信這些數據不會被用於其他原因。”