Meta late-night bombshell: The first sky-high AR glasses debut! Hands-on experience, Jensen Huang personally takes the stage

華爾街見聞
2024.09.26 00:25
portai
I'm PortAI, I can summarize articles.

Meta 在 2024 年 Meta Connect 大會上推出首款 AR 眼鏡 Orion,生產成本約 1 萬美元,現階段僅生產 1000 副,不對外銷售。該眼鏡採用分體式設計,重 98 克,支持多種交互方式。儘管未公佈詳細參數,英偉達 CEO 黃仁勳對其顯示效果表示讚賞。Orion 眼鏡目前僅用於演示和內部開發。

Meta 首款 AR 眼鏡 Orion 終於亮相!

一年一度的年度盛會 Meta Connect 2024 上在加州 Menlo Park 舉辦。一如既往,扎克伯格又從 Meta 員工戴手銬的保險箱中小心翼翼地取出了憋了許久的大招——首款 AR 眼鏡 Orion。據 Meta 介紹,每副眼鏡的生產成本大約 1 萬美元(約 7 萬人民幣),這可能也是史上最貴 AR 眼鏡。

Orion 為分體式設計,採用波導方案設計,擁有厚重黑色邊框,重 98g。該 AR 眼鏡能與 Meta 自研的肌電手環相適配,擁有手部跟蹤、眼部跟蹤、頭部追蹤等多種交互方式。

從演示視頻上來看,用户戴上 Orion 可以刷網頁、看短劇,甚至玩一些簡單的 3D 遊戲。當然,你也可以在 Orion 上聽音樂、接視頻電話。

不過,現階段的 Orion 眼鏡僅用作演示和內部開發套件,大約僅生產 1000 副,並不對外正式開售。

這次 Meta 官方几乎沒有提任何有關 Orion 的參數信息,芯片、光學、續航均未涉及。小扎只是拉來一眾好友體驗這款 AR 眼鏡,為其站台。英偉達 CEO 黃仁勳在體驗這款 AR 眼鏡時,直言:“顯示很棒,追蹤很棒,色彩也很不錯。”

不過,彆着急驚豔,圈內一眾科技博主早已拿到了 Orion 進行深度體驗。

我們也進一步梳理了 Orion 詳細信息:

1、AR 眼鏡採用分體式設計:Orion 眼鏡本身(98g)、獨立計算單元、肌電手環

2、基本硬件配置:7 個攝像頭、定製芯片、碳化硅光波導鏡片、Micro LED 微型顯示器

3、成本:每幅 Orion 成本高達 1 萬美金,僅 1000 副、不發售

4、Orion 二代:Meta 首款消費級 AR 眼鏡、鏡片更薄、非碳化硅光波導鏡片、分辨率更高

此外,Meta 還推出了 Quest 3 平價版Quest 3S,主芯片採用的是高通驍龍 XR2 Gen 2 芯片,其他基本配置與 Quest 2 相差不大,128G 版本售價 299.99 美元,9 月 25 日開售,10 月 15 日上架。

Meta 還展示了生成式 AI 如何與自家的社交全家桶相結合,並且推出 Meta AI 高級語音功能、AI 視頻以及 AI 翻譯功能。

在大模型方面,Meta 推出第一個能夠同時處理圖像和文本的開源模型Llama 3.2。該模型可以創建 AI 應用程序,例如提供實時視頻理解的 AR 應用程序、基於內容對圖像進行視覺搜索引擎或長文本分析。

發佈會結束後 Meta 股價一路上漲,截止發稿前,最高點漲至 575.77 美元/股。

01 碳化硅 +Micro LED 波導方案,擁有超大 70 度視場角

Meta 最秀肌肉展現實力的部分,是 Orion 的光學設計,可以看出 Meta 用材用料相當捨得。

Orion 採用衍射光波導設計,波導片選擇了碳化硅鏡片,重量更輕、更耐用,折射率高。Meta 首席技術官 Andrew Bosworth 在談到這些鏡片時表示:“你無法想象產量有多低。”

並且,Meta 選擇了Micro LED 微型 LED 顯示器,從發佈會展示的圖片中,我們推測大概率採用的是三色合一的光機方案

從視頻顯示效果來看,Orion 眼鏡中間採用相當大的稜形四邊形波導片,較大的波導片能夠帶來更廣範圍的顯示區域。測評顯示,Orion 擁有70 度超大 FOV,遠超業內常規波導類 AR 眼鏡 25 度 FOV(視場角)水平。

02 分體式設計,採用定製化芯片

Orion 採用的是分體式設計,這意味着該 AR 眼鏡還擁有一個單獨的計算單元,承擔主要的計算能力。Meta 稱之為 “可以忽略不計的冰球”。

具體而言,有關 Orion 位置跟蹤、手部跟蹤、眼部跟蹤以及一些圖形算法將會在眼鏡端運行。一些渲染和常規計算處理在控制器上運行,並將數據結果無線傳輸到眼鏡。

Meta 提到 Orion 的眼鏡端採用了定製芯片。聯合黃仁勳鮮少站台的行為,有不少網友推測,這款定製芯片有可能是英偉達打造。同時,眼鏡端的輕質鎂框架可以快速散熱。

03 與肌電手環適配,支持四大交互方式

在交互方面,Orion 可能是目前業內支持最多交互形式的 AR 眼鏡,可以支持眼動頭動語音以及手勢四大交互方式。

Meta 專門為 Orion 開發了肌電手環。該手環主要採用了肌電圖 (EMG) 技術,採用高性能紡織材料,可以通過感知手腕的肌肉活動來追蹤微小的手指運動。

目前,腕帶可以識別幾種基本操作:用拇指捏住食指可選擇內容;捏住中指和拇指可調用或隱藏應用啓動器;用拇指在閉合的手掌上做出拋硬幣手勢可向上或向下滾動。

結合眼動交互的肌電手環,Orion 主要用眼睛充當指針,而捏合手指充當點擊。這一點也是和蘋果相似的交互邏輯

Meta 表示,該肌電手環不受眼鏡攝像頭的視野限制,用户在任何位置都可以進行滑動、點擊、滾動等操作。在兩年前的 Connect 大會上,Meta 展示了一系列肌電手環的酷炫操作,其中,最炫酷的則是,AR 眼鏡實現鍵盤 “投影”,用户用肌電手環進行文本輸入。

04 採用 7 顆攝像頭,支持 SLAM 空間定位

據 The Verge 的記者介紹,鏡框內嵌有七個攝像頭,可以將虛擬物體固定在現實空間中,協助眼球和手部跟蹤,並讓 Meta 的 AI 助手瞭解您正在看什麼。Meta 的這一攝像頭圍繞鏡框佈置的設計,與蘋果 Vision Pro 的設計異曲同工。

用户可以讓虛擬窗口保持打開狀態,轉過頭走開,只要眼鏡還在,當您用户來時,窗口仍然在那裏。這意味着 Orion 擁有SLAM 空間定位功能,可以稱上真正意義上的 AR 眼鏡。

05 遊戲幾乎無延遲,與小扎對打乒乓球

在內容上,Orion 目前的主要功能是結合 Meta AI 進行一些基礎的交互,玩一些簡單的 AR 遊戲、實現免提視頻通話和多個虛擬屏幕同屏共享等功能。

比如説,The Verge 的記者就和小扎當面來了一場 3D 版本的虛擬乒乓對決。(gif)兩位 Orion 用户需要掃描二維碼配對眼鏡,然後使用手勢跟蹤來控制球拍。“遊戲幾乎沒有延遲。” The Verge 的記者説。

記者還通過 Orion 中的 Meta AI 識別擺放在桌子上的配料,製作冰沙。幾秒鐘後,它就正確地將標籤放在各類配料上,並在配料上方的窗口中生成冰沙的配方指南。

06 Orion 二代將於未來幾年推出,或是首款消費級 AR 眼鏡

Meta 透露,Orion 的二代版本將於未來幾年推出,這可能是 Meta 首款消費級 AR 眼鏡,其價格應該與當今的手機和筆記本電腦相當

據瞭解首款消費級 AR 眼鏡的鏡片不會採用碳化硅製成,視野也不會那麼大,但分辨率會更高。如果一切按計劃進行,鏡框厚度將只有現在 Orion 眼鏡的一半左右。

Orion 產品負責人 Rahul Prasad 透露:“獲得更大的視野是一個科學問題。下一階段是工程問題,即獲得更高的分辨率、更高的亮度和更低的成本

扎克伯格提到 AR 眼鏡必須很好,用户才想要會將其佩戴在臉上。AR 眼鏡需要在用户不使用 AR 時,也能夠提供一些基礎服務。他還談到 AR 眼鏡的發展並非一蹴而就,不同的智能眼鏡將會起到不同的功能,像是 Ray-Ban 智能眼鏡適合一些輕應用的場景。

07 AI 視頻、AI 翻譯、AI 高級語音,Meta AI 打造內容創作工具箱

Meta 與 OpenAI 接連上線了AI 高級語音功能,可以幫助 AI 模型配上許多知名演員的聲音,用户可以選擇 Dame Judi Dench、John Cena、Keegan Michael Key 和 Kristen Bell 的聲音,與之交互。

發佈會上,扎克伯格與 AI 版 Stevenson 進行了對話。史蒂文森的 AI 助手回答了有關其創作過程的問題。同時,Meta AI 還可以將西班牙語的視頻直接轉換成英語視頻。“與文本相比,用語音與 AI 互動是一種更好的方式。” 扎克伯格説。

同時,Meta AI 還助力Ray-Ban 智能眼鏡的功能升級。現在,Ray-Ban 智能眼鏡與 AI 結合後,用户可以直接藉助智能眼鏡記錄自己做菜過程,或者一鍵記錄自己的停車位置。

如果你在街上拿到了一張海報,也可以直接藉助智能眼鏡拍攝相關二維碼,或者一鍵撥打電話。如今,Ray-Ban 智能眼鏡還支持了AI 翻譯功能。用户可以藉助 AI 直接翻譯用户的話語。可以説,該功能直接為用户打造了一個同聲傳譯助理。

不過,在現場的演示過程中,Meta AI 的翻譯似乎翻車,無法翻譯扎克伯格與西語講述者之間長時間對話。

扎克伯格説,Meta Ray-Ban 智能眼鏡的對話功能越來越強,它們將能更好地記憶你所看到的內容。它們還將配備多模態人工智能,能夠實時為用户提供幫助。

08 AR 眼鏡加持,Meta 借生成式 AI 重回寶座

2024 年,Meta 憑藉生成式 AI 的突破性進展,成功逆轉了其元宇宙領域發展的困境,股價一路飆升,重返美股市值前十的寶座。作為 AVR 領域的領軍人物,Meta 在 Connect 大會展示出的產品和技術,往往會成為業內矚目的焦點。

過往幾年以 Quest 系列為代表的頭顯一直是 Meta Connect 大會的主旋律,我們也看到了 Meta 在高端頭顯 Meta Quest Pro、消費級頭顯 Quest 3、Quest 3 上做出不同探索。但今年,Meta 終於在 AR 方向亮相了憋了許久的大招——首款 AR 眼鏡 Orion。

與業內常見波導類的 AR 眼鏡相比,Orion 用材相當捨得。其中,最為驚豔的是超大視場角,這也是 Meta 堆料展現了 AR 眼鏡天花板。不過,從現有視頻顯示來看,似乎仍然出現掉幀、顯示不清晰等情況。

此外,Meta 還擁有其他 AR 廠商所不具備的強大 AI 底層能力。Ray-Ban 智能眼鏡和 AI 的結合玩法,究竟會在用户中反饋如何?這或許將影響不帶顯示功能的智能眼鏡市場變化。

“我曾以為元宇宙在 AI 出現之前就能實現。” 扎克伯格説:“命運的轉折很有趣,AI 在元宇宙真正能夠以可普及前就先爆發。”

硅兔君,原文標題:《Meta 深夜炸場:首款天價 AR 眼鏡問世!真機上手,黃仁勳親自站台》