本周XR大新聞,上周Quest 3發布之后,本周蘋果MR頭顯Vision Pro正式發布,也是本周AR/VR新聞的重頭戲。
【資料圖】
AR方面,蘋果發布VST頭顯Vision Pro(雖然本質是臺VR,但以AR場景為核心)以及visionOS;visionOS SDK月底上線;Object Capture支持iOS端;Kopin推出單色1英寸超大Micro LED模組。
VR方面,Meta將在SIGGRAPH 2023展示視網膜可變焦VR;Quest推出純手勢的虛擬鍵盤;惠牛發布兩款Pancake新品;億境三款產品亮相AWE 2023。
收購方面,蘋果收購AR頭顯廠商Mira;Vection收購VR方案商Invrsion。
融資方面,Micro LED廠商JBD完成B輪融資,阿里入股;消費級XR眼鏡品牌VITURE獲近千萬美金A+輪融資;VR企業培訓平臺InstaVR完成10億日元融資;心理治療VR方案商BiPSEE獲得新一輪融資。
AR|蘋果Vision Pro正式發布
毫無疑問,蘋果Vision Pro就是VST的天花板,但它是一臺VR。瘋狂堆料讓它呈現了足夠明顯的特色:單眼進3.4K分辨率的Micro OLED屏幕,高像質的透鏡,前所未有的弧形ID結構設計(搭配弧面玻璃、主板、電池等);多達12顆攝像頭、5顆傳感器、6顆麥克風的組合;以及重磅的眼球+手勢+語音組合交互模式。相關閱讀:《VST的天花板?蘋果Vision Pro解析》。
AR|Vision Pro用AI檢測用戶狀態
參與Vision Pro的前蘋果AR工程師Sterling Crispin,發文分享了自己在蘋果期間所做的工作。其中提到,蘋果Vision Pro融合了大量機器學習技術,包括用AI模型預測你的身體、大腦狀態,比如是否對當前事務好奇,是否走神,注意力是否被分散等等。相關閱讀:《蘋果Vision Pro結合大量AI技術用于用戶狀態檢測》。
AR|蘋果Vision Pro屏幕細節曝光
在WWDC 2023課程中提到:Vision Pro頭顯刷新率為90Hz-96Hz之間,最高可播放4K分辨率2D視頻,顯示屏原生刷新率為90Hz,如果播放24fps的視頻,則可自動使用特殊的96Hz模式。此外,Vision Pro支持SDR和HDR顯示,可渲染豐富的色彩。
AR|Vision Pro處方鏡或3-600美元
彭博社記者Mark Gurman表示,Vision Pro上一副蔡司處方鏡片售價可能至少300-600美元,如果蘋果不提供相應補貼,近視眼用戶購買Vision Pro頭顯的成本可高達4000美元左右。
AR|蘋果提出MV-HEVC 3D視頻格式
蘋果引入了一個HEVC擴展格式:MV-HEVC,指的是多視圖HEVC,每一幀圖像攜帶左右眼兩個畫面,也就是專門為3D視頻推出的格式。
AR|行業高管點評Vision Pro
青亭網邀請了AR/VR行業的高管和學者,為我們點評Apple Vision Pro這款新品,以及visionOS和空間計算的前景和影響,讓我們一起來聽聽他們的看法和分析。相關閱讀:《點評|AR/VR行業高管眼中的Vision Pro》。
AR|扎克伯格評Vision Pro
在近期的一次Meta內部大會中,扎克伯格對蘋果Vision Pro進行了點評。詳情閱讀:《扎克伯格評Vision Pro:兩家公司愿景和價值觀不同》
AR|Kopin單色MicroLED模組
微顯示方案Kopin公布1英寸MicroLED模組,目前還在生產驗證階段,特點是單色,分辨率2048x2048,亮度超280萬尼特,后續預計提升至320-350萬尼特之間。據悉,初始版本基于Kopin自研的背板和驅動技術,專為國防、AR場景設計。
AR|visionOS基礎架構
visionOS主要基于SwiftUI、RealityKit、ARKit幾大框架,開發工具則包括Xcode、Reality Composer Pro和Unity。其中大部分是此前就推出的,值得注意的是Reality Composer Pro是一個新的工具,特點是開發者提供了一個預覽和準備3D內容的工作流。相關閱讀:《從visionOS系統窺探Vision Pro頭顯》
AR|visionOS用戶界面
visionOS共有三大類界面:窗口視圖、體積視圖(立體)、Space視圖(共兩種,一種是不透明背景模式Full Space,另一種則是VST透視背景Shared Space)。
Space視圖下,支持通過旋轉數碼旋鈕,用戶可以調整背景透視的程度,讓UI在完全沉浸和完全透視之間自然過渡。
AR|visionOS窗口視圖共享
visionOS可以像在macOS那樣,允許用戶共享任何窗口,此時visionOS會同步用戶的方向,以及AR比例、動畫和上下文信息,允許SharePlay繪畫中每個人獲得相同的體驗,從而實現遠程可視化協作。
AR|visionOS支持iOS應用
蘋果表示,蘋果Vision Pro(visionOS)將同時支持iOS和iPadOS兩大平臺的應用。細節方面,iOS應用為豎屏顯示,iPad應用支持橫屏/豎屏兩種模式,開發者設置默認模式;支持窗口縮放;安全管理Touch ID或Face ID自動改為Optic ID;支持自定義手勢識別功能。
AR|visionOS輸入方式曝光
蘋果在WWDC課程中詳細解釋了Vision Pro所支持的各種輸入方式,比如可使用手勢+虛擬鍵盤、匹配藍牙鍵盤兩種方式輸入文字等等。相關閱讀:《蘋果visionOS輸入方式曝光:眼球注視+手勢鍵盤精準度超高》
AR|visionOS開發者支持服務
在蘋果visionOS官方頁面中“Work with Apple”的板塊,蘋果提到了將舉行一系列活動,并為開發者提供三種渠道和方式測試visionOS應用以及其它服務,具體于7月份上線。
AR|visionOS SDK月底上線
蘋果宣布,將于本月底之前推出visionOS SDK,并推送新版本Reality Composer和Xcode工具。
AR|Object Capture支持iOS端
WWDC 2023課程中,蘋果表示此前僅在Mac上提供的攝影測量功能Object Capture功能,現在支持iOS端,意味著更多第三方App可以直接實現USDZ格式的3D掃描建模。目前,該應用主要支持具備LiDAR傳感器的iOS設備。
AR|ARKit-World Tracking
雖然沒有明確說是ARKit7,但ARKit也有幾點新功能:世界追蹤(World Tracking),開發者添加WorldAnchor錨點,任何錨點都會在系統后臺自動保存,每次設備重啟后依然會顯示在固定的位置。
AR|ARKit-Scene Understanding
包含了一系列識別周圍環境的功能,比如:平面檢測(垂直和水平)、場景幾何、圖像追蹤。識別到的表面可用來固定AR內容,或是優化物理模擬,允許AR與地板、墻壁產生自然交互。
AR|ARKit-Particles
Particles新工具,該工具可快速構建云、雨、火花等動態粒子特效,并支持在Reality Composer Pro中預覽。
AR|RoomPlan更新
RoomPlan是ARKit 6帶來的一項功能,本屆WWDC更新功能如下:自定義AR會話、支持多房間(MultiRoom API)、可識別物體增多(如傾斜、彎曲的墻壁,或洗碗機、烤箱、水槽等元素。)
AR|Vision框架支持檢測動物
Vision框架將新增Animal Body Pose API,特點是追蹤貓、狗等動物的多個骨骼節點,以實現全身姿態追蹤。據悉,該API僅支持iOS 17、iPadOS 17、tvOS 17和macOS Sonoma系統。
AR|蘋果3D顯示UI專利
WIPO公布了一項來自蘋果3D UI系統,特點是可識別場景中的墻壁、桌面等元素,并將交互式UI固定在這些物理元素上,仿佛可以將普通的房間布置成無限大的3D畫布。
AR|蘋果Face ID綁定視力信息
USPTO公布了一項蘋果基于面部識別的AR眼鏡認證系統,特點是將用戶ID與屈光度等視力信息綁定,當用手機Face ID相機識別到特定用戶后,便會將視力信息與AR眼鏡同步。
AR|蘋果眼球手勢結合交互專利
WIPO公布蘋果一項與AR/VR頭顯相關專利,描述了一種融合眼球追蹤、手勢追蹤的GUI自然交互方式,特點是使用深度映射來追蹤手勢,通過注視點來智能識別用戶想要操控的虛擬元素,讓AR/VR中的交互更流暢,降低使用阻力。和發布的Vision Pro交互邏輯非常相似。
AR|亞馬遜引入3D模型工具Hexa
3D AR可視化平臺Hexa宣布與亞馬遜成像團隊、AWS的空間計算團隊聯手,推出可規模分發、簡易的3D AR開發流程,加速電商合作伙伴使用AR來營銷、展示的過程。
VR|Meta將展示視網膜可變焦VR
Reality Labs兩款變焦顯示VR原型(Half Dome、Butterscotch)背后負責人Yang Zhao和Douglas Lanman都將參與今年8月的SIGGRAPH 2023,期間Meta計劃展示一款具備視網膜級分辨率的可變焦VR頭顯原型。
VR|Quest推手勢虛擬鍵盤
Meta本周推出了基于Quest的虛擬鍵盤功能,特點是允許用戶通過手勢直接在虛擬鍵盤中打字。這項功能將整合至Presence平臺、Unity Integration SDK,允許開發者將基于手勢的虛擬鍵盤引入自己的AR/VR應用中。
VR|惠牛發布兩款Pancake新品
AR/VR光學模組供應商惠牛科技發布兩款Pancake新模組:Si-PK95和PK100。Si-PK95采用1.3inch Si-OLED屏、單眼4K*4K分辨率;PK100采用2.48/2.56inch LCD屏,支持1920*1800/2160*2160的單眼分辨率,該模組在實現大視場角的同時,比市場已有的同類產品更薄,模組厚度僅26mm。
VR|億境XR亮相AWE 2023
億境EmdoorVR主導或參與研發的三款產品展出于AWE 2023高通展臺:億境自研 6DoF MR一體機、Rokid分體式AR眼鏡+計算單元、教育客戶ClassVR 3DoF MR一體機。MR新品A863使用最新一代高通驍龍XR2+平臺,搭載高通最新LA1.2基線、支持OpenXR標準、具備頭6DoF手6DoF、手勢識別、眼球追蹤、VST(采用雙1600M彩色攝像頭)、IPD無極調節;2160*2160雙屏高清分辨率,超大105°FOV。
VR|瑞聲科技量產3P Pancake
瑞聲科技宣布3P VR Pancake光機模組成功量產,宣稱更有效抑制鬼影、近視友好、邊緣像質清晰。
VR|AVATAR VR手術獲FDA認證
外科手術VR醫療成像方案商AVATAR MEDICAL宣布,旗下VR術前規劃方案已獲得FDA 510(k)許可認證,預計明年還將獲得歐洲醫療器械認證。
VR|Unity空間應用開發套件
蘋果Vision Pro頭顯在WWDC 2023上剛發布,同時Unity也宣布與蘋果合作,為該頭顯操作系統visionOS推出空間體驗開發套件:Spatial Creation。據悉,該工具目前已開啟測試預約。
VR|ILMxLAB更名ILM Immersive
作為工業光魔(ILM)整體品牌計劃的一部分,ILM旗下工作室ILMxLAB宣布將重塑品牌,更名為ILM Immersive。據悉,該工作室成立于2015年,多年來專注開發VR、MR等基于IP的
VR|Disney Plus+蘋果首發陣容
迪士尼在WWDC 2023上宣布,將在蘋果AR/VR頭顯Vision Pro中引入Disney Plus+服務,并推出沉浸式體育、電影內容。據悉,Disney Plus+將作為Vision Pro頭顯的首發陣容。
VR|4款Vision Pro應用公開
蘋果官方公布了AR/VR平臺visionOS已有第三方開發者,包括:Algoriddim、Ryan McLeod、JigSpace、XRHealth等等。據悉,這些開發者所開發的AR/VR應用涉及多種類型,比如交互式音樂、益智游戲、醫療方案、手勢應用等。
VR|Virtual Desktop更新1.27版
在1.27.0測試版本中,《Virtual Desktop》帶來以下關鍵優化:添加HEVC 10bit編解碼器,添加H.264+編解碼器選項,支持高達400Mbps;改進注視點編碼;PC桌面串流比特率提升至100Mbps;Quest端切換為OpenXR標準,支持VST透視環境;Quest Pro端支持局部調光;支持PS5 DualSense手柄。
收購|蘋果收購AR頭顯廠商Mira
蘋果已收購AR眼鏡廠商Mira,交易規模未公開。該消息是由Mira CEO在私人Instagram曝光,時間點選擇在蘋果Vision Pro發布一天后,據悉有11名Mira員工加入蘋果。
收購|Vection收購VR方案商Invrsion
AR/VR解決方案公司Vection收購VR智能零售方案商Invrsion,旨在加速時尚、零售領域的XR解決方案和市場機會。
融資|JBD完成B輪融資
近日,JBD關聯公司上海顯耀顯示科技有限公司發生工商變更,股東新增浙江阿里巴巴云計算有限公司等,同時公司注冊資本從約5197萬人民幣增至約5374萬人民幣。
融資|VITURE獲近千萬美金A+輪融資
近日消費級XR眼鏡品牌VITURE完成近千萬美金A+輪融資,由藍馳創投獨家投資。
融資|InstaVR完成10億日元融資
VR企業培訓平臺InstaVR,近期已經完成10億日元融資,新一輪資金將用于“InstaVR Enterprise”解決方案,目標是解決日本國內勞動力短缺問題。
融資|日本BiPSEE獲新融資
日本心理治療VR方案商BiPSEE獲得新一輪融資,本輪融資來自Beyond Next Ventures、ANRI、Scrum Ventures和Ocean Lease,資金將用于加速研發抑郁癥VR數字療法。
責任編輯:Rex_11