MR大牛深度拆解Vision Pro:它代表了產業的下個十年,中國廠商差距多少

Vision Pro的一小步,是MR混合實境)產業的一大步。

2月2日,隨著首批用戶陸續拿到Vision Pro,秀出的花式體驗以及網路上圍觀人群的好奇,未來虛擬世界和現實世界的交融多了一絲實感。

Vision Pro作為蘋果公司研發多年的產品,集中了顯示器、晶片、互動領域大量的核心技術,打造出一個超能力的MR產品。這款產品在許多技術上走在前列,蘋果也盡其所能為消費者帶來更好的體驗。

在Vision Pro上市之前,各方對它從硬體到軟體都有全方位的研究,隨著Vision Pro上市各路拆機,業界更是清楚地看到了Vision Pro採用的新技術。如果說之前各類VR(虛擬實境)產品更多是專注於遊戲類的"玩具",那麼Vision Pro有極大可能開啟MR作為通用計算工具的時代。

Vision Pro主要部件拆機圖來源iFixit

Vision Pro顯示輸出做到虛擬與現實的無縫銜接

Vision Pro在光學顯示上的技術突破這次備受關注,其帶來的高清晰度可以做到讓影片或圖片有真實現場感,從而讓眼睛信以為真,混淆虛擬和現實世界的邊界。

從拆機影片看,為了更好的顯示效果,Vision Pro用了兩塊4K清晰度的Micro OLED螢幕加上玉晶光電的3P Pancake方案,帶來了難以置信的銳度和清晰度。

4K是二維顯示的清晰度,如果放在三維顯示領域,虛擬螢幕清晰度也差不多接近人眼的極限,這在顯示上突破了一個閾值

在三維顯示裡,解析度的單位用PPD(Pixels Per Degree),意思是視野的每一度裡面有多少像素。

XR天使投資人貓眼電影創辦人、真格基金投資合夥人徐梧表示,Meta Quest 2的解析度是20PPD,就是指每一度裡面有20個像素。 20PPD,用戶會明確分辨出現實和虛擬世界的差異,再加上機器性能的限制,一體機透過卡通渲染帶給用戶視覺衝擊也相對有限,用戶會覺得挺有趣,但並不會很震撼。他對這個階段的顯示效果定義為立體感。

「人眼的極限是60PPD。而Vision Pro 是40PPD,一定程度已經接近人眼極限。同時,Vision Pro採用的是OLED螢幕,這意味著更豐富的色彩和亮度。此時將會發生一個巨大的質變,使用者可能無法區分現實和虛擬。」徐梧表示,在40PPD下,虛擬螢幕的顯示品質已經幾乎相當於4K顯示器的效果,這意味著虛擬螢幕頭一次可以和實體平面顯示器正面PK。

Vision Pro 4K清晰度的Micro OLED顯示屏,兩片價格700美元

為了達到這個效果,蘋果也花費了大量資金。根據第三方評估,Micro OLED螢幕價格昂貴,兩塊螢幕價格在700美元,在Vision Pro的零件成本中佔比超40%,也是最大的成本。 Micro OLED屏交給台積電代工,索尼公司供應材料。

AR眼鏡新創公司奇點接近在Vision Pro發布後就對其進行了全面的技術評估。奇點接近CTO萬美君(Paul Wan)接受澎湃新聞記者採訪時表示:「蘋果沉浸式顯示這塊是花了大力氣的,為了更好的效果,雙眼4K的沉浸式顯示,是蘋果耗費巨資打造,沉浸感超出目前行業一大截。"

這次Micro OLED螢幕相當於蘋果訂製的,且良率不高,因此在產能上還有許多限制。曾有外媒報道稱,索尼在提供產能上有些吃力,蘋果曾經提出希望提供一百萬Micro OLED屏,但索尼表示做不到。

不過,蘋果Micro OLED屏走在前面,中國多家Micro OLED螢幕供應鏈緊跟在後面。京東方、視漄科技等螢幕供應商在技術上有突破。

PICO也是MR一線大廠,其技術路線與蘋果非常接近。 PICO OS產品負責人馬傑思接受澎湃新聞記者採訪時表示,蘋果透過Micro OLED螢幕解決了MR螢幕輸出問題,過去VR產品作為遊戲工具是成功的,但作為更通用的工具其顯示品質是不過關的。

當一台MR可以帶來如此高的清晰度,虛擬螢幕融入現實世界已經不那麼"違和",變得"絲滑",可以達到亦幻亦真的交融感。

空間建模以及強大晶片處理能力

身為CTO, 萬美君非常關注並推崇這次Vision Pro空間建模這塊的突破。

「空間建模,3D建模這塊以及這個位置感知蘋果也是花了大力氣的,主要體現在兩個方面,空間3D建模及空間定位。」萬美君表示,空間位置和環境感知上這次蘋果做了非常多的工作。

為了捕捉這些訊息,Vision Pro用了整整12個攝影機。

「你的相機需要做到軟硬體同步,你的拿到資料是完全同一時刻的,那麼拿了這些資料需要做拼接,因為每個攝影機的畫幅是有限的,而且需要一個高幀率的情況下去完成運算,至少要保證120幀甚至更高,這為了防止在佩戴時出現眩暈感,所以這個對它的硬體處理晶片提出了更高的要求,這次蘋果出了R1晶片專門去處理攝影機相關的運算和定位。」萬美君說到。

這次Vision Pro用了兩塊蘋果自研的晶片M2和R1,M2晶片是蘋果用在筆記型電腦上的晶片,其性能強悍不用多介紹。 M2處理器主要負責運作VisionOS ,執行先進的電腦視覺演算法等。蘋果R1協同處理器則主要負責處理來自12個相機,5個其他類型感測器,6個麥克風的資料訊號,加速對於感測器資料的處理,降低延遲,以確保內容呈現即時性,並降低主CPU的負載,降低功耗

PICO產品經理胡熙坤接受澎湃新聞記者採訪時也談到了晶片晶片處理能力對產品性能的重要性。

「這支晶片它保證了低延時和低頻寬的運行,這其實是非常重要的一個指標了,蘋果官方宣稱是12毫秒,那這個12毫秒你就能夠帶著那個東西全天使用,並且不妨礙你去做日常生活中其他事情,這是非常重要的。」胡熙坤表示,今天Vision Pro帶來諸多的體驗都是蘋果長期在消費電子領域的積累沉澱,有些技術當初並不是專門為Vision Pro儲備,而且用在其他產品線上,這次拿到了Vision Pro上來使用。

胡熙坤認為,在空間建模這塊其他廠商與蘋果還有一定距離,這次看了Vision Pro效果後,大家應該都會在這一領域加大力氣去做。

萬美君對其他廠商跟進空間建模上展現了自己的樂觀判斷,"中國廠商在算法上其實並不比蘋果差多少,比如很多自動駕駛領域也用了大量類似的技術。"

丟掉手把改用手勢辨識和眼球追蹤

如果說這次Vision Pro是帶來了一場顯示輸出的重大革新,那麼輸入端的創新也同樣值得稱讚。

以往VR產品的手把被丟掉了,而是採用了眼球追蹤、手勢、語音等多種融合互動方式。由LED和紅外線攝影機組成的眼動追蹤系統,可以將不可見光圖案投射到每隻眼睛上,能夠判斷使用者目前註視的位置。這使得用戶無需使用手柄控制,只需透過注視來瀏覽應用程式圖標,輕點選擇,輕掃滾動,或發出語音指令即可操控。

胡熙坤表示,PICO 4 Pro上也用了眼球追蹤和手勢辨識技術,對技術方向的認定大家都沒有分歧。

「蘋果的技術都是長期累積的效果,蘋果2017年收購德國SensoMotoric Instruments(SMI),這次把領先的眼球追蹤技術儲備給了VR產品線。」胡熙坤表示,PICO也堅定看好這項技術,會持續投入。

有些事情交給蘋果更為合適,強大的品牌號召力加上高淨值用戶,使得蘋果在推廣新技術應用時相對容易。

「手勢互動這件事情要做得很好,也是要有條件的,其他品牌可能不具備這樣的定價能力,手勢交互需要的硬體週邊都相對較貴。我們更傾向於用一個親民的成本去完成一件事情,所以更多以攝影機演算法的迭代,但對蘋果來說,不止是演算法,它的攝影機陣列針對手勢都做了很多增強的,這導致它成本非常貴。」胡熙坤說,蘋果這樣做把業界未來三、四年想要的東西提前呈現了出來。

丟掉手把的好處是非常明顯,這拓展了MR產品的邊界,從以往主要在特定場景中使用,到現在走出特定場景,到更多日常生活中場景去佩戴和體驗。

這幾天,不少用戶分享了花式Vision Pro體驗,例如地鐵公車上使用,之所以能夠這樣公眾場所佩戴是因為產品還有另一功能,與虛擬實境暢遊時隨時可以回到現實世界與週邊的人交流。

Vision Pro外螢幕EyeSight外螢幕內部

一旦有其他人對你對視,你瞬間就可以看到對方,Vision Pro外屏EyeSight顯示器也看到你的臉和眼睛。當然,看到的臉是虛擬的,空間建模虛擬出來的人臉。

Vision Pro會透過內部相機和感測器產生你的人臉,然後VisionOS會將人臉"切片並插值",接著渲染在EyeSight顯示器上,影像透過一層透鏡再通過一層鏡片,最終實現3D人臉影像的視覺效果。

「這就很蘋果,其他廠商可能不會這樣做,但蘋果產品往往為了人性化的體驗,去做這些事。」胡熙坤表示。

胡熙坤表示,對MR來說,透過攝影機VST(視訊透視)而非光學鏡片來捕捉外部現實世界資訊這個技術方向也是確定的,「我們也看到佩戴Vision Pro的用戶在把球拋向空中接球遊戲體驗跟現實世界玩這個遊戲效果差不多,這也意味著通過攝像頭視頻傳出的時延是可以接受的。"

在馬傑思看來,蘋果Vision Pro完成了輸出、輸入以及互動的重大革新,這也意味著MR產品形態完成了一次蛻變,躋身通用算力工具的行列,與筆記型電腦、手機、平板電腦等相提並論,可以成為人們的生產力工具,當然這是一個長期的過程,並不是說馬上就能完成這個蛻變。

當然,所有的硬體實現都是為了消費者最終的體驗,而消費者體驗是依靠各類應用來作為媒介。所以,生態非常重要,甚至比科技還要重要得多。

馬傑思認為,Vision Pro推出後,許多非遊戲類的開發者加入應用開發的行業,此外,其他的iOS應用開發者很容易把應用程式放在Vision OS上,移植成本非常低,這極大豐富了生態。以2013年算起,差不多十年時間,XR驗證了在娛樂領域能夠做到一個什麼樣的狀態,算是一個里程碑,「 Meta實際上在娛樂領域出貨量與任天堂差不多了」。

「下一步是把XR變成一個通用計算平台,也就是通用計算機。Vision Pro代表行業的下一個​​十年,未來十年大家探討怎麼樣把XR變成一個更好的計算機,從一個移動計算機,到空間計算機。」馬傑思表示。

來源:澎湃新聞

編輯:向彥紅



2024強勢開局!江淮汽車1月銷量年增51.91%

歐盟又想對華"下戰書",開打前,德國先表態,朔爾茨或4月訪華

A股兔年收官日:三大指數均漲超1%,成交額再破萬億

湖北下的是雨不是雪?為啥下雨高速公路也會走不了?比下雪更麻煩!

滬指三連陽迎兔年收官,兩市逾千股漲超10%,微盤上演暴力反彈

高階主管、保薦集體融券做空自己,新銳股份:這都是我3年前玩剩下的

BMW發表2025款5系列旅行車,提供多種動力選擇

A股兔年收官:滬指漲1.28%,兩市超500股漲停

搭載54.5度磷酸鋰電池,五菱星光電動版續航里程申報資料曝光

春風送暖,被連續殺跌的微盤股總算了一口氣

留言

此網誌的熱門文章

160年銀行巨頭開盤跌近30%!專家:或將倒閉!存款1.74萬億元,去年還是世界500強

ThinkPad所有系列分類

選購電子書閱讀器/電紙書要關注這5點