[情報] 目標解析度世界第一的Varjo

作者: covenant (藍悠)   2018-02-24 10:19:15
http://www.moguravr.com/varjo-vr-2/
之前就有看到號稱要達到人眼水準的Varjo在募資,預計2018年底前發售。
https://www.meson.tokyo/blog/2018/1/27/vrvarjocmo
最近看到這篇採訪,看起來效果的確是挺驚人?
製作者原本是來自於Nokia,當初Hololens也運用了被微軟買下的Nokia的基礎技術。
據說解析度比Oculus和Vive要來得高60倍。
https://goo.gl/e6f81A 上方是Varjo,而下方是Oculus的畫面。
採訪中有提到技術內容,我也是看得半知半解就是XD"
https://goo.gl/ReZ3AM
似乎是說在透鏡和銀幕之間設置OLED顯示器和可將顯示器反射的鏡子,並且透過視線追蹤
把握使用者正在看哪,在OLED上顯示視線所及之處的對應影像,並利用鏡子調整角度來讓
對應影像能正好照射在視線所及之處。
他們也有預計開發AR眼鏡的樣子,據採訪者所說也是效果驚人?不同於Hololens是透過鏡
片直接看到現實世界,而是像VR那般覆蓋使用者所有的視界,並透過攝影機拍下的畫面來
讓使用者看到現實世界。
不過解析度這麼高的VR頭戴式顯示器沒有打算販賣給一般消費者的樣子,是定位為高價位
向企業販售,大概在16萬到22萬台幣之間?
也許未來會有機會在遊樂園之類的地方體驗到也說不定XD
作者: terrytina19 (翼)   2018-02-25 23:54:00
想買 等中樂透再說...
作者: zebb   2018-02-25 23:52:00
這還是注視點渲染概念沒錯,要畫超高解的只有中央那塊OLED的區域,旁邊相對於中央是低解的
作者: kuma660224 (kuma660224)   2018-02-25 19:58:00
注視點渲染只是解約繪圖效能。它要細緻還是需要超高解析oledfoveated只是讓外圈用低解析度繪製內圈還是受限面板實體ppi
作者: shamanlin (點藏必須死)   2018-02-25 16:30:00
根據資料圖形繪製那是最不用擔心的部分,最大的兩個缺點一個是眼動追蹤的精度與回饋速度,另一個注定悲劇的是只要牽扯到機械結構就直接GG了,目前技術不存在可以讓折射鏡片的機械結構能即時跟上眼球動作
作者: zebb   2018-02-25 23:56:00
他的微型OLED只佔整個FOV15%,若要全部100%都畫這種解析度,目前消費市場的硬體不可能達成的,等個10年看看有沒有機會我認為這應用眼控的精度不用很準,主要還是機構問題待克服
作者: nfsong (圖書館我來了)   2018-02-24 11:22:00
好屌
作者: samhou6 (好人™ ~SAM~)   2018-02-24 12:24:00
60倍? 認真?
作者: kuma660224 (kuma660224)   2018-02-24 12:39:00
內文寫那oled 1個成本要10萬日幣...這即時運算,大概不是一般消費電腦能跑的動,是用在例如商業飛行模擬器電腦可能是大機櫃插很多顯卡。
作者: shamanlin (點藏必須死)   2018-02-24 13:24:00
內文沒有的結構沒有說得很清楚,但應該不是3F想的那樣這不是真的弄一個超高DPI的OLED,自然也不需要更多圖形運算,傳統是放一個螢幕然後你眼睛可以到處看,這方法是利用眼動追蹤跟鏡子折射,讓你眼睛好像到處看但其實固定在一個範圍,用傳統方式看一個物件可能200x200他就能讓你在感覺大小不變的情況下看到400x400但這種設計有很明顯的兩大缺點,基本上我認為是悲劇啦
作者: covenant (藍悠)   2018-02-24 13:51:00
缺點@@?
作者: GameGyu (GameGyu)   2018-02-24 22:29:00
沒誤解的話,其實就是一片投射到另一片...
作者: zebb   2018-02-25 00:00:00
這半年以上了,原理其實就是注視點渲染的概念,利用一片高解的微型OLED,再加上巧妙的機構與眼球追蹤,讓你不管看哪視野中間都是那塊微型OLED構想很好,做的完美效果一定不錯,但牽涉到機構就不知道實際做出來的效果如何了。另外是有機構應該更不耐摔微型OLED常見於高階無反相機觀景窗內。這樣做或許與注視點渲染也有相同問題,就是遊戲應用需特別支援才能使用此功能這篇不錯 https://itw01.com/2LTGEP6.html
作者: Litfal (Litfal)   2018-02-25 00:32:00
概念不錯,但反應速度應該很難達成除了機構要跟上眼球,眼球追蹤資料還要送給應用程式→回傳注視區的高解析圖像→繪製 這樣的一個過程會帶來延遲
作者: peacedove (林帛亨加油!!!)   2018-02-25 05:48:00
我有看過,現在prototype的區域很小一塊,但真的很清楚
作者: kuma660224 (kuma660224)   2018-02-26 10:00:00
15%那根本沒幾度嘛人眼看VR連目前100度都還嫌太小
作者: zebb   2018-02-26 11:10:00
大概就像這個吧 https://goo.gl/KmUYvA 沒實際體會不知效果說不定夠用了?有試過的peadedove大覺得呢?另外,有夠巧 蘋果上週公佈個新專利,內容幾乎和varjo完全相同,不知有沒有投資 https://yivian.com/news/41880.html等等,蘋果的專利是去年8月提交,但varjo在這之前就公布了所以是被蘋果致敬? XD阿 抱歉,打錯字,是peacedove大才對,sorry~
作者: nfsong (圖書館我來了)   2018-02-24 19:22:00
好屌
作者: samhou6 (好人™ ~SAM~)   2018-02-24 20:24:00
60倍? 認真?
作者: kuma660224 (kuma660224)   2018-02-24 20:39:00
內文寫那oled 1個成本要10萬日幣...這即時運算,大概不是一般消費電腦能跑的動,是用在例如商業飛行模擬器電腦可能是大機櫃插很多顯卡。
作者: shamanlin (點藏必須死)   2018-02-24 21:24:00
內文沒有的結構沒有說得很清楚,但應該不是3F想的那樣這不是真的弄一個超高DPI的OLED,自然也不需要更多圖形運算,傳統是放一個螢幕然後你眼睛可以到處看,這方法是利用眼動追蹤跟鏡子折射,讓你眼睛好像到處看但其實固定在一個範圍,用傳統方式看一個物件可能200x200他就能讓你在感覺大小不變的情況下看到400x400但這種設計有很明顯的兩大缺點,基本上我認為是悲劇啦
作者: covenant (藍悠)   2018-02-24 21:51:00
缺點@@?
作者: GameGyu (GameGyu)   2018-02-25 06:29:00
沒誤解的話,其實就是一片投射到另一片...
作者: zebb   2018-02-25 08:00:00
這半年以上了,原理其實就是注視點渲染的概念,利用一片高解的微型OLED,再加上巧妙的機構與眼球追蹤,讓你不管看哪視野中間都是那塊微型OLED構想很好,做的完美效果一定不錯,但牽涉到機構就不知道實際做出來的效果如何了。另外是有機構應該更不耐摔微型OLED常見於高階無反相機觀景窗內。這樣做或許與注視點渲染也有相同問題,就是遊戲應用需特別支援才能使用此功能這篇不錯 https://itw01.com/2LTGEP6.html
作者: Litfal (Litfal)   2018-02-25 08:32:00
概念不錯,但反應速度應該很難達成除了機構要跟上眼球,眼球追蹤資料還要送給應用程式→回傳注視區的高解析圖像→繪製 這樣的一個過程會帶來延遲
作者: peacedove (林帛亨加油!!!)   2018-02-25 13:48:00
我有看過,現在prototype的區域很小一塊,但真的很清楚
作者: shamanlin (點藏必須死)   2018-02-26 00:30:00
根據資料圖形繪製那是最不用擔心的部分,最大的兩個缺點一個是眼動追蹤的精度與回饋速度,另一個注定悲劇的是只要牽扯到機械結構就直接GG了,目前技術不存在可以讓折射鏡片的機械結構能即時跟上眼球動作
作者: kuma660224 (kuma660224)   2018-02-26 03:58:00
注視點渲染只是解約繪圖效能。它要細緻還是需要超高解析oledfoveated只是讓外圈用低解析度繪製內圈還是受限面板實體ppi
作者: zebb   2018-02-26 07:52:00
這還是注視點渲染概念沒錯,要畫超高解的只有中央那塊OLED的區域,旁邊相對於中央是低解的
作者: terrytina19 (翼)   2018-02-26 07:54:00
想買 等中樂透再說...
作者: zebb   2018-02-26 07:56:00
他的微型OLED只佔整個FOV15%,若要全部100%都畫這種解析度,目前消費市場的硬體不可能達成的,等個10年看看有沒有機會我認為這應用眼控的精度不用很準,主要還是機構問題待克服
作者: kuma660224 (kuma660224)   2018-02-26 18:00:00
15%那根本沒幾度嘛人眼看VR連目前100度都還嫌太小
作者: zebb   2018-02-26 19:10:00
大概就像這個吧 https://goo.gl/KmUYvA 沒實際體會不知效果說不定夠用了?有試過的peadedove大覺得呢?另外,有夠巧 蘋果上週公佈個新專利,內容幾乎和varjo完全相同,不知有沒有投資 https://yivian.com/news/41880.html等等,蘋果的專利是去年8月提交,但varjo在這之前就公布了所以是被蘋果致敬? XD阿 抱歉,打錯字,是peacedove大才對,sorry~
作者: peacedove (林帛亨加油!!!)   2018-02-28 13:28:00
現在的大小要拿來應用完全不夠,但他們有workaround 的方法(但我不是很懂)。然後我看到的已經是一年前的舊產品了,他們現在應該有更好的
作者: kuma660224 (kuma660224)   2018-02-28 16:47:00
蘋果的專利看起來只有應用foveated rendering跟活動鏡片折反射沒有關係。是直接塞8k螢幕用foveated注視渲染產生內外圈不同精細畫像資料來餵用意應該是讓8k螢幕不需穿越時空門來的超級獨顯Foveat概念易懂,如何具體實作就是專利想解決的顯示面板部分則另一回事。即使1K螢幕也能得利
作者: peacedove (林帛亨加油!!!)   2018-02-28 05:28:00
現在的大小要拿來應用完全不夠,但他們有workaround 的方法(但我不是很懂)。然後我看到的已經是一年前的舊產品了,他們現在應該有更好的
作者: kuma660224 (kuma660224)   2018-02-28 08:47:00
蘋果的專利看起來只有應用foveated rendering跟活動鏡片折反射沒有關係。是直接塞8k螢幕用foveated注視渲染產生內外圈不同精細畫像資料來餵用意應該是讓8k螢幕不需穿越時空門來的超級獨顯Foveat概念易懂,如何具體實作就是專利想解決的顯示面板部分則另一回事。即使1K螢幕也能得利
作者: zebb   2018-02-28 10:07:00
不對唷,你仔細看看蘋果專利內容,對於顯示面板組件有寫The input-output devices may include one or moredisplays ... may be mounted within a head-mounteddisplay chassis...這份專利是更廣泛的,不管是varjo的移動反射鏡做法,或者直接移動mini-OLED面板,或者僅用一整片5吋的mini-OLED(這面板可能要64K甚至更高的解析度),都涵蓋在這專利內!依照varjo去年六月就開始看到消息,以及蘋果在八月提交此專利的時間,加上這專利的內容來看,我認為很有可能蘋果做專利蟑螂,看到varjo的idea就去申請個更泛用的專利且包含varjo的做法。當然也不排除真的蘋果是自己想到的啦,只是蘋果致敬其他人也不是第一次了...總之幫varjo QQ,至少歐洲區淪陷了 XDvarjo新出爐的through the lens https://goo.gl/PNC8yt看起來FOV不大,中間區域如果跟著注視點跑或許堪用...
作者: kuma660224 (kuma660224)   2018-02-28 11:51:00
那英文只說可包含1或多個顯示器裝載於頭戴裝置內。從哪裡看出有可移動的東西?它移動的只是Foveat繪圖的聚焦點硬體直接用到8Kx8K超細顯示不用什麼機械位移折射的奇淫巧技是用高低解析的兩個buffer傳輸資料用圖形裝置將兩者融合成一個。顯示在超高檔8k顯示器上。要在這麼小空間做到8k甚至不只一個它很可能是用到研發中的microled
作者: zebb   2018-02-28 14:46:00
我說的是varjo符合他的專利內容,專利並沒有說面板不能移動"移動的只是Foveat繪圖的聚焦點",不就是varjo的作法嗎另外資訊有點奇怪,編號14的整個display和編號50的注視點區域都是8Kx8K?如果50是8K,整個14應該是64K之類了吧
作者: kuma660224 (kuma660224)   2018-02-28 15:16:00
varjo重點是用移動的機構,去跟隨視線焦點而顯示如果只是講foveated,早就有其他實作方案
作者: zebb   2018-02-28 15:21:00
如果50注視點是用8K,整個display 14也是用8K,代表50是第二片不同於14的面板,那麼要讓這面板移動到注視點,有很多方法,varjo是其中一個我說的編號50 14是看這個https://goo.gl/2Mrooo
作者: kuma660224 (kuma660224)   2018-02-28 15:27:00
14是整個8k顯示器,50,52,54是標示foveated不同影響因為高解析與低解析需要漸變融合54已經完全是100%低解析,50小框以內100%完全高解析,52是兩者漸變範圍繪圖晶片產生1全景低解析輸出,再產生1高解析局部輸出如眼球往左上角看,50/52整個往左上角移動其他部位全用低解析度取代,反正是眼角餘光這個50/52大小應該可調整。越小越省效能
作者: zebb   2018-02-28 15:43:00
似乎是你說的對,我沒細看文字只看圖片,被FIG.4內的#50說明誤導了,他不該寫8Kx8K而是該寫Full resolution才是所以是整塊8K面板,注視點畫全解析度,其他部分畫低解
作者: kuma660224 (kuma660224)   2018-02-28 15:45:00
其實它這做法讓我很讚嘆。原本我以為的Foveated繪圖實作,是全在gpu搞定。
作者: zebb   2018-02-28 15:45:00
細看文字後確實應如你所說,抱歉阿 orz如此確實和varjo不同,應沒有專利問題,我收回蟑螂~~
作者: kuma660224 (kuma660224)   2018-02-28 15:47:00
傳輸時已是跟面板相同解析度,只是繪圖時取巧
作者: zebb   2018-02-28 15:47:00
不過GPU還是得知道50區域才能畫full resolution吧?你是說GPU畫8K?那不就沒有省到效能?
作者: kuma660224 (kuma660224)   2018-02-28 15:48:00
但高解析[email protected]要怎麼傳輸是個問題
作者: zebb   2018-02-28 15:48:00
目前要畫[email protected]都有困難了,畫8K就沒有注視點渲染的意義了
作者: kuma660224 (kuma660224)   2018-02-28 15:55:00
Apple想到的做法似乎是傳輸1低解析圖(舉例3K)再傳輸1點對點圖(舉例也3k)只佔畫面幾分之一兩張圖在顯示器用硬體合成8K畫面,視線焦點看到是點對點圖所以高解析,外圍是低解析顯示在8k面板這樣只要很少傳輸頻寬就搞定8k輸出顯示。pimax的8K, 後來就傳出其實傳輸輸出時只有5KPimax只是用8k面板顯示5K畫面來減少紗窗因為即使gpu超強,真8k用線材傳輸也是問題
作者: zebb   2018-02-28 16:20:00
pimax8K是用兩個4K面板,輸出1440P單眼再升上去所以注視點渲染還是得在PC的GPU做才行吧
作者: kuma660224 (kuma660224)   2018-02-28 16:22:00
GPU內搞定foveat做法類似 goo.gl/3WeGz9GPU要知哪邊需完整解析度,其他區可縮水到1/N最終傳輸給顯示器仍會scale各區域為正常解析度正常繪圖時每個像素可能經歷成千上萬的運算指令把左上角當成1/4低解析,該區就只要1/4運算量。雖然將它算完放大回正常尺寸時也消耗一點運算量,但放大是透過硬體,每像素只耗1個tex2d()指令幾乎無感,所以GPU透過分區不同解析度,再輸出4-8K會比畫原生4-8K省效能。但傳輸4-8K到面板的頻寬沒省Gpu全程搞定方案當解析度與fps越高,會撞上傳輸問題Apple也用gpu做不同解析度的注視點渲染但gpu只渲染,兩種較小暫存畫面用線傳輸給顯示器,由顯示器內某種硬體scaler去合成, 最終輸出成8k就可能用現有HDMI或DP去搞定[email protected]而pimax沒這技術也沒Foveated,只能硬幹。GPU與傳輸頻寬兩個瓶頸無法克服,只能向解析度妥協。不管如何實作,Foveated VR繪圖最後輸出都像這樣goo.gl/eS2sJ6 中心有某區塊是100%點對點往外一個範圍是漸變區,最外圍大面積是糊的低解析看這圖再回頭看專利示意圖,就更清楚了Apple強在它投資是一條龍,從軟體到SOC到超高解析面板所以能提出這種方案,可能要訂做配合的顯示器
作者: zebb   2018-02-28 17:39:00
懂了,簡單說就是用8K面板,注視點追蹤,叫GPU畫注視點附近相對整個FOV8K下小區域的1對1解析度(假設20%就是約1.5K),再畫其餘整個FOV的低解畫面(假設2K),傳輸這兩個畫面進頭盔,再用硬體搭配注視點位置來合成並upsacle成8K來顯示這樣。謝謝解說,我被FIG.4那個小區域的8Kx8K誤導了 XD不過這樣說來也和varjo概念是一樣的,畫兩張高解低解,只是varjo像你所說沒這技術所以只能如此實作
作者: kuma660224 (kuma660224)   2018-02-28 22:39:00
apple那需要未來的8k面板varjo可能不需要未來的面板因為它只要很小一塊用在高解析局部所以現在就能生出原型不過我沒看到它解決視野外圍顯示問題外圍眼角餘光也是需要面板來顯示它用鏡子折射的似乎只有小小高解析的但VR不能視角小到只秀Foveat區域啊?
作者: zebb   2018-02-28 22:57:00
他用兩塊面板,全視野用低解的,注視點區用高解的mini-OLED
作者: sasado (sasado)   2018-04-11 20:39:00
解析這麼高,一般PC一定跑不動
作者: zebb   2018-04-12 09:17:00
並不會,加上注視點渲染後整體沒畫多高

Links booklink

Contact Us: admin [ a t ] ucptt.com