※ [本文轉錄自 VR 看板 #1Nk-8bfb ]
作者: orze04 (orz) 看板: VR
標題: [閒聊] 【GC 16】體驗以最低限度硬體讓聲音在現
時間: Tue Aug 23 13:41:53 2016
文章出自 GNN新聞 http://gnn.gamer.com.tw/2/136372.html
原文出處 4Gamer.net http://www.4gamer.net/games/999/G999902/20160818085/
【GC 16】體驗以最低限度硬體讓聲音在現實世界中定位的「Waves Nx」
　　以專業等級音效處理軟硬體聞名的 Waves Audio（以下簡稱為 Waves），在今年 3
月的遊戲開發者大會（Game Developers Conference 2016）上，宣布使用耳機等裝置時
，能夠利用聲音在現實世界中定位的「Nx」技術，將會對應 VR 應用，推出針對玩家，支
援頭部位置偵測的 3D 音效系統。
　　之後公司便在募資網站 Kickstarter 上募集 Nx 用頭部位置偵測模組「Nx Head
Tracker」的開發資金，並且在成功募集到目標金額後，便邀請媒體「配合科隆遊戲展，
除了 Nx Head Tracker 外，還會一起推出運用 Webcam 鏡頭執行頭部偵測功能的相關軟
體測試，如果有機會可以前來體驗」。
　　難得有幸被公司招待，所以這次就要簡單整理一下測試報導，和大家介紹這套裝置的
使用體驗。
可以強化 VR 投入感的 3D 音效
　　筆者首先試玩的遊戲，是 HTC 製頭戴裝置「Vive」的 VR 壁球風格遊戲《Racket:
Nx》。
　　《Racket: Nx》以一款使用房間規模場地的壁球風格遊戲來說，其實設計頗為單純。
玩家要站在呈現圓筒狀的虛擬空間當中，使用球拍（Vive 專用控制器）來擊球，讓球命
中設置在牆壁上的目標。雖然遊戲有時間限制，但是只要球成功擊中目標，就可以延長限
制時間，所以必須要盡可能精確擊球打中目標，賺取更多時間和更高分數。
　　雖然除此之外還有不少比較細節的規則設定，但整體來說是很單純的作品。
但是這個規則單純的《Racket: Nx》，一但開啟了 Nx 的頭部位置偵測 3D 音效功能以後
，在玩遊戲時的感覺可以說是截然不同啊。像是球在空中飛行的聲音、擊中牆壁時會發出
的聲響等聲音，全部都會從球存在於虛擬空間當中的位置傳來，所以玩家也能以此為輔助
，更直接把握到球目前在哪個方位。
　　雖然說因為球速極快，還不習慣遊戲時，就算能靠音效來判斷球的位置，也還是有可
能無法追上，更不要說拿起球拍回擊了，但是非常真實的音效，的確能讓玩家更能投入遊
戲。
　　《Racket: Nx》遊戲可以在「Steam VR Store」免費下載試玩版，如果有 Vive 裝置
，而且房間大小也能使用房間規模場地 VR 程式的話，請大家一定要親自試試。
　　另外以 Vive 搭配 Nx 的應用，筆者還試用了另外一種，在虛擬空間當中設置音源，
並且在附近自由移動的展示。因為這個應用並沒有遊戲性，也就是所謂的技術展示，所以
更能夠清楚掌握聲音的來源、位置，和音源移動的情況。
以智慧型手機＋α 來實現 3D 音效
　　在經過上面的體驗後，筆者已經很清楚了解 VR 和 Nx 搭配使用的效果極佳了，但話
雖如此，要說到「擁有 Vive 裝置，而且住家環境能充份活用房間規模場地 VR 應用」的
玩家，恐怕並不是那麼親民的條件吧。也就是說如果只以上面的體驗來說，大概會讓人覺
得「雖然是很強啦，但和我沒關係吧」。
　　可是 Nx 的實力，就算不搭配 VR HMD，也一樣能充份發揮。實際上就筆者個人感覺
，反而是在沒有使用 VR HMD 時，才更能讓人感覺到其厲害之處。
　　所以說在體驗過應用 Vive 的展示之後，接下來要使用的，就是在網站上募集資金的
產品 Nx Head Tracker 了。
　　這是一個可以裝在普通耳機或是耳麥上的小型裝置，擁有偵測目前頭部方位的功能。
只要使用這個裝置，就可以和應用 Vive 的展示一樣，模擬出更自然的音場，是 Nx
Head Tracker 最大的賣點。
　　展示機的組成可以說是非常簡單，只有一台智慧型手機，一組耳機或是耳麥，再加上
一個 Nx Head Tracker。已經存在智慧型手機中的音源有先經過環繞音響處理，但除此之
外似乎並沒有特別針對 Nx 多加處理過。
　　而在這個狀態下，只要在智慧型手機上開啟 Nx 效果處理器，就可以從很普通的雙聲
道耳機中，聽到很有立體感的聲音。
　　就筆者個人感覺來說，應該是「從前方傳來的聲音」，聽起來會比較像是「從前方略
高處傳來的聲音」，但左右兩邊則是完全沒有什麼不對勁的感覺。這次準備的音樂是演唱
會的錄音，聽起來甚至連台下歌迷的歡呼聲都非常自然，完全形成一個「音域空間」。
　　附帶一提，這次展示就如同前面提到的一樣，是使用經過環繞立體聲處理的音源，但
就算是只用普通雙聲道收音下的音源，似乎也會聽起來更加自然。當然也是因為有頭部位
置偵測功能的關係。
利用 Webcam 重現 3D 音效!?
　　最後一個展示，則是讓人體驗利用 Webcam 來執行頭部位置偵測的技術。
　　這個展示使用的裝置也很簡單，需要準備的器材只有電腦和 Webcam 以及耳機（或耳
麥）而已。只要在電腦上執行由 Waves 推出的軟體「Nx app for Windows」，軟體就會
透過 Webcam 來判斷使用者目前頭部面向何方，並且配合頭部方位來重現出「正確」的音
場。再將處理過的音效從耳機裡播放出去。
　　只需要透過 Webcam，就可以即時截取到使用者頭部方向和表情的技術，其實大家應
該都在「Facerig」之類的技術中見識過了才對。
　　而用在音效上，雖然感覺會需要更高的精準度，但是根據 Waves 表示，實際測量誤
樂好像不滿 1 度。實際上使用這個裝置來體驗 Nx 的感覺，和使用 Nx Head Tracker 的
確是幾乎完全一樣。
　　只不過人類這種生物的欲望實在是無邊無盡。既然「只要準備好 5.1 聲道或 7.1 聲
道的環繞立體聲音源，就能透過這個系統，聽到更有立體感的音效」的話，那就算不是
VR 遊戲，也能體驗到更立體，更自然的遊戲音效了對吧？
　　而在聽到筆者提出這種問題之後，他們就拿出重製版《毀滅戰士》，讓筆者使用這個
裝置來體驗看看。
　　在實際試玩過後，就結果來說，有沒有使用 Nx app for Windows 並且開啟 Nx 功能
，玩遊戲時得到的體驗可以說是完全不同到令人吃驚。因為使用的是動作很激遊戲，所以
當然是沒辦法要求到「光聽腳步就知道敵人是從哪個方向走來」這種程度－－其實習慣的
話搞不好真有可能－－，但是給玩家的臨場感和投入感真的是完全不一樣。
　　而且這次是使用所謂遊戲筆電來執行遊戲，如果再加上大尺寸螢幕，想必還能讓效果
更上一層樓。除了 FPS 之外，也應該還有像是競速遊戲或是飛模遊戲等等，許多不同類
型的遊戲適合搭配使用。
　　但話雖如此，音聲延遲是個很令人在意的問題。因為要先透過 Webcam 來偵測頭部位
置，然後再基於偵測結果來處理聲音資料，所以對於電腦的負荷一定是比普通播放音源還
要吃力。
　　而就這次的實際體驗，應該是使用能對應 VR 的高性能遊戲筆電，所以是沒有感覺到
很明顯的延遲，也就是說如果電腦性能足夠的話，可能是不太需要在意這個問題也說不定
。只不過有關於這個部份，應該還是要等完成版本釋出之後再實際測試才能下定論。
Nx 的魅力就是能以現有設備實現「讓聲音配合現實世界定位」
　　Waves 在今後，預定會依照當時在募資網頁上提出的時間表，以 99 美元的價格推出
NX Head Tracker 和 Nx app for Windows 同捆的套裝組合，並且以推出廉價版 NX
Head Tracker 為目標，和電腦以及智慧型手機製造商交涉，希望讓 Nx 系統可以成為裝
置中的預載軟體。
　　而使用 Webcam 的電腦版，對於藍芽裝置會碰上審核問題的日本市場來說，應該會是
目前最方便使用的軟體技術才對，但很可惜的是目前電腦版的發售時間和價格都尚未確定
。
　　另外筆者還有提問「既然使用攝影機就可以偵測頭部位置，那如果用智慧型手機的內
部鏡頭，就算不搭配 Nx Tracker 使用，應該可能組成 Nx 系統才對吧？」，而回答則是
「理論上應該可能，實際上目前也正在檢討當中」。
　　只不過如果是搭配智慧型手機來使用，在看影片或是玩遊戲時一定需要盯著畫面看（
也就是內部鏡頭一定是朝向玩家），而另一方面在播放音樂時，又多半是把智慧型手機放
在口袋裡面等地方。所以目前應該還是要搭配 Nx Head Tracker 使用吧。
　　更為擬真，更能讓人投入的體驗，雖然是擁有吸引人的魅力沒錯。但是不管是多有魅
力的體驗，想要讓人克服「麻煩」這個障礙，也是一直都很困難。
　　但就算是在這個前提之下，光是靠現在幾乎是筆電標準配備的 Webcam，就可以實現
3D 音效的技術，想必也很能讓人克服「麻煩」，而擁有充份普及化的潛力。
　　在今年的遊戲開發者大會上，還同時發表將會對應 Wwise 以及 FMOD 等音效中介軟
體，也許玩家可以在不遠的將來，就看到活用 Waves Audio 新技術的遊戲出現在市面上
。