Orange Lab實驗室
Orange Lab是Orange集團(tuán)的前沿技術(shù)研發(fā)中心,致力于提升電信服務(wù)品質(zhì)與數(shù)字化體驗革新。在法國雷恩Atalante園區(qū)的實驗室中,一個旨在增強(qiáng)虛擬現(xiàn)實 (VR) 體驗的項目已正式啟動。
項目目標(biāo)
本項目旨在通過動態(tài)追蹤技術(shù)實現(xiàn)兩大創(chuàng)新:
1. 空間音頻實時混音:對移動表演者進(jìn)行精準(zhǔn)定位,實現(xiàn)三維聲場動態(tài)重構(gòu)。
2. 智能燈光追蹤系統(tǒng):基于演員位置數(shù)據(jù)實現(xiàn)自動化燈光調(diào)控。
該技術(shù)方案可廣泛應(yīng)用于VR音樂會、體育賽事直播、劇場演出等場景,同時支持杜比全景聲、雙耳渲染及高階Ambisonic格式的電視節(jié)目與播客制作。該項目對于 VR 現(xiàn)場音樂、體育及戲劇應(yīng)用具有重要意義。
核心方案
Naostage K SYSTEM無信標(biāo)追蹤系統(tǒng)
● 基于純視覺的識別技術(shù)
● 無需任何物理信標(biāo)或可穿戴設(shè)備
● 支持多目標(biāo)動態(tài)追蹤
項目進(jìn)展
該項目邀請了藝術(shù)家 June Caravel 與 Gwendolyne Coronado進(jìn)行表演,其位置信息被傳輸至沉浸聲服務(wù)器進(jìn)行實時空間化處理,并同步至燈光系統(tǒng)實現(xiàn)自動追蹤。
主要流程如下:
1. 系統(tǒng)設(shè)置階段
● 在工作室內(nèi)部署Naostage K SYSTEM,設(shè)備安裝高度為 3.50 米,距離源的最小距離為 3 米;
● 通過 OSC 協(xié)議將空間坐標(biāo)數(shù)據(jù)傳輸至沉浸聲服務(wù)器;
● 同步進(jìn)行VR 360攝像機(jī)進(jìn)行捕捉與Ambisonic音頻采集。
2. 制作與錄制階段
● Kariba Productions團(tuán)隊使用12K VR攝像機(jī)完成“Ma star à moi”作品的拍攝;
● Virtuel Audio的錄音師Eric Munch負(fù)責(zé)音頻錄制。
3. 系統(tǒng)集成驗證
項目結(jié)果正如預(yù)期——實時追蹤系統(tǒng)非常高效、音頻與燈光系統(tǒng)無縫集成。藝術(shù)家的追蹤數(shù)據(jù)使實時音頻空間化成為可能,無需使用信標(biāo),從安裝到最終呈現(xiàn)沒有任何障礙。此外,Naostage 支持OSC協(xié)議,與沉浸聲服務(wù)器完美協(xié)同工作,從而確保聲音與燈光系統(tǒng)呈現(xiàn)最佳效果。
Orange Lab 利用Naostage的頂尖的解決方案來增強(qiáng)實時 VR體驗,這一項目展示了無信標(biāo)追蹤技術(shù)在 VR 現(xiàn)場表演應(yīng)用中的高效與創(chuàng)新。借助 Naostage 的自動追蹤和沉浸聲等多項先進(jìn)前沿技術(shù)和專家智慧,觀眾體驗到了無與倫比的沉浸感,為現(xiàn)場表演和 VR 應(yīng)用開辟了全新可能性。