Orange Lab實(shí)驗(yàn)室
Orange Lab是Orange集團(tuán)的前沿技術(shù)研發(fā)中心，致力于提升電信服務(wù)品質(zhì)與數(shù)字化體驗(yàn)革新。在法國(guó)雷恩Atalante園區(qū)的實(shí)驗(yàn)室中，一個(gè)旨在增強(qiáng)虛擬現(xiàn)實(shí) (VR) 體驗(yàn)的項(xiàng)目已正式啟動(dòng)。
項(xiàng)目目標(biāo)
本項(xiàng)目旨在通過(guò)動(dòng)態(tài)追蹤技術(shù)實(shí)現(xiàn)兩大創(chuàng)新：
1. 空間音頻實(shí)時(shí)混音：對(duì)移動(dòng)表演者進(jìn)行精準(zhǔn)定位，實(shí)現(xiàn)三維聲場(chǎng)動(dòng)態(tài)重構(gòu)。
2. 智能燈光追蹤系統(tǒng)：基于演員位置數(shù)據(jù)實(shí)現(xiàn)自動(dòng)化燈光調(diào)控。
該技術(shù)方案可廣泛應(yīng)用于VR音樂(lè)會(huì)、體育賽事直播、劇場(chǎng)演出等場(chǎng)景，同時(shí)支持杜比全景聲、雙耳渲染及高階Ambisonic格式的電視節(jié)目與播客制作。該項(xiàng)目對(duì)于 VR 現(xiàn)場(chǎng)音樂(lè)、體育及戲劇應(yīng)用具有重要意義。
核心方案
Naostage K SYSTEM無(wú)信標(biāo)追蹤系統(tǒng)
● 基于純視覺(jué)的識(shí)別技術(shù)
● 無(wú)需任何物理信標(biāo)或可穿戴設(shè)備
● 支持多目標(biāo)動(dòng)態(tài)追蹤
項(xiàng)目進(jìn)展
該項(xiàng)目邀請(qǐng)了藝術(shù)家 June Caravel 與 Gwendolyne Coronado進(jìn)行表演，其位置信息被傳輸至沉浸聲服務(wù)器進(jìn)行實(shí)時(shí)空間化處理，并同步至燈光系統(tǒng)實(shí)現(xiàn)自動(dòng)追蹤。
主要流程如下：
1. 系統(tǒng)設(shè)置階段
● 在工作室內(nèi)部署Naostage K SYSTEM，設(shè)備安裝高度為 3.50 米，距離源的最小距離為 3 米；
● 通過(guò) OSC 協(xié)議將空間坐標(biāo)數(shù)據(jù)傳輸至沉浸聲服務(wù)器；
● 同步進(jìn)行VR 360攝像機(jī)進(jìn)行捕捉與Ambisonic音頻采集。
2. 制作與錄制階段
● Kariba Productions團(tuán)隊(duì)使用12K VR攝像機(jī)完成“Ma star à moi”作品的拍攝；
● Virtuel Audio的錄音師Eric Munch負(fù)責(zé)音頻錄制。
3. 系統(tǒng)集成驗(yàn)證
項(xiàng)目結(jié)果正如預(yù)期——實(shí)時(shí)追蹤系統(tǒng)非常高效、音頻與燈光系統(tǒng)無(wú)縫集成。藝術(shù)家的追蹤數(shù)據(jù)使實(shí)時(shí)音頻空間化成為可能，無(wú)需使用信標(biāo)，從安裝到最終呈現(xiàn)沒(méi)有任何障礙。此外，Naostage 支持OSC協(xié)議，與沉浸聲服務(wù)器完美協(xié)同工作，從而確保聲音與燈光系統(tǒng)呈現(xiàn)最佳效果。
Orange Lab 利用Naostage的頂尖的解決方案來(lái)增強(qiáng)實(shí)時(shí) VR體驗(yàn)，這一項(xiàng)目展示了無(wú)信標(biāo)追蹤技術(shù)在 VR 現(xiàn)場(chǎng)表演應(yīng)用中的高效與創(chuàng)新。借助 Naostage 的自動(dòng)追蹤和沉浸聲等多項(xiàng)先進(jìn)前沿技術(shù)和專家智慧，觀眾體驗(yàn)到了無(wú)與倫比的沉浸感，為現(xiàn)場(chǎng)表演和 VR 應(yīng)用開(kāi)辟了全新可能性。
