0
| 本文作者: nebula | 2024-04-18 16:08 |
4月18日,騰訊會議推出國內(nèi)首個裸眼3D視頻會議解決方案,并首次亮相與生態(tài)伙伴合作研發(fā)的視頻會議艙原型機(jī)。
據(jù)介紹,該技術(shù)基于騰訊會議與香農(nóng)實(shí)驗室共建的光場采集與三維重建技術(shù),以及騰訊會議底層通訊鏈路和天籟實(shí)驗室的空間音頻技術(shù),會議艙能夠?qū)νㄔ捜藛T進(jìn)行高保真的空間音頻和視頻進(jìn)行采集。
在實(shí)際體驗中,兩端的用戶只需進(jìn)入會議艙,無需佩戴任何輔助設(shè)備,無固定角度限制,設(shè)備即可自動追蹤觀看者的眼睛,瞬間呈現(xiàn)3D效果,不僅可以看到對方,還能體驗到對方的空間位置和動作。
在接收端,通過解析參會者間的相對位置關(guān)系,并運(yùn)用發(fā)絲級三維重建與高性能神經(jīng)渲染技術(shù),我們實(shí)現(xiàn)了人物的實(shí)時建模以及聲場重建,再配合與硬件廠商深度定制合作的裸眼3D屏幕,實(shí)現(xiàn)具有移動視差的立體渲染與聲場渲染,為用戶打造觸手可及的沉浸式通話體驗。
該技術(shù)同時具備雙目視差和移動視差,觀看者除了能體驗到出屏的立體感,同時也可以通過左右移動看到不同視角的立體內(nèi)容。
在這項技術(shù)的研發(fā)上,騰訊會議突破了在有限帶寬下高精度的場景實(shí)時重建,有效解決了邊緣抖動問題,從而實(shí)現(xiàn)了在消費(fèi)級硬件和網(wǎng)絡(luò)環(huán)境上為用戶呈現(xiàn)出高分辨率、高幀率的沉浸式3D視覺體驗。
雷峰網(wǎng)(公眾號:雷峰網(wǎng))