腾讯多媒体实验室一直致力于沉浸式技术投入与建设,包括全景视频,三维重建,自由视角,虚实融合,数字孪生,全息视讯等沉浸式媒体技术的前沿技术研究和落地应用开发,其中多项技术已服务于腾讯各项业务,并落地故宫博物院和敦煌研究院等大型项目。
此前,由故宫博物院和腾讯联合主办的“‘纹’以载道——故宫腾讯沉浸式数字体验展”在深圳海上世界文化艺术中心举办,是故宫超高精度“数字文物”首次在深圳展出,并借助vr、ar技术还原倦勤斋部分场景。
在“锦绣世界”展区,观众将看到一个数米高的裸眼3d视觉装置。空间内部借助腾讯多媒体实验室沉浸式渲染技术,实现文物22倍超清放大,让观众置身于纹样万花筒的世界中。只要“触碰”文物,即可投影出重组过的精美动态纹样,让观众感受古代工匠的巧思何现代技术相结合的创意。
沉浸式内容生产基于腾讯多媒体实验室自研的算法,用沉浸式渲染技术,按照万花筒的折射原理将纹理材质镶嵌进几何图形,达到对图形的色调动态调控的效果。让观众深度参与到绚丽花纹变化的过程中来,体验全新的沉浸式数字万花筒。
此外,敦煌研究院与腾讯推出“云游敦煌”小程序,借助游戏、动漫、音乐等数字创意多元演绎敦煌文化,逐渐成为大众了解及学习敦煌文化的重要数字窗口之一。腾讯多媒体实验室通过深度学习敦煌壁画病害数据,形成自动识别并添加图示的一整套算法,打造出高效的ai壁画病害识别工具。
同时提供沉浸式远程会诊技术,基于多媒体实验室的高性能编解码引擎,用4k超清画质的360度沉浸式画面,无死角展示洞窟内的景象和文物的细节,实现无障碍远程文物会诊。
这样,不同地域的会诊专家,都可以实时清晰查看现场情况,共同为文物保护出谋划策。