日前，火山引擎在2024火山引擎视频云技术大会上发布了基于历史古建三维实景重建的「虚拟直播间」。采用AI生成3D内容和大场景重建方案，火山引擎视频云团队为山西高平金代二郎庙戏台和北京正乙祠戏楼两座百年建筑生成3D数字资产，并以「虚拟直播间」的形式应用于抖音的戏曲直播场景，让古建筑在现代人的生活方式中焕发新生，同时助力戏曲等非遗的传承。

「虚拟直播间」采用了将3DGS先进技术（一种用于三维场景表示和渲染的先进技术）与自研大场景建模技术相结合的方式，实现了对真实场景的高质量3D几何构建与外观重建渲染。该方案不仅实现了优质的视觉效果，还可以接入美术管线进行编辑，实现复杂的光效、阴影渲染，让直播表演更具真实感，带给观众更加沉浸式的体验。

现存最早古戏台，在虚拟直播间焕发新生

位于山西高平市的二郎庙戏台是我国现存时代最早、木构特征及纪年最确切的神庙戏台，该戏台建于金大定二十三年（1183年），是国务院公布的全国重点文物保护单位。作为「虚拟直播间」的首个场景，火山引擎多媒体实验室团队采用基于视觉的方式对其进行三维重建，1:1还原了戏台的全貌，这种方式不仅采集效率高、采集成本低、精度上限高，而且还能避免高精度激光扫描设备对古迹带来不必要的损害。

为了让场景更加丰富，技术团队还借助AIGC的能力，为戏台生成了守旧、石狮等装饰元素和春、夏、秋、冬四季的不同效果。火山引擎多媒体实验室的AIG3D（AI生成3D）方案基于大模型强大的生成能力，采用创新的图生3D模式，仅需上传3D内容参考图，系统就会自动生成关键视角和稀疏视角图像，再将其输入到3D重建大模型中，建模时间缩短至以分钟为单位。

「虚拟直播间」的另一个场景北京正乙祠戏楼始建于清康熙六年，是中国历史上第一座木制结构的室内剧场，布局复杂精巧，被誉为“中国戏楼活化石”。在三维重建时，正乙祠戏楼负责人张鹏希望火山引擎技术团队能够还原真实剧场演出的美感，并通过技术手段为虚拟场景添加一些现实中难以呈现的效果。

还原演出光效的正乙祠「虚拟直播间」场景

对此，技术团队给正乙祠的「虚拟直播间」场景接入了美术管线进行编辑，更大限度地还原了舞台演出时复杂的光效，并对戏台二层的铜锣、舞台背景的金箔添加了色彩渲染，让这座百年戏楼在手机屏幕里呈现出美轮美奂的效果。

助力文化传承，让青年戏曲演员登上古老的“新”舞台

「虚拟直播间」陆续邀请了多位抖音京剧主播进行体验测试，既包括国家二级演员，也包括仍在戏曲学院读书的00后大学生。

抖音京剧主播使用「虚拟直播间」开播

北京京剧院老生演员、国家二级演员王宁是「虚拟直播间」的首位使用主播，他表示：“作为专业演员，日常只能在业余时间直播，受成本和场地限制，很难时常更换直播间场景，虚拟直播间让我们有了更多选择。原汁原味的古戏楼场景，不会让观众产生审美疲劳，还能够‘触摸’到历史古迹，是一件非常有意义事情。”

火山引擎的实时高精度抠图技术方案，能够让主播在相对日常的环境下使用虚拟直播间，技术团队还根据主播的反馈，自研了智能运镜算法。在直播中开启，便能配合主播的移动产生专业的运镜效果。在使用正乙祠场景的一次直播中，王宁收获了京剧直播里比较少见的“嘉年华”。在他看来，正乙祠戏楼见证了京剧表演艺术从诞生、发展到辉煌的整个历程，从程长庚到梅兰芳，众多梨园界前辈都曾在此登台献艺，这次经历令他印象深刻。

基于三维重建、AIG3D等技术，火山引擎能够更好地助力珍贵古建的数字化和非遗文化的传承，积极发挥自身的技术价值，推动文化遗产保护。