姑苏论道|星海视听张博文:数字视听技术在广电及文旅方面的应用
| 流媒体网| 2026-05-28
【流媒体网】摘要:内容与技术的有机融合,开启沉浸式互动的美妙之旅

  2026年5月28-29日,由流媒体网主办的「姑苏论道暨第31届智能视听与科技创新产业论坛」在苏州隆重举行。

  本届论道以“势聚AI 屏见未来”为主题,汇聚产业新势、以AI赋能大屏,共探行业全新发展图景。

  在5月28日下午举行的业务运营论坛上,四川星海视听新媒体有限公司资深创意策划张博文做了主题为《数字视听技术在广电及文旅方面的应用》的演讲。

  以下是演讲全文:

  大家下午好,非常开心能够在这儿跟大家做一下分享。我是四川星海视听的张博文,今天给大家分享的主题是《数实相生:数字视听技术与广电及文旅方面的应用》。

  我们的所有业务,首先基于XR影棚。这个业务是从2023年开始的,最初是260平米,到目前为止,通过业务拓展已经变成了400平米的XR影棚空间。

  大家可以看到,这个图片里,上面是立屏和竖屏,下面是地屏,两个屏幕就能构建出无限的虚拟空间。

  整个XR影棚基于五个模块:

  第一,屏幕系统。 屏幕系统决定了数字的呈现度,包括它的精度。三维数字资产呈现的清晰度也是通过屏幕来展现的,画质非常细腻。

  第二,服务器系统。 服务器系统代表了渲染的质量和精细度,也是数字资产实时渲染和引擎相匹配的一个很好的接口。

  第三,拍摄系统。 在拍摄系统中,我们有电影机和讯道机两种不同的模式可以灵活切换。用电影机可以表现出非常细腻的画质。

  第四,追踪系统。 追踪系统是XR的灵魂。通过追踪系统,我们会将立屏和竖屏变成一个三维整体空间,同时用它和摄像机进行匹配,打造出完全符合物理现实的虚拟空间。

  第五,动捕系统。 动捕系统是XR影棚的延伸,可以完全兼容XR影棚。通过动捕系统,可以让我们的动画以及其他的内容制作,包括模型、动作绑定,以及之后会讲到的数字人,在动捕系统里面都能非常快捷、方便、降本增效地呈现。

  基于XR影棚,现在有一些具体的、可实施的数字方案,包括:数字文物保护、虚拟场景制作、XR拍摄、数字人、高精度影视制作、AIGC创作、大空间交互体验。这些都是切实可行的应用场景。

  XR虚拟拍摄

  在XR虚拟拍摄影棚中,我这边给出了三个"无限"的定义:

  一是空间无限。 往常我们在拍摄的时候需要一些场景,拍摄团队就要爬山涉水去取景。如果有多个场景,就要辗转不同的地方,非常消耗时间成本。但在XR影棚里,可以一键切换场景,直接在XR棚里完成所有拍摄。这就是空间无限的定义。

  二是时间无限。 原来拍摄时,我们需要等待日出、日落、极端天气(雨雪)、白天和黑夜,这些场景都需要去等。但在XR影棚里面,可以通过数字资产模拟场景,达到与现实可触、可感一致的自然场景。

  三是想象无限。 这是XR棚的核心。我们不但可以制作出可触可感的现实场景,也可以通过导演或策划团队的想象力,构建出脱离现实场景的虚拟场景。由想象力来主导场景到底长什么样子。想象有多大,XR棚就有多大。

  下面讲几个案例。《腹有诗书》。《腹有诗书》这档文化类节目的一个片段里,我们请到各地的专家在XR棚里集体拍摄。每一个景别都可以通过三维数字资产再造,比如古蜀道、杜甫草堂。专家在座谈的时候说到哪个场景,就可以马上进行场景切换,让节目变得更加沉浸式,带来更好的体验效果。

  《看见皮洛》。在这里面,我们通过XR复原了当时万年前的川西皮洛遗址。这个跟XR拍摄有一点点不同,用到的是VP拍摄的手法,大家可以看下面右下角的第二张图。地屏进行了在线布景,用实景布景加上虚拟背景相融合,达到了更加真实的效果。

  而右上角的图片印证了"时间无限"的概念。当时有一个镜头是要做日照金山的效果。大家知道日照金山有时是根据天气原因,可遇而不可求的自然现象。如果真正实拍,可能需要等待半个月甚至更长时间才能达到这个效果。但在XR棚里面,可以直接利用虚拟资产在线做出日照金山的场景,马上进行拍摄,这是一个非常方便的选择。

  《戏语·东坡》。在《戏语·东坡》影片里,通过川剧与现代舞蹈形式结合,再造了三苏祠的现实场景。片段中有一段舞者在三苏祠进行舞蹈的场景,内景和外景可以自然切换。不但可以拍摄外景的内容,也可以在里面构建出内景的方式,通过XR虚拟资产制作进行快速切换。

  《问月》。MV《问月》,也是在棚里进行的虚拟拍摄。这个MV主要是对古歌词《楚辞·天问》的致敬,古代人们对月亮有很多情感和向往,同时也是对中国航空航天事业的致敬。里面很多可爱的小演员们在棚里完成了拍摄。我们创造了一个非常美丽的夜景宫阙场景,这也是通过"想象无限"来实现的,比如圆圆的月亮,在XR棚里都可以非常方便地实现。

  川渝春晚《时光》。川渝春晚李子柒演绎的MV《时光》。这里面更多运用了"想象无限"的概念。我们为李子柒这样一个非遗传承人的身份,打造了许多关于剧务官的非遗场景。比如活字印刷可以高高挂在天上,竹编的瓷器也可以在场景中变成巨物观的形式呈现。里面有很多银丝花和其他非物质文化遗产的手工艺,都放在整体内容里,与XR拍摄和真人李子柒相结合。这也大大缩减了拍摄时间,因为李子柒的通告可能会比较满,所以我们整体的拍摄时间就在一天内完成了,会涉及到很多场景,这也是非常降本增效的。

  数字人发展

  接下来跟大家交流一下数字人。数字人这个赛道很早之前就有了,但现在有了AI,数字人变得越来越多元。包括真人孪生的数字人、卡通IP的数字人,多种多样的数字人已经成为主流媒体和短视频平台不可缺少的元素。我们也做了很多虚拟数字人的案例,给各位老师做一下分享。

  邓稼先老先生复原。在绵阳科博会开幕式上做的邓稼先老先生的视频片段。我们通过AI复原了各个年龄层次的邓稼先老先生,采集了他的形象,以及他在之前报道中的声音素材进行合成,展现出了邓稼先老先生亲切的样子。用这种方法可以对故人进行缅怀,是一件非常有意义的事情。这项技术可以更多地应用在历史领域。

  AI主持人王楚涵。我们主要采集了四川卫视的主播王楚涵动态的视频素材,然后放在语言大模型里进行训练,最终可以输出非常自然的动作和语音。

  通过这种方式,可以为我们非常简单的口播类视频和内容生产进行很好的补充。很多比较简单的工作或者比较小的内容,我们完全可以用数字人代替生产。这样在短视频时代,尤其是涉及到小屏短视频,可以以极高的效率与短视频结合接轨,在口播类视频里进行应用。

  卡通数字人熊猫贝贝。熊猫贝贝是一档四川《熊猫观察》对外杂志宣传类的节目。在这里面,虚拟主持人贝贝和雪晴两个人共同进行谈话。这里应用了XR棚里的动捕技术,可以无缝衔接。动捕演员穿上动捕服,就可以操控熊猫贝贝实时和主持人进行互动,也可以做隔空交互,对节目来说是一件非常有趣的事情。这个技术非常成熟,可以兼容在XR棚里面,已经应用了很久。

  高精度资产扫描

  刚才所说的这些都离不开高精度资产扫描,这是底层的技术框架。刚才所看到的数字资产,包括场景也好、小的元素也好都可以通过扫描来完成,这可以大大减轻三维制作的工作量。

  例如,通过照片扫描文物。我们根据四川博物院的文物数字化保护工程做的一个项目。扫描了一些四川博物院的文物进行应用。如果按照原来的流程,一个建模可能需要几天甚至一周时间。但是通过扫描,可以快速输出三维素材,简单修复就可以使用。

  另外在安岳石窟做的快速扫描,将三米多高的水月观音造像进行了高精度扫描。水月观音的精度已经达到了电影级,而扫描只用了一个小时。现在通过自己的算法和扫描技术,已经可以快速地将虚拟资产扫描出来,这对文物保护或历史留存都是非常好的。同时,这样的数字资产可以在虚拟拍摄以及未来的制作中重复使用。

  另外,我们与四川博物院一起合作打造的一档节目,叫做《见微知著》,是一档文物类讲述节目。我们不但通过文物再造了背景,也通过AIGC的技术把它的故事完整呈现了出来。

  数字交互与AIGC探索

  下面来看一下关于数字交互与AIGC的探索。随着AI时代的到来,数字交互以及AI应用会越来越广泛。我们的目的是希望未来的内容生产上,可以达到更沉浸的效果,在AIGC制作上让我们更快速。

  一是,魔盒装置。魔盒装置,可以应用于博物馆。透明盒子里面的东西是实体文物,大家通过透明屏既可以看到文物的样貌,也可以通过在透明屏上操作前后左右观看、放大缩小,看到文物细节,还可以通过点击程序模块来了解文物故事。这非常方便在博物馆展示,为游客提供便利。

  二是,文物活化趣科普视频。是我们完全用AIGC打造的影视作品。主要展示了AIGC在短视频里非常好的内容创作能力。

  不光是内容创作,我们还可以把现有的文物做成有质感、有趣的活化,比如虎钮錞于的老虎跳起来变成了金色,这些都是由AI可以做的质感赋能。它最大的优势是可以还原非常庞大的场景,比如故事中讲到的集市和战争场面。

  如果通过传统制作,成本会非常高;但是通过AIGC制作,可以非常快速地通过指令还原一些宏大的场景。这对我们内容制作来说,是非常可感、可触的成本降低,对观众来说也有更好的视觉体验。

  不光是AIGC,我们还在VR沉浸式交互上做了一些新的项目。我们在四川遂宁蓬溪县做了《探秘蓬溪》VR大空间体验项目。蓬溪虽然是一个小城市,但有非常巨大的文化底蕴,也有非常宝贵的六大国宝。

  我们通过前面提到的快速三维扫描技术,将建筑物通过扫描进入到VR内容里,再通过故事打造,创造了一个小书童的形象,用小书童当作NPC,带领我们在蓬溪探秘的故事里,探寻蓬溪六大国宝的古建,比如金仙寺、寺庙、壁画等,非常有趣。

  我们坚信,未来随着硬件设备越来越好、内容制作生产快速提升,用户将有一个越来越好的视觉体验。随着技术的发展,也能越来越多地感受到AIGC和沉浸式交互为我们带来的情感上、影视类创作上的多元发展。

  未来我们非常想要致力于内容与技术的有机融合,为大家打造沉浸式互动的美妙之旅。

  我的演讲就到这里,谢谢大家!

责任编辑:凌美

分享到:
版权声明:凡注明来源“流媒体网”的文章,版权均属流媒体网所有,转载需注明出处。非本站出处的文章为转载,观点供业内参考,不代表本站观点。文中图片均来源于网络收集整理,仅供学习交流,版权归原作者所有。如涉及侵权,请及时联系我们删除!