主题:《古籍寻游记》虚拟现实沉浸式交互体验
8月23日 10:00
宗焕焕
丝路视觉|设计总监
宗焕焕,丝路视觉|设计总监,擅长领域:数字媒体创作、虚拟现实、沉浸式交互、数字虚拟人、CG剧本创作等;代表作: 作品《古籍寻游记》 第二十五届上海国际电影节VR最佳沉浸奖;CG广告影片《起云湾》中国电影电视技术学会最佳广告奖;伊利全球领先5G+工业互联网液态奶智能制造示范EPC数字展厅项目;国内首个伊诺5D大电影《乳宇宙的奇幻冒险》;东盟十国峰会《数字聚力》 ;第二届一带一路高峰论坛《山海同一卷》。
丝路视觉科技股份有限公司(股票代码:300556)成立于2000年,总部位于中国深圳。丝路视觉作为全国性的专业数字视觉综合服务供应商,立足于视觉科技与应用行业,专注于CG应 用领域,以创意为核心、市场需求为导向,主要利用计算机图形图像技术进行视觉设计和创作,将CG技术与艺术相结合,依托长期积累的技术实力和前瞻性的创意设计能力,为建筑、设计、展馆、 广告、动漫、影视、文体娱乐活动等行业的客户提供涵盖CG静态、CG动态、CG视觉场景业务的数字视觉综合服务。
本次讲座是关于VR技术的分享会。首先,宗焕焕老师介绍了丝路视觉公司的业务板块,包括新媒体展览展示和博物馆行业的尝试。其次,VR技术对生活方式产生了颠覆性影响,以及VR加教育、医疗、智能制造等行业开始赋能到传统行业,VR加文博是其中之一。再次,宗焕焕老师介绍了VR产品在环境逼真场域构建中的挑战和解决方案,包括硬件性能的提升、多协作平台的应用、数字角色的建模和动捕技术等。最后,会议围绕VR游戏的设计和实现展开,介绍了VR游戏中的IP属性可以加强玩家的情感连接和体验感,以及VR游戏中道具纹样的设计和结构设计,以及6道夫自由度的设计和实体化模型的实现。同时,还介绍了项目中的一些设计难点和历史情境的考虑,以及在商代祭祀场景下的创作路径和空间感的区别。
重点内容:
1. 丝路视觉设计总监宗焕焕分享虚拟现实技术
本次会议的首位嘉宾是丝路视觉的设计总监宗焕焕,擅长数字媒体创作、虚拟现实、沉浸式交互、数字虚拟人、CG剧本创作等多种领域。宗焕焕分享了古籍巡游剧、虚拟现实和沉浸式交互体验的主题。他介绍了自己在CG行业从业89年的经历,以及丝路视觉公司的发展历程和业务板块,包括新媒体展览展示、数字化媒体展厅和博物馆文博行业。宗焕焕还分享了他们在2023年古籍巡游季获得第二十五届上海国际电影节VR最佳成绩奖的案例,并强调了他们的作品在技术上和创作上的首创性。
2. 宗焕焕分享公司业务及主题
宗焕焕在分享中提到了公司所做的内容和接下来要分享的主题。第一个方面是个人计算时代到现在的移动计算时代,交互体验方式发生了质的变化和飞跃。第二个方面是在开发古籍巡游记时与字节跳动基于PK硬件性能联合开发,并选择了国宝级的文物题材。第三个方面是虚拟现实技术的提升,需要VR硬件头显技术的支持。最后一个方面是项目的利益更多偏向公益属性,通过故事化情境讲述方式让大家植入场景进行实地体验,活化博物馆并让每个文物都能让人们体验到它所在的时代背景和历史场景的还原。
3. 虚拟现实发展历程及影响
虚拟现实技术的发展路径包括从1986年的第一款VR头盔到2022年的元宇宙概念的爆火。虚拟现实技术颠覆了人们的生活方式,从二维显示到三维空间维度,交互体验也变得更加多样化。虚拟现实技术的质的飞跃带来了新的经济和业态,如虚拟人生世界、VR加教育、医疗、智能制造等传统行业的赋能。在这些领域中,VR加文博是一个新兴的市场,但目前市场上缺乏好的案例。
4. VR内容创作的三大维度解析
VR内容生产分为交互性、构想性和沉浸性三大维度。交互性需要提升硬件性能,创意生产分为营造数字世界和数字虚拟人,环境逼真的场域构建基于超写实的场景资产和数字人。多协作平台解决硬带硬件承载问题,数字角色驱动分为AI模拟和动捕技术。
5. VR硬件性能提升与内容生产的交互性
宗焕焕在会议中分享了关于进入项目的内容生产主题,强调了交互性对于内容生产的重要性。他讨论了VR硬件性能的提升、芯片领域的技术助推、新型显示的发展、VR镜片的量产化以及交互体验技术的进展,如建模传输技术、传感技术和显示技术。他还提到眼球追踪和手势追踪等互动技术的发展,并探讨了脑机接口和机电传感在新媒体展厅中的应用。
6. 宗焕焕介绍最新VR技术在硬件设备上的应用
基于最新的技术,硬件设备的分辨率提升至4k8k级别,自由度实现6道夫,交互传感器和硬件能力得到提升。技术底座包括4k以上分辨率、6道夫自由度、体感追踪器和105度超广视野画幅。佩戴舒适性也得到突破。硬件设备性能提升促进内容生产,如古籍主题游戏开发。已上线并可下载。
7. 宗焕焕分享VR主题上线与内容生产创作
该对话的语音转写文本主要讨论了一个VR游戏的开发过程,其中包括选取了中国四大考古发现作为主题,并通过虚拟现实技术让文物自己讲述故事。开发团队思考如何让文物活起来,加强青少年对中华文化的自信和认同感。同时,他们也考虑了实现路径和体验维度的问题。宗焕焕表示,所有内容的生产加上硬件软硬件的一个结合,到最后都是为了跟用户产生一种情感的共鸣。因此,在主体的服务上如何去模拟对应到的观众对这个事情的一个体验感是他们思考的重点。他们每上线一组之前,都会进行近百人的大体测试,并不断调整游戏中存在的问题,以达到最低的学习成本和最爽的互动体验。
8. 宗焕焕解读四种文物背后的故事
本次会议讨论了从服务文物向服务观众转变的过程,并介绍了选取的四件文物:北图6006甲骨、汉代塞上烽火品约居延汉简、敦煌220窟壁画和中国历史第一档案馆的南怀仁题本。这些文物的故事丰富多彩,通过角色化身和场景营造等方式,让观众更好地了解和体验文物背后的历史和文化。
9. 宗焕焕介绍文物项目的特点和创作过程
这段话讲述了一个以史料为基地的游戏项目,包括四个主题:星辰万年不变、峡谷坠河、三代塞上的烽火和翟氏家族。每个主题都以不同的历史事件或场景为基础,通过美术设计和交互体验来生动化和场景化这些内容。同时,游戏的创作团队非常注重准确性和严谨性,所有文本、美术输出和影视制作都要经过专家级别的老师审核。其中,两个重要角色是甲骨北图0006文物商贩和收藏家刘启智,以及陈阳和郭长这对汉代边塞驻守士兵及其领导小小领导。
10. 翟凤达角色的设计与制作过程
本文介绍了游戏设计中角色的设计和制作过程。其中包括虚拟角色的创作,历史文献资料的查阅,布料细节的设计等。同时还介绍了女性角色的重要性以及辅助性角色的设计。作者还探讨了如何增强玩家在VR游戏中的情感共鸣,提高积极性和趣味性。
11. 宗焕焕谈道具设计与交互体验
该对话讨论了在游戏开发过程中的一些细节,包括道具纹样设计、场景结构考虑、实时移动和交互体验等方面。开发者们为了提供独特的互动体验,进行了一些首创的开发,例如让玩家在甲骨室内场景中体验甲骨鉴定和刻字等活动。
12. 宗焕焕分享虚拟空间设计实践与感悟
宗焕焕介绍了6道夫的自由度在设计领域中的体现,将其比喻为一个球体,其中最核心的位置是一个天空球。他还展示了第一组设计的明清南怀仁提本和紫薇提本场景,这些场景是在虚拟空间中植入了6大仪器,并进行了等比例1:1的复刻。通过这种方式,实现了交互体验与故事场景构建的剧本化逻辑的打通,让每组故事体验变得生动化和趣味化。
13. 宗焕焕分享丝路CD行业发展经验
该语音转写文本介绍了一款VR游戏的三个场景设计。第一个场景是紫薇殿和紫禁城,考虑了历史情境和细节;第二个场景是甲骨祭祀,让玩家体验化身为大祭司的过程;第三个场景是汉代边塞,让玩家了解居延汉简文物所在的烽火制度,并进行实时射箭等体验。同时还介绍了敦煌壁画活化的设计过程。宗焕焕表示,游戏中的敦煌场景主要是莫高窟的外景、山体结构以及修缮壁画的场景,展示了家族的状态以及莫高窟的一些外景。
14. 宗焕焕分享创作与沟通经验
宗焕焕介绍了他们的文物讲述项目,该项目已经上线了3组主题。观众可以在国家电影场馆4层免费体验,或者下载安装包进行体验。为了实现沉浸感,他们构建了逼真的场景和角色资产,并将决策资产与场景资产相融合。开发过程中使用了多协作平台,剧本化创作丰富多样。在交互体验的核心场景上,主流开发的引擎是Unit。他们不断尝试优化渲染效果,以达到6k到8k的水平。
15. 多协作开发平台的技术难点与VR开发实践
宗焕焕在会议上谈到了多协作开发平台的难点,主要是由于不同团队使用不同的引擎开发平台导致彼此之间存在battle和调整的问题。另外,他也提到了VR开发过程中需要进行大量的反复测试来适应不同设备和姿态下的体验感。为了实现剧本中的想象效果,他们将制作环节拆解成100多个镜头,并在故事演绎的过程中进行逻辑串联。最后,他们还讨论了数字人建模、驱动流程和表演老师等方面的问题。
16. 局外场景构建与VR开发案例
该段对话主要讨论了局外场景的构建和VR数字舞台化效果在头衔中的优势。同时介绍了南怀仁的生平和对中国天文历法的贡献。最后展示了一个炸裂的场景进入地边的过程。
讲座视频