故事叙事也是人类最古老、最基本的文化行为之一,它既是人类传播社会记忆的方式,也是构建民族文化认同的重要工具。在“构建人类命运共同体”的大背景下, 通过多元化的叙事手段讲好中国故事,有利于传承文化遗产、消弭文化鸿沟、提升国家文化软实力。
数字人文是计算机科学与人文学科相结合形成的跨学科研究与实践领域,近年来已成为关注热点。沉浸式叙事是数实融合环境下的新兴叙事形态,同时也是数字人文项目的典型实现手段之一。伴随着VR、AR、3D建模、全景摄影等沉浸式数字技术的快速发展,沉浸式数字叙事开始得到社会各界的关注。与传统叙事形态相比,沉浸式叙事通过数字仿真设备还原现实场景,构造出具备沉浸式体验的叙事空间,并可利用软、硬件技术实现受众与叙事环境的深度交互,具有广阔的发展前景。
INTRODUCTION
摘 · 要
沉浸式数字叙事是一个具有强实践性的领域。任何沉浸式数字叙事项目,都涉及叙事主体、叙事策略和技术手段3个要素。沉浸式叙事是数字叙事的前沿领域,尽管当前已出现众多沉浸式叙事项目,但此类项目的开展仍有进一步优化的空间。目前,面向数字人文的沉浸式数字叙事仍处于探索初期,学界对于其应用场景和实现路径缺乏足够研究。基于此,增加沉浸式数字叙事的案例研究是有必要且具有重要意义。
一 · 沉浸式数字叙事的应用场景
(一)文博场景
博物馆是开展沉浸式数字叙事活动的理想场景。传统博物馆展览侧重于文物和非物质文化遗产,观众虽可近距离观看展品,但囿于物理空间,通常无法对展品进行360°全方位观赏。更为重要的是,传统陈列方难以实现观众与展品间的深层次交互,这易使观众将展品视为单纯的艺术品,忽略其历史文化背景及展品之间的链状联系,进而产生审美疲劳。利用沉浸式数字叙事,观众可以模拟特定人物进入虚拟化的艺术世界或历史环境,以第一人称视角沉浸于展览的文化背中,体验展览内容、全方位观赏展品,从而理解展览的深刻内涵,激发共鸣。
(二)影视场景
当前影视创作中的沉浸式数字叙事多以VR电影的形式体现,VR电影是VR技术与电影艺术相结合形成的新兴电影形态,与传统电影最大的区别在于视角广度的不同。传统电影受到摄像机镜头“画框”的局限,观众的视角仅能跟随镜头视角被动移动。利用3D建模和VR技术,可以构建出360°的沉浸式虚拟环境,观众可在其中自主改变观看视角,这不仅大大丰富了电影中的视觉信息,还能让观众感受到传统电影无法提供的自由度。
(三)人文教育
相比传统叙事方法,沉浸式数字叙事可综合使用多种沉浸式解决方案,为学生带来身临其境的沉浸式学习体验;同时,此类教学形式可借助3D模型模拟历史事件或虚拟场景,使传统教学叙事中口头难以表述的细节得以生动呈现。如闽台缘历史文化虚拟仿真实验教学项目。
“闽台缘历史文化虚拟仿真实验教学项目”是福建师范大学面向历史学专业《中国古代史》和《闽台缘历史文化》课程设计的虚拟仿真实验教学项目。该项目将沉浸式数字叙事与海峡两岸历史渊源与文化传承相结合,帮助学生树立海峡两岸同根同源的理念。针对历史叙事和现实叙事,项目采用了两种不同的叙事方案。
(图片:闽台缘历史文化虚拟仿真实验教学丨来源:福师大社历院团委学生会)
课程教学过程中,需要通过历史叙事反映海峡两岸交往的史实。针对此类应用场景,项目根据闽台历史文献、文物古迹及传统风俗习惯,由合作企业利用3D技术构建出虚拟的历史场景。学生通过角色扮演的方式参与故事发展,还原历史事件的发展过程。例如,在项目所设计的“闽台郊商”(郊商为从事台海贸易的商人群体)故事中,学生扮演一位清代乾隆年间台湾省台南市的郊商,经历过渡海峡到福建从事贸易及衣锦还乡的过程。在此过程中,学生需依次完成货物选择、港口选择、船舶选择、在闽贸易和衣锦还乡等实验步骤。在内容分发方面,采用了基于桌面虚拟现实的解决方案,学生可借助PC以类似3D游戏的方式完成故事体验。
(图片:虚拟场景丨来源:福师大社历院团委学生会)
除历史叙事外,课程教学中还涉及海峡两岸民俗文化方面的现实叙事。对于此类叙事,项目构建了一个可支撑全景VR视频上传、播放的开放平台。学生可自主选择叙事主题与拍摄地点,使用全景摄像机拍摄与叙事相关的360°全景视频。
二 · 沉浸式数字叙事的实现路径
(一)叙事主体
确立叙事主体是开展沉浸式数字叙事活动需明确的首要问题。对于“叙事主体”这一概念,目前学界尚无统一清晰的界定,一般认为,叙事主体即“讲故事的人”,其通常涵盖叙事作品的创作者、组织者等群体。沉浸式数字叙事涉及前沿信息技术与人文学科的融合,故其叙述主体也呈现出多元化、复杂化的特征。一个典型的数字叙事项目常涉及三类主体:策划者、创作者和技术提供者,他们或由不同的群体构成,或由同一群体身兼多种角色。从叙事主体的组织形态来看,大致可分为“定制化”与“平台化”两种类型,前者由三类叙事主体紧密合作,完成一个或多个定制的叙事项目;后者则由策划者和技术提供者构建一个技术平台,然后由创作者以类似众包的形式构建叙事作品。
(图片:叙事策划丨来源:网络公开)
(二)叙事策略
叙事策略是叙事主体根据叙事内容选用适当的叙事方法和手段,以达到最佳叙事效果的一种策略。且认为可从“存在”和“影响”两个维度来看待360°视频叙事。“存在”即观众所扮演的角色:或为故事的观察者(看故事的人),或为故事的参与者(扮演故事中的人物);“影响”即观众对剧情的影响力:或为被动的(观众只能看着故事展开),或为主动的(观众对故事进程有一定可控性)。
(图片:沉浸式空间叙事策略丨来源:网络公开)
基于上述两个维度,沉浸式数字叙事策略可被分类为观察被动型、观察主动型、参与被动型和参与主动型。
首先观察被动型策略与多数传统电影的叙事策略类似,受众只是故事的被动观察者,不在故事中扮演任何角色,也不具有除全景浏览以外的高级交互特性,第二,在观察主动型策略下,故事受众不扮演故事角色,但可以主动控制故事情节,如在《安妮·弗兰克之家》应用中,观众可在虚拟住所中自主漫游。第三,在参与被动型策略下,受众在故事中扮演角色,但不具备对剧情发展的控制权,例如在《1943柏林闪电战》中,观众以战地记者温福德·沃恩·托马斯的身份体验剧情发展。第四,参与主动型是四种策略中具有较高沉浸感和交互性的叙事形式,受众不仅能在剧中扮演角色,还能与其他角色互动,甚至改变故事结局。需要注意的是,沉浸式数字叙事的效果受到故事剧本、流畅度、清晰度等多方面因素的影响,因此不能简单地认为参与主动型叙事总是具有最佳的叙事效果;同时,较强的沉浸感和交互性往往意味着较高的开发成本。
(图片:安妮·弗兰克之家丨来源:网络公开)
(三)技术手段
沉浸式数字叙事是沉浸式技术与人文结合形成的叙事形态,故技术手段是实现沉浸式数字叙事的关键要素。沉浸式数字叙事过程中涉及的技术复杂多样,且可以以多种方式组合应用。根据技术手段在叙事过程中介入的时机,分为内容生产手段和内容分发手段。
(图片:沉浸式技术丨来源:网络公开)
沉浸式数字叙事中的内容生产,即生成与叙事内容相关的沉浸式环境及元素。目前沉浸式数字叙事项目中的内容生产技术主要涉及3D建模和全景拍摄两种类型。前者采用动画方式构建沉浸式环境和元素,构建过程大致分为3D模型构建和3D场景构建两个阶段。首先采用3DsMax或Maya等建模工具构造人物和建筑,然后将3D模型导入Unity3D或Unreal等3D场景开发引擎,设计人物动作、交互逻辑和特效等。后者通过360°全景摄像机的多个摄像头拍摄实景视频或照片, 后期处理时将这些画面剪辑为360°全景画面。
(图片:三维建模丨来源:网络公开)
三 · 沉浸式叙事实践建议
(一)强化“平台化”叙事组织形态
如前所述,当前沉浸式数字叙事的组织形态可大致分为“定制化”与“平台化”两种类型,从内容创作方式上看,二者的差异类似于互联网信息的专业生产内容(PGC)和用户生产内容(UGC)模式。在当前的项目实践中,采用“定制化”的沉浸式数字叙事项目数量远多于“平台化”项目,究其原因,一方面源于沉浸式 数字叙事涉及的3D建模、App开发等技术过于复杂,不利于普通用户定制开发;另一方面,许多叙事项目仍采用中心化的思路进行建设,未能更好利用普通用户的创作潜力。新媒体的快速发展见证了普通互联网用户如何利用博客、播客等媒体形式分享个人生活体验,网络信息的消费者和生产者之间的界限已变得日益模糊。随着沉浸式数字技术的门槛不断下移,未来的沉浸式数字叙事有必要更加关注“平台化”的叙事组织形态,鼓励用户分享自身构建的沉浸式叙事作品。
(图片:用户生产内容模式(UGC)丨来源:网络公开)
(二)构建多技术混合的解决方案
沉浸式数字叙事可采用多样化的内容生产和内容分发技术,这些技术解决方案具有一定的互补性。对内容生产而言,3D建模技术的优点在于可脱离现实世界,构建出极具想象力的纯虚拟环境,且用户在叙事过程中可以扮演环境中的角色自由行走,具有良好的沉浸感和互动体验;缺点在于开发成本高、建设难度大,通常需要由第三方技术提供商定制开发。全景拍摄可以较好地反映现实环境,开发成本低,建设难度小,便于以“平台化”形式进行建设,但互动体验受到一定限 制,用户仅能自由选择观看视角,无法在叙事空间中自由行走,同时拍摄也受到地理环境和天气条件的限制。对于内容分发而言,采用VR一体机作为分发设备可获得最佳的沉浸式体验,但通常也具有较高的开发成本和硬件设备要求;以移动设备或桌面PC作为分发设备 开发成本和设备成本较低且便于管理维护,但设备的沉浸感体验相对较弱。
(图片:技术混合丨来源:网络公开)
(三)探索多模态沉浸式叙事
所谓多模态沉浸式叙事,即同时采用触觉、视觉、听觉、嗅觉等多种感官的沉浸式数字叙事形态。传统沉浸式技术多基于视觉和听觉构建沉浸式感知,随着技术发展,近年来出现了一系列基于触觉、嗅觉和味觉的沉浸式解决方案。例如,Meta公司所研发的触觉手套可通过调整内置充气护垫的充气率,对手掌的不同部位施加压力,伴随着视觉和听觉信号,产生身体接触实物的虚拟感知。OVR研发的嗅觉 VR模块可以与VR一体机配合使用,当用户在虚拟世界接近篝火、海洋、土壤、玫瑰等特定对象时释放相应气味。通过在沉浸式数字叙事中添加此类多模态感知技术,可借助多种感官刺激创造出更具沉浸感的叙事环境,这有助于增强受众对故事的认知和体验。当然,多模态感知技术目前处于发展中,如何轻便、准确、高效地模拟这些感官感受,并将其应用于数字叙事中,仍待未来探索。
(图片:多感官混合叙事丨来源:网络公开)
沉浸式叙事是基于沉浸式数字媒介的叙事形态。当前沉浸式叙事主要被应用于文博展示、影视创作、人文教育和社会记忆四大场景。在当前的沉浸式数字叙事项目中,叙事主体的组织形态涉及“定制化”与“平台化”两种类型。在叙事策略方面,具有观察被动型、观察主动型、参与被动型和参与主动型等四种典型特征。
数字技术在文旅融合背景下不断快速演进,沉浸式叙事具有着广阔的应用前景,当前项目多采用3D建模和全景拍摄进行沉浸式内容的生产,并通过VR一体机、移动设备和PC为终端进行内容分发。沉浸式数字叙事是一种尚处于发展阶段的叙事形态,如何进一步拓展其应用领域、构建适应沉浸式技术发展的叙事理论等,均是未来需要进一步探讨的课题。
本公众号注明原创的内容权利属于本公众号或本公众号权利人所有,未经本公众号或本公众号权利人授权,任何人不得擅自使用(包括但不限于复制、传播、展示、镜像、上载、下载转载、摘编等)或许可他人使用上述知识产权的。已经本公众号或本公众号权利人授权使用作品的,应在授权范围内使用,并注明作者来源。否则,将依法追究其法律责任。
本公众号未标注原创的部分内容可能来自互联网等其他渠道,版权归原作者所有,仅供学习参考之用禁止用于商业用途,如无意中侵犯了哪个媒体、公司 、企业或个人等的知识产权,请联系删除,本公众平台将不承担任何责任。

