当前位置在: 首页 > 创作研究
创作研究    
动漫类健康科普作品的多模态话语分析研究(上)
新闻来源:宁夏科普作家协会     作者:杨红琳等     发表时间:2022-12-02     阅读次数:    


一、概述

(一)研究背景与目的

动漫类健康科普旨在通过动漫形式科普健康知识,传递健康意识,促进健康水平的提高。一方面,动漫是健康科普的内容呈现方式与载体,是健康科普内容非语言符号化、视觉化表达的方式之一,用语言符号无法描述的疾病发生机制、人体器官与细胞运作规则等内容均可以诉诸动漫表达;另一方面,健康科普传播为动漫提供了内容与市场,为动漫产业发展提供了新契机,动漫不仅仅再局限于为了娱乐功能而制作的、面向低幼年龄受众的消遣产品,而是可以涉足教育医疗等领域、面向全年龄段受众的产品。

融媒体语境下何种健康传播内容形式与传播渠道可以更好地提高受众对健康科学知识的知晓度,并真正学会采用健康的行为与生活方式,对于健康传播媒体人、卫生健康委员会与疾控中心等政府部门、医院医生与医学教师等群体来说都是一个重要问题。因此本研究想探索动漫形式的健康科普内容是否有优势、具有哪些突出作用。此外,在市场与产业角度,本研究还想探索在实践中动漫健康科普具体存在哪些问题,并提出相应解决对策,以便于更好地发挥动漫在健康传播中的优势作用,为提高动漫健康科普的传播效果与实际应用价值提供参考和借鉴。

(二)研究对象与研究方法

本文研究范围与对象界定于动画漫画等视频音频模态占核心地位、文字语言模态占附属地位的通过互联网传播的健康科普作品。典型案例有医疗科普动画栏目深读视频、微信公众号基因情报局制作的漫画作品、日本动漫剧《工作细胞》等。

因动漫是一种集合文字、图片、视频、音频等多种模态的文本形式,因此选择了话语分析法在多媒体时代的发展——多模态话语分析研究方法。主要的理论基础是多模态话语分析下的视觉语法理论,并在分析过程中结合了受众的选择性心理理论。

(三)文献回顾

目前研究互联网平台健康科普的以个案分析为多数,如Keep app、丁香医生、抖音视频等,针对整体动漫类健康科普的研究几乎没有。

关于动漫在科普传播领域的应用,俞梁总结了我国动漫科普创作数量不能满足受众的需求量[1]。江锐和黄道军总结了动漫在科技科普传播中具有的独特优势和作用[2]。现有研究中针对动漫与健康科普领域结合的研究几乎没有,大多是动漫与广义上的科普或科技科普传播的结合。本文可弥补动漫在健康科普领域的应用研究。

关于动漫与健康科普的交叉方面,研究集中在线下小范围的健康教育与疾病治疗,侧重于对已患病患者的健康宣教和医护人员治疗、护理方式应用。针对疾病预防阶段的动漫类健康科普内容的研究几乎没有。

二、动漫健康科普作品内容的多模态话语分析

任何一种传播话语能够有效传递信息都基于该种话语本身的特性,动漫应用于健康科普的优势作用也是基于动漫中各话语的特性与相互作用。了解动漫科普内容的模态构成以及各模态之间的关系对于更好发现和理解动漫健康科普作品的优势作用具有十分重要的意义。

(一)动漫的模态构成

动漫健康科普作品的文本从大类上主要包括语言模态和非语言模态,非语言模态又包括视觉模态和听觉模态,不同的作品中各模态之间的占有比例也不同。

1.语言模态

动漫应用健康传播作品的语言模态主要包括标题、摘要、字幕和注释等。标题是受众最先注意到的语言模态。标题传递了一则动画视频或漫画作品的主题和内容,甚至是风格特征。摘要位置一般紧随标题之后、正文之前,对正文内容进行总结描述。字幕和注释主要是将卡通人物、动漫形象所说的话用文字表达出来,在漫画中发挥释义作用,可以对人体器官、医疗器械等专业图画、人物角色、场景进行解释。

2.视觉模态

动漫健康科普作品中的视觉模态包括色彩、动态与静态图像、动作等。创作者利用不同的色彩和图像表现卡通人物的形象和所处场景;同时通过动作表现卡通人物的行为、肢体语言、表情和情绪。视觉模态在动漫健康科普作品中占核心地位,是三大类别模态中传递最多信息的一类。

3.听觉模态

听觉模态只存在于动态动画中。在动画中,音频模态不仅包含卡通人物的说话声音,也包含主题音乐和背景音乐(BGM)。作为动漫不可缺少的元素之一,音乐能起到调节气氛、增强表达、塑造角色性格、控制观众情绪、让观众感到身临其境和深化主题的作用。

(二)基于视觉语法理论的非语言模态话语分析

基于克瑞斯(Kress G)和凡里文(Van Leeuwen)针对图像话语分析提出的视觉语法理论框架,动漫健康科普内容的非语言模态具有再现意义、互动意义和构图意义。通过话语分析阐释动漫中各个模态对于表达、传播健康科学知识的作用和功能,为进一步明确动漫健康科普作品的优势地位提供基础。

1.非语言模态的再现意义

再现意义指图像和语言发挥的作用一样,能够如实还原现实事物和事物发展规律。克瑞斯和凡里文将非语言模态的再现意义分为叙事和概念两类,其中叙事再现方面,动漫类健康科普的图像与视频可以通过虚拟绘画一帧一帧再现体内各种各样复杂的生理活动和角色的行为、言语和心理过程,如深读视频中《精神分裂症》一集通过人物图像表情再现精神分裂患者出现幻觉、听到不存在的声音等症状表现与恐惧情绪(如组图1);概念的再现包括关系过程和存在过程,动漫可以将专业的医学健康词汇和术语视觉化、形象化,如深读视频《多囊卵巢综合征》利用简单的彩色二维图形再现卵巢与卵子细胞的存在与位置关系(如图1)。

组图 1 《精神分裂症》再现精神分裂患者的症状表现与情绪

1 《多囊卵巢综合征》再现卵巢与卵子细胞

动漫再现不受内容限制,很多通过真实实物难以传播的内容(比如有关性的内容)以及微观的肉眼看不到的内容(比如细胞以及细胞之间的运转)都可以通过虚拟图像呈现出来;动漫再现表现形式多样,可以是二维平面的也可以是三维立体的,可以是简单线条也可以是丰满具体的图像,且动画的艺术风格、创作手法、材料和制作工艺都可灵活多变。

2.非语言模态的互动意义

动意义是关于画面中出现的事、物、人,以及画面的观看者和制作者之间的关系。互动意义一般由社会距离、接触、视角和情态四部分组成[3]

根据画面中的角色是否与观看者建立目光接触,具体行为可以分为索取提供索取是指画面中的角色直视观看者,好像在向受众索取什么,而提供是指没有产生目光接触的画面行为[4]。在动漫类健康科普作品中,大部分图像中的角色参与者和图像外的观看者之间不存在目光的接触,不构成想象中的人际关系,因此是提供信息类的图像,也符合健康科普作品通过传播符号客观真实地呈现健康信息、医学知识,再现事物的本来面貌的交际目的。

社会距离一般和镜头取景的框架尺寸有关系。图像的框架尺寸决定了观看者与参与者之间的社会亲密关系。在动漫科普传播作品中,既有远距离取景的整体画面,又有近距离取景的特写画面,远距离取景的方式体现了健康科普中的角色参与者与受众之间疏远的社会人际关系,观众能够客观、整体地获取信息;近距离取景的特写方式体现了健康科普中参与者与观众之间亲密的人际关系,观众能够细致观察到参与者人物的表情、动作、形象,易于对参与角色产生情感共鸣。比如《工作细胞》中有体现整个器官内各种细胞集体工作的画面(如图2),也有单独细胞工作或两个细胞之间互动的特写镜头(如图3)。


2 《工作细胞》中红细胞在血管中集体工作的场景

3 《工作细胞》中高角度展示各种细胞在人体内集体工作的场景

视角指图像创作者设计图像中参与者的角度,若让观者从高角度俯视角色参与者,意味着观者权利高于再现参与者;若让观者从低角度仰视角色参与者,意味着参与者地位高于观者。如图2和图3中即是一个高角度再现体内细胞工作的场景,每个细胞显得都比较小,也因此能同时展现更多细胞。如图4中即是一个低角度再现肺炎链球菌的视角,显得肺炎链球菌非常高大,也因此渲染了有害病菌可怕、凶恶的特点。

情态指画面表达手段的使用程度,如色彩、色调、深度及细节的再现等[5]。动漫可以利用丰富的色彩色调来渲染不同的场景、体现不同人物角色的形象特质,比如当病毒、细菌等有害物质出场时,色调经常使用深色暗色,来表达这些物质对人体的有害作用(如图4);当再现某疾病下患者出现的一些不良症状时,画面背景可能会变得灰暗,渲染其患病后痛苦、悲伤的情绪。

4 《工作细胞》中低角度展示肺炎链球菌入侵人体,背景使用暗黄色突出恐怖气氛

3.非语言模态的构图意义

构图意义指整个语篇的结构、布局和框架等。克瑞斯和凡里文提出,构图意义包括信息值、取景、显著性三种资源[6]

信息值的含义是画面中各部分在整体图像中因位置不同而传达出不同的信息。内容为左右结构的构图,左边是已知信息,右边是新信息;内容为上下结构的构图,上方是理想信息,下方是现实信息。例如深读视频深读君每次开始讲解健康知识时,就会呈现从左到右的构图,深读君站位在左边,右边一般是新信息,传达着最大的信息值(如图5)。显著性指各个图像元素通过位于前景或背景中的位置不同、尺寸大小不同和不同色彩对比、重合等途径,吸引受众不同的注意力[7]

5 “深读君讲解骨质疏松症的骨密度

(三)各模态之间的关系

传播者选择多模态话语进行传播主要是因为单一的模态不能充分表达传播者想传达的内容,所以利用其他的话语模态来补充、协同、强化和调节,让传播者的话语意义得到完整表现和传递,让受众完全理解传播内容。在动漫健康科普作品中也是如此,很多模态之间存在互补关系,多种模态共同传递整体意义。笔者根据张德禄在《多模态话语分析综合理论框架探索》一文中提出的各模态之间的关系总结[8],简单分析动漫健康科普作品中的语言模态、视觉与听觉模态之间主要存在的互补强化关系与非互补交叠关系。

首先,视觉图像与听觉之间存在相互强化补充。在动漫深读视频作品中,当卡通主角深读君用声音语言讲解出疾病发生机制、预防与治疗对策时,视觉图像就会再现声音内容中的专业性科学性信息,让观众更具体形象地理解声音内容。音频中的背景音乐也起到了传递态度情感、渲染气氛的作用,是对单纯视觉动态的重要补充,比如在表现人物角色患病时,背景音乐选择低沉的具有哀伤基调的旋律,而在表现人物角色开心、激动兴奋时,背景音乐选择欢快、轻松的引人愉悦的旋律。

其次,视觉图像与文字语言模态之间存在相互强化补充。在动漫作品中,语言模态只表达了健康科学知识基本的概念意义和角色的话语,图像模态却不仅将概念意义具象化、视觉化,也同时表达了包括态度、情感、目的等人际意义,故视觉图像对语言模态起到了补充与丰富作用。如基因情报局账号中解释老年牙齿为什么会掉光的漫画作品[9],描述口腔细菌导致牙周炎,并配图将牙齿和细菌拟人化为不同的角色形象,把细菌侵蚀牙齿的过程画成细菌在给牙齿施工(如图6),语言模态和视觉图像模态配合强化展现了牙周炎生成的原因。

6 图文配合展示牙周炎发生机制

最后,语言模态和听觉模态之间既有非互补交叠关系,也有互补强化关系。出现在动画图像上的台词、注释大部分都会通过参与者角色用声音讲出来,这时可以看到的语言和可以听到的语言就相互重叠,存在非互补交叠关系。而除了语音之外的声音,还有大量背景音乐,这一部分听觉模态就和语言模态之间有互补强化作用,语言模态讲述的病理生理基础知识、疾病症状等信息刺激受众认知系统中的理性处理系统,让受众知晓、理解、认同其中的健康信息;不同旋律、风格、节奏的背景音乐就在无意识下刺激受众认知系统中的直觉处理系统,让受众和参与者角色产生情绪共鸣,传播者也就同时运用了理性诉求感性诉求达到了说服目的。(本文选摘自《科普创作评论》2021年第2期,作者系杨红琳等。





 
上一篇:抖音:移动短视频视域下的科普创作新思路
下一篇:动漫类健康科普作品的多模态话语分析研究(下)

宁ICP备2021001770号-1   宁公网安备64010402001042号

宁夏科普作家协会  (www.nxkpzx.cn)@2020-2022 All Rights Reserved

地址:宁夏银川市兴庆区凤凰北街172号  邮编: 750001 电话: 0951-6851830  Email: nxkpzx0951@126.com