基于移動增強(qiáng)現(xiàn)實技術(shù)的兒童繪本設(shè)計研究

【摘要】童謠一直是繪本創(chuàng)作者比較重視的題材，但傳統(tǒng)童謠是以口傳念唱為載體，紙質(zhì)繪本對這一特點(diǎn)的表達(dá)空間有限。文章以閩南童謠繪本設(shè)計為研究對象，分析童謠繪本的現(xiàn)狀和問題，探討在現(xiàn)代繪本設(shè)計方法的基礎(chǔ)上，融入移動增強(qiáng)現(xiàn)實技術(shù)的可行性開發(fā)路徑，以期為童謠題材兒童繪本的出版提供新的思路。

【關(guān) ?鍵 ?詞】兒童繪本;閩南童謠;增強(qiáng)現(xiàn)實

【作者單位】陳超淼，泉州師范學(xué)院。

【基金項目】福建省社會科學(xué)規(guī)劃項目一般項目“非物質(zhì)文化傳承視野下基于AR技術(shù)的閩南童謠繪本展示與傳播研究”（FJ2018B141）;福建省高校人文社科基地海絲視覺文化藝術(shù)研究中心研究成果。

【中圖分類號】G230.7【文獻(xiàn)標(biāo)識碼】A 【DOI】10.16491/j.cnki.cn45-1216/g2.2021.04.025

近年來，隨著我國文化自信的不斷增強(qiáng)，原創(chuàng)繪本中以“傳統(tǒng)文化”為題材的創(chuàng)作所占比重逐漸加大，涵蓋民間文學(xué)、民間習(xí)俗、民間藝術(shù)、童謠和古典文學(xué)等內(nèi)容。其中，童謠是創(chuàng)作者比較重視的題材，但傳統(tǒng)童謠是以口傳念唱為載體的民間藝術(shù)形式，紙質(zhì)繪本對這一特點(diǎn)的表達(dá)空間十分有限。

當(dāng)下，國內(nèi)以傳統(tǒng)童謠為題材的兒童繪本可以分為兩類。一類是以文字為主的插圖繪本。這些繪本收集了豐富的童謠，一首童謠配一幅精心設(shè)計的插圖，集多首童謠成冊;另一類是現(xiàn)代意義上的繪本，以童謠為藍(lán)本創(chuàng)作故事，應(yīng)用敘事性圖畫創(chuàng)作成繪本。傳統(tǒng)童謠表現(xiàn)的內(nèi)容多源自中國古代社會，與現(xiàn)代社會生活脫離，而學(xué)齡前兒童對于脫離他們實際生活經(jīng)驗的事物和圖式是很難理解的，也就很難激發(fā)他們的情感共鳴和有效認(rèn)知。因此，以傳統(tǒng)童謠為題材的繪本設(shè)計若只是一味地單向呈現(xiàn)給兒童，忽視從體驗和交互的角度加入對當(dāng)代大眾審美、生活環(huán)境、高新科技等因素，缺乏時代“帶入感”，就很難在競爭激烈的兒童圖書市場中生存。

一、閩南童謠繪本存在的問題

1.以文本為主、插畫為輔，不易被兒童理解

當(dāng)前國內(nèi)正式出版的閩南童謠繪本只有一套《閩南童謠繪本》叢書，該叢書以童謠文本為主、插畫為輔，文本內(nèi)容既有傳統(tǒng)童謠，又有新近創(chuàng)作的童謠，內(nèi)容涵蓋閩南的傳統(tǒng)風(fēng)俗、生活情境、人情世故、昆蟲花草、家禽動物等，充分體現(xiàn)了閩南童謠朗朗上口、節(jié)奏明快、率真童趣、詼諧幽默、通俗易懂的特點(diǎn)。但是，由于插圖類繪本以文字為主，而兒童的邏輯思維還沒完全形成，對文字內(nèi)容的理解比較困難。因此，家長在輔導(dǎo)幼兒學(xué)習(xí)閩南童謠過程中，需要運(yùn)用許多不同的詮釋策略，才能引導(dǎo)兒童理解文字內(nèi)容和插畫之間的關(guān)系。如果單幅的插畫不能準(zhǔn)確地表達(dá)文字信息，那么這幅插畫唯一的作用就是吸引兒童去翻看那本書。此情況和心理學(xué)家塞繆爾斯的研究結(jié)果相似，即“當(dāng)圖畫和文字同時呈現(xiàn)的時候，圖畫的刺激很容易讓孩子分心，干擾他們的閱讀反應(yīng)”。繪本作為大眾普及型讀物，需要父母陪伴兒童閱讀，而普通父母并不具備老師的教學(xué)方法，在閩南語語境下引導(dǎo)孩子認(rèn)識和理解童謠具有一定的難度。

2.缺乏形象化的整體聲色體驗

閩南童謠擁有豐富的詞匯和優(yōu)美的發(fā)音，被稱為古漢語的“活化石”[1]，流傳于福建、潮汕地區(qū)、海陸豐地區(qū)、臺灣地區(qū)和東南亞等海外華人之間，是閩南人千百年來世代口傳下來的念謠或唱謠。在以普通話為基礎(chǔ)的語言環(huán)境中，閩南童謠出版物（包括繪本）為了保留童謠的語音原貌，一般采用閩南語發(fā)音的擬聲字進(jìn)行編寫。當(dāng)讀者認(rèn)讀這些字時，需要對擬聲字進(jìn)行辨識轉(zhuǎn)譯，這一過程對兒童來說顯然過于復(fù)雜。雖然采用手機(jī)掃描二維碼可以獲取每首童謠念唱結(jié)合的音頻方式，使讀者配合繪本的圖文更好地認(rèn)知童謠，但是音頻信息被大腦感知后，需要有充分的形象化素材才能形成對童謠內(nèi)容的想象。從佩里·諾德曼的兒童繪本認(rèn)知理論來分析，繪本文字、插畫、音頻這三個變量仍然是分離的。因此，閱讀繪本的同時接受語音信息，需要有一連串明確的形象化、情境化的視覺體驗與之相匹配，否則僅憑一幅插畫是無法在文字和語音之間搭建起有效連接的。

二、閩南童謠繪本融入增強(qiáng)現(xiàn)實體驗的可能性

增強(qiáng)現(xiàn)實技術(shù)簡稱AR，就是一種將計算機(jī)生成的數(shù)字化內(nèi)容（動畫、影像、聲音、文本等）疊加到真實場景中，并能實時與用戶交互的技術(shù)。AR出版物是指在傳統(tǒng)紙質(zhì)出版物上，利用AR技術(shù)識別標(biāo)識或圖形，在屏幕上顯示虛擬的三維物體和場景，打造虛實結(jié)合、實時交互的立體出版物[2]。兒童繪本應(yīng)用AR技術(shù)，可以在靜態(tài)的圖畫上增加動畫、聲音、影像、游戲交互等多媒體內(nèi)容。

隨著手持移動設(shè)備的AR功能日趨完善，AR兒童繪本出版持續(xù)升溫，2016年后各出版社相繼出版了多種AR兒童繪本，內(nèi)容主要集中在文化知識和科普類讀物領(lǐng)域，如《中國年》（全2冊）、《皮影中國》（全3冊）、《小牛頓魔法科普館》（全30冊）、《艾布克的立體筆記》（全3冊）等。這些AR繪本在紙質(zhì)圖書的基礎(chǔ)上充分發(fā)揮AR技術(shù)的優(yōu)勢，提升了繪本閱讀的趣味性、知識性和游戲性。

具體來看，將AR技術(shù)融入閩南童謠有以下作用。

1.激發(fā)形象思維，提升藝術(shù)感知力

傳統(tǒng)紙質(zhì)繪本形式是平面靜態(tài)的圖畫和文字，認(rèn)知維度比較單一。而童謠內(nèi)容中往往會出現(xiàn)各種自然的或神話的人物、動物、植物等角色形象。兒童在閱讀繪本時，可通過AR全息數(shù)字化視聽技術(shù)觀看繪本中的角色躍然紙上，栩栩如生地念唱童謠，從而有效激發(fā)兒童的多維感知，滿足兒童喜歡新奇有趣的事物、形象化思維、對聲音敏感等認(rèn)知特點(diǎn)，拉近其與繪本的距離，增強(qiáng)其對閩南文化的興趣和認(rèn)知。

2.增強(qiáng)繪本的游戲性，提升閱讀樂趣

兒童對藝術(shù)的感知往往通過觀看和觸摸來體驗。西班牙科學(xué)家一項針對 4—5 歲學(xué)齡前兒童的臨床試驗發(fā)現(xiàn)，每天使用AR讀物的兒童，無論其閱讀時長還是質(zhì)量，較之于傳統(tǒng)圖書都有明顯提高[3]。隨著現(xiàn)代經(jīng)濟(jì)社會的變革，閩南童謠已悄然從閩南地區(qū)兒童的生活中淡去，因此，通過故事將童謠演繹為繪本，并融入AR技術(shù)，能使圖畫中的角色活靈活現(xiàn)地與兒童互動，使兒童在“聲色影畫”的情境中感受繪本所傳達(dá)的信息，在游戲中自覺獲得關(guān)于童謠的知識。

3.親子互動，增進(jìn)對閩南文化的了解

親子閱讀是繪本最主要的閱讀方式，而在文化全球化洗禮下成長起來的一代年輕父母，對閩南文化和閩南童謠本身就知之甚少，更不用說輔導(dǎo)孩子閱讀。但如果將AR多媒體功能融入繪本，增加寓教于樂的數(shù)字化內(nèi)容，就能改變傳統(tǒng)線性教育的認(rèn)知模式，大大降低學(xué)習(xí)門檻;加上AR出版物閱讀需要使用智能手機(jī)等移動設(shè)備，從而促使父母陪伴孩子一起觀看，與孩子在閱讀中一起了解閩南童謠，拉近親子關(guān)系。

三、閩南童謠繪本融入增強(qiáng)現(xiàn)實體驗的設(shè)計策略

人類的每種感官都有其特定的感知維度，多感官之間的相互轉(zhuǎn)換便形成了通感。通感在設(shè)計領(lǐng)域的應(yīng)用主要借助基于感知經(jīng)驗的觸發(fā)和聯(lián)想，把用戶不同的感官體驗綜合融通，觸發(fā)多維度用戶體驗，從而帶給用戶豐富而美好的體驗過程[4]。閩南童謠繪本融入AR多媒體交互體驗，可以讓讀者通過個體的綜合多感官體驗，感受繪本的情感傳遞，促進(jìn)童謠與兒童間的交互，從而加深兒童對閩南童謠的認(rèn)知和記憶。

從圖1可以看出，在閩南童謠AR繪本的交互設(shè)計時，要注意以下幾點(diǎn)。

1.視覺：童謠故事的主角形象代言

AR融入閩南童謠繪本是通過立體的角色念唱、動作表演與兒童形成交互，交互的主題是閩南童謠。當(dāng)交互時出現(xiàn)多個形象，會使兒童的注意力集中在視覺感官上，反而削弱了聽覺等其他感官的感知效果，干擾了主題表達(dá)。

因此，每首童謠只安排1—2個故事中的角色出場最為合適，并且專注于營造1—2個交互角色，這樣不僅節(jié)省移動終端大量的運(yùn)行資源，還能保證AR成像和交互功能能夠在中低端移動設(shè)備上順暢運(yùn)行。

2.動態(tài)：把地方文化融入動畫表演

只要AR出版物中的角色會動，在設(shè)計上就存在“怎么動”的問題。 在國際化的技術(shù)背景下，東方美學(xué)與西方美學(xué)的差異不再體現(xiàn)在工具上，而體現(xiàn)在審美層面。兩者在題材、風(fēng)格、節(jié)奏、敘事方法上有著明顯的差異，而這些差異更多來源于文化[5]。因此，閩南童謠繪本的AR角色動畫設(shè)計應(yīng)從傳統(tǒng)文化主題出發(fā)，表演風(fēng)格是一個可探討的創(chuàng)新點(diǎn)。

雖然當(dāng)下AR繪本角色動畫設(shè)計大多采用以迪士尼為代表的西式動畫運(yùn)動規(guī)律，但在設(shè)計傳統(tǒng)文化主題的AR繪本角色動畫時，設(shè)計者可以嘗試導(dǎo)入本土文化價值對其進(jìn)行塑造，把握好本地區(qū)傳統(tǒng)文化的優(yōu)勢，創(chuàng)造出既有現(xiàn)代審美價值又有傳統(tǒng)藝術(shù)美感的動畫表演風(fēng)格。例如，結(jié)合閩南提線木偶戲的表演形態(tài)，把以下四個特點(diǎn)應(yīng)用到動畫設(shè)計中，可使繪本角色的動畫表演呈現(xiàn)“偶趣”的一面。

一是身形如吊。由于提線木偶的各個關(guān)節(jié)是被懸絲牽引著的，所以表演時其肩、肘、臀都會有被提吊著的視覺感，而沒有線的部位會呈現(xiàn)松軟感，一緊一松兩種變化構(gòu)成一個形體，無論靜止還是運(yùn)動，都呈現(xiàn)一種獨(dú)特的肢體造型。

二是四肢彎曲、形態(tài)多菱角。由于提線木偶動作時四肢關(guān)節(jié)被懸絲提吊，呈彎曲狀，特別是肘部彎曲的同時向外伸展（在表演線規(guī)中稱為“提肘”），兩肘在肢體兩側(cè)分開，看上去“棱角分明”，與幽默大師卓別林分開雙腳的標(biāo)志性表演造型有異曲同工之處。

三是手足配合，手臂動作大。由于提線木偶“臂長及膝”，腿部比例偏短，所以在運(yùn)動中手臂的動作幅度較大，再加上“提肘”，動作顯得夸張，配合腿部運(yùn)動頻率快、幅度小，自然形成一種獨(dú)特的幽默動態(tài)。

四是“慣性動作”添趣味。由于提線木偶是靠撥弄懸絲動作的，停頓時各關(guān)節(jié)自然會產(chǎn)生慣性的顫動。正如泉州高甲戲“傀儡丑”，刻意模仿“富有趣味和詩意的慣性動作來強(qiáng)調(diào)肢體的受限和被操縱感”[6]。這種有意追求的動作定式，增強(qiáng)了整組動作的韻律感和節(jié)奏感。

3.聲音：符合主角形象的擬人化語音

聲音是實現(xiàn)AR人機(jī)交互的關(guān)鍵因素之一，缺少聲音配合，再好看的造型、再有趣的動畫也會使人機(jī)交互體驗像隔了一堵墻。閩南童謠AR繪本應(yīng)重視不同形象（人物、動物、植物）擬人化的語音設(shè)計，一方面，可以通過卡通角色的動作和童謠念唱表演加強(qiáng)對繪本內(nèi)容的表達(dá)，發(fā)揮AR繪本多媒體技術(shù)優(yōu)勢，提升兒童對以閩南語為語言基礎(chǔ)的閩南童謠的接受程度;另一方面，符合角色形象的語音設(shè)計是塑造一個完整的角色形象所不能忽視的，有好聲音的立體卡通角色，可以讓兒童對閩南童謠產(chǎn)生親近感，降低童謠認(rèn)知的難度。

4.交互：寓教于樂的游戲形式

AR作為一種數(shù)字化技術(shù)手段融入童謠繪本，目的是豐富繪本的感官內(nèi)容，使讀者可以輕松愉快地從中獲取知識。在當(dāng)前新媒體技術(shù)創(chuàng)新教育模式的背景下，游戲知識化和知識游戲化是大趨勢，因此童謠繪本中的游戲互動設(shè)計，可利用AR技術(shù)中將虛擬世界和現(xiàn)實世界結(jié)合的技術(shù)特點(diǎn)進(jìn)行開發(fā)[7]。例如，設(shè)置錄音功能，將讀者學(xué)習(xí)念唱童謠的聲音錄制下來在設(shè)備上播放，AR繪本中的角色會實時做出各種鼓勵性動作和發(fā)出相關(guān)語音，讓兒童感受到虛擬角色與其有情感上的交互，引導(dǎo)和鼓勵兒童主動學(xué)習(xí)。

文化傳播的關(guān)鍵在于讓人和文化發(fā)生關(guān)系，對非遺文化進(jìn)行跨時間和地域邊界的創(chuàng)新探索，也是當(dāng)前文化創(chuàng)意產(chǎn)業(yè)發(fā)展的一個重要契機(jī)[7]。閩南童謠繪本應(yīng)適當(dāng)融入AR多媒體交互設(shè)計，創(chuàng)造與插畫繪本認(rèn)知體驗相異的表達(dá)形式，提升繪本的親和力，激發(fā)兒童的認(rèn)知興趣，降低兒童對以閩南語為語言載體、以念唱為表達(dá)形式的閩南童謠的認(rèn)知難度，讓兒童在閱讀和交互中獲得傳統(tǒng)文化的熏陶。

|參考文獻(xiàn)|

[1]鷺白. 母語的溫度與文化根脈——以《閩南童謠繪本》點(diǎn)亮童年記憶[J]. 福建教育，2018（51）：56-57.

[2]周榮庭，顧斐. 增強(qiáng)現(xiàn)實童書的擬人化創(chuàng)新路徑研究[J]. 出版廣角，2017（24）：6-9.

[3]上官大堰. 增強(qiáng)現(xiàn)實兒童圖書優(yōu)勢分析與設(shè)計策略構(gòu)建[J]. 科技與出版，2017（2）：75-80.

[4]梁婷，湯曉穎，羅立宏. 基于粵語童謠的多感官設(shè)計研究[J]. 包裝工程，2020（18）：199-205.

[5]唐紅平. 透過水印木刻視覺語言探索水墨動畫創(chuàng)新[J]. 裝飾，2019（6）：102-105.

[6]吳慧穎. 高甲戲“傀儡丑”表演形態(tài)初探[J]. 戲劇，2012（3）：79-85.

[7]呂中意. 活態(tài)傳承視域下的非遺產(chǎn)品開發(fā)[J]. ?藝術(shù)百家，2019（3）：185-190.