陳玥冰, 羅立宏
(廣東工業(yè)大學(xué)數(shù)字媒體系,廣州510006)
早在70年代初虛擬現(xiàn)實(shí)已經(jīng)開(kāi)始應(yīng)用在軍事、航天等領(lǐng)域,由于計(jì)算機(jī)的硬件設(shè)備和軟件開(kāi)發(fā)并未成熟,與之高昂的開(kāi)發(fā)成本等原因,虛擬現(xiàn)實(shí)在其他領(lǐng)域的應(yīng)用受到限制[1]。2010年數(shù)字化產(chǎn)品應(yīng)用和傳播空前繁榮,VR技術(shù)乘風(fēng)啟航,其沉浸性、交互性、和構(gòu)想性的特征,引發(fā)行業(yè)的投資熱潮,2015年全球投資劇增至35億美元,2016年投資達(dá)到巔峰[2]。但國(guó)內(nèi)VR投資資金多集中在硬件研發(fā)上,優(yōu)秀的VR作品相對(duì)貧乏,遠(yuǎn)不能達(dá)到大眾在娛樂(lè)、學(xué)習(xí)、生活等的應(yīng)用需求。為滿(mǎn)足多方位的應(yīng)用需求,虛擬現(xiàn)實(shí)投資市場(chǎng)紛紛調(diào)整戰(zhàn)略,國(guó)內(nèi)的樂(lè)相大朋、華為和小米等VR硬件設(shè)備廠家,開(kāi)始與娛樂(lè)、教育、文化、旅游等行業(yè)對(duì)接,以實(shí)現(xiàn)虛擬現(xiàn)實(shí)行業(yè)全面的生態(tài)整合。2018年2月由教育部印發(fā)的《教師教育振興行動(dòng)計(jì)劃(2018-2022)》指出,利用云計(jì)算、虛擬現(xiàn)實(shí)、人工智能等新技術(shù)推動(dòng)教學(xué)改革[3];2018年9月由國(guó)家發(fā)改委發(fā)布的《關(guān)于發(fā)展數(shù)字經(jīng)濟(jì)穩(wěn)定并擴(kuò)大就業(yè)的指導(dǎo)意見(jiàn)》指出,采用互聯(lián)網(wǎng)、虛擬現(xiàn)實(shí)與增強(qiáng)現(xiàn)實(shí)、人機(jī)互動(dòng)等技術(shù)推廣微課、混合式教學(xué)[4];2018年9月由教育部印發(fā)的《關(guān)于實(shí)施卓越教師培養(yǎng)計(jì)劃2.0的意見(jiàn)》指出,利用虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)建設(shè)交互性的課程資源[5]。哈佛大學(xué)的一位教授在采訪時(shí)提出“先發(fā)展,后整合”的觀點(diǎn)[6],VR以新技術(shù)的性質(zhì)與教育需求結(jié)合,其引發(fā)的教育創(chuàng)新思維包含了未知的風(fēng)險(xiǎn),同時(shí)也加速教育的創(chuàng)新發(fā)展。
傳統(tǒng)教學(xué)在不斷尋找方法讓教育跟上技術(shù)發(fā)展的速度,納入創(chuàng)新的數(shù)字化教育渠道,提高解決抽象的、難以理解知識(shí)點(diǎn)的效率[7],如CAI計(jì)算機(jī)輔助教育,提供圖像、PPT課件、數(shù)字動(dòng)畫(huà)等的輔助教學(xué)資源;立體呈現(xiàn)虛擬現(xiàn)實(shí)技術(shù)讓學(xué)生置于虛擬的空間感知知識(shí),虛擬現(xiàn)實(shí)正在成為教育發(fā)展的下一步[8]。
積極參與是優(yōu)秀教學(xué)的關(guān)鍵,VR內(nèi)容與課程內(nèi)容結(jié)合有效地增強(qiáng)學(xué)習(xí)效率和深度學(xué)習(xí),學(xué)生可以通過(guò)輕松娛樂(lè)的方式理解和記憶知識(shí)難點(diǎn)[9]。北京“微視酷”用一套系統(tǒng)支撐VR教育[10],相當(dāng)于Windows或Android的控制平臺(tái),開(kāi)發(fā)便捷的課堂VR資源;2017年華東理工大學(xué)“污水廠VR教學(xué)案例”還原污水處理廠現(xiàn)場(chǎng)[11],解決學(xué)生對(duì)抽象知識(shí)的模糊理解(見(jiàn)圖1)。
在教育中使用VR創(chuàng)建歷史背景或地理背景,相比文字圖片描繪的情境,理解深度的差異是極其顯著的。例如在書(shū)中了解的月球的各個(gè)階段,和把他們放置到月球表面去探索地球;再如學(xué)生在第一次世界大戰(zhàn)時(shí)站在戰(zhàn)壕中可以獲得的理解和情感體驗(yàn);漢密爾頓學(xué)院的印度教神社和寺廟“數(shù)字人文計(jì)劃”[12],用于理解加耶及其神社的發(fā)展;斯坦福人類(lèi)計(jì)算機(jī)交互實(shí)驗(yàn)室發(fā)布的海洋酸化體驗(yàn)[13],通過(guò)HTC Vive觀察二氧化碳對(duì)海洋生物的影響等。
通過(guò)書(shū)本學(xué)習(xí)記憶醫(yī)學(xué)知識(shí)是非常艱難的,小白鼠解剖實(shí)驗(yàn)成本既高又不可重復(fù),VR為復(fù)雜的臨床操作提供訓(xùn)練渠道和記憶手術(shù)步驟等給予有效的幫助,充分利用VR的沉浸教育方式,解決醫(yī)學(xué)和科學(xué)等領(lǐng)域的教學(xué)困難。斯坦福大學(xué)的虛擬心臟允許用戶(hù)在心臟內(nèi)“傳送”[14],以了解復(fù)雜的先天性心臟缺陷,提高留存率和熟練程度,在全球范圍內(nèi)共享寶貴的資源,并節(jié)省高昂的培訓(xùn)和時(shí)間成本(見(jiàn)圖2)。
圖2 斯坦福大學(xué)的虛擬心臟
在VR里允許創(chuàng)建3D模型,你可以把創(chuàng)意想象通過(guò)色彩、畫(huà)筆等工具設(shè)計(jì)作品,或者你可以在一個(gè)畫(huà)框里體驗(yàn)自由構(gòu)圖的訓(xùn)練,在身臨其境的虛擬世界里在不同的角度觀察和創(chuàng)作作品。
綜上所述,VR適用于人文歷史、學(xué)科教育、自然科學(xué)、工程科學(xué)、語(yǔ)言文化等知識(shí)的虛擬呈現(xiàn),VR教育市場(chǎng)逐步發(fā)展,行業(yè)應(yīng)了解教育、針對(duì)知識(shí)難點(diǎn)制定VR內(nèi)容,滿(mǎn)足提高教育功能的需求[15]。
教學(xué)資源將VR虛擬現(xiàn)實(shí)技術(shù)與藝術(shù)思維密切交融,深層滲透在一起。戴上頭顯沉浸在虛擬的3D水墨藝術(shù)環(huán)境,這是除了夢(mèng)境唯一到達(dá)另一個(gè)世界空間的通道[16]。參與者可以在本項(xiàng)目中大膽創(chuàng)造,把腦海中的各種構(gòu)思變成看得見(jiàn)的虛擬物體和環(huán)境,人們可以在這里理解和體驗(yàn)構(gòu)圖設(shè)計(jì),提高美感認(rèn)知。
下面為內(nèi)容設(shè)計(jì)者開(kāi)展同類(lèi)教育資源設(shè)計(jì)時(shí)提供案例素材,并通過(guò)教學(xué)活動(dòng)和體驗(yàn)數(shù)據(jù)證明本教學(xué)資源的可行性[17]。
通過(guò)可穿戴設(shè)備進(jìn)入構(gòu)圖訓(xùn)練的虛擬場(chǎng)景,根據(jù)場(chǎng)地空間和感應(yīng)器可探測(cè)范圍設(shè)置活動(dòng)區(qū)域,有“瞬間移位”和“漫步至目標(biāo)位置”兩種方式位移,對(duì)手柄輸入操作指令(見(jiàn)圖3),實(shí)現(xiàn)與虛擬世界的人機(jī)交互[18]。
圖3 手柄按鍵功能分配
在構(gòu)圖訓(xùn)練場(chǎng)景中,對(duì)預(yù)先構(gòu)建的創(chuàng)作實(shí)體進(jìn)行選擇,確定目標(biāo)實(shí)體后實(shí)現(xiàn)抓取功能,預(yù)設(shè)的創(chuàng)作實(shí)體即刻復(fù)制生成新的實(shí)體,不松開(kāi)抓取按鈕情況下可跟隨手的移動(dòng)坐標(biāo),放開(kāi)抓取按鈕后實(shí)體停留在最后抓取按鈕計(jì)算的坐標(biāo)上,再者,當(dāng)進(jìn)入構(gòu)圖畫(huà)框設(shè)定的計(jì)算范圍時(shí),物體將生成于畫(huà)框中心位置。抓取事件的設(shè)計(jì)是為了實(shí)現(xiàn)下一步的擺放事件,對(duì)畫(huà)框內(nèi)實(shí)體觸發(fā)進(jìn)行移動(dòng)、旋轉(zhuǎn)和縮放(見(jiàn)圖3),對(duì)預(yù)設(shè)實(shí)體在畫(huà)框內(nèi)進(jìn)行排布,根據(jù)創(chuàng)作需求用于創(chuàng)作不同主題的作品(見(jiàn)圖4)。
圖4 構(gòu)圖訓(xùn)練
以國(guó)畫(huà)布局的基本理論為方法,提取賓主、疏密、虛實(shí)、留白作為評(píng)分規(guī)則的計(jì)算依據(jù)[19],對(duì)構(gòu)圖畫(huà)面進(jìn)行評(píng)分。通過(guò)獲取所述構(gòu)圖畫(huà)框界面對(duì)角兩點(diǎn)的坐標(biāo),將構(gòu)圖畫(huà)框界面分割成n份,并發(fā)射n條射線進(jìn)行射線檢測(cè),構(gòu)圖規(guī)則包括以下方法:
(1)賓主計(jì)分。通過(guò)射線檢測(cè),獲取構(gòu)圖畫(huà)框界面中對(duì)應(yīng)物體的畫(huà)框占比,在所有對(duì)象占據(jù)的格子數(shù)中,獲取格子數(shù)的最大差值;若差值大則證明有一個(gè)對(duì)象的格子數(shù)遠(yuǎn)超于其他對(duì)象的格子數(shù),則為主。差值越大則主賓對(duì)比越強(qiáng)烈則分?jǐn)?shù)越高。根據(jù)所述差值確定賓主計(jì)分?jǐn)?shù)值,差值越大則賓主計(jì)分?jǐn)?shù)值越高。
(2)疏密計(jì)分。獲取檢測(cè)返回的格子矩陣,按照順序依次進(jìn)行檢索,可以為從左到右從上到下的順序,若檢索到未檢索過(guò)的對(duì)象,則記錄到一個(gè)數(shù)組中,并擴(kuò)散檢索對(duì)象四周的4個(gè)對(duì)象,若再次檢索到未檢索過(guò)的對(duì)象,則繼續(xù)檢索的過(guò)程,將檢索到的相鄰的對(duì)象的數(shù)量記錄到一個(gè)數(shù)組中,獲取最大數(shù)量差值,根據(jù)所述最大數(shù)量差值確定疏密計(jì)分?jǐn)?shù)值,最大數(shù)量差值越大則疏密計(jì)分?jǐn)?shù)值越高。
(3)虛實(shí)計(jì)分。通過(guò)射線檢測(cè)獲取到對(duì)應(yīng)的對(duì)象的坐標(biāo),比對(duì)對(duì)象的坐標(biāo)來(lái)判斷對(duì)象是否距離拍攝設(shè)備超過(guò)了指定距離,若距離超過(guò)所述指定距離,則為虛,否則為實(shí),根據(jù)虛實(shí)對(duì)象數(shù)量對(duì)比數(shù)值確定虛實(shí)計(jì)分?jǐn)?shù)值,虛實(shí)對(duì)象數(shù)量對(duì)比與預(yù)設(shè)第一比例差距越小則虛實(shí)計(jì)分?jǐn)?shù)值越高;預(yù)設(shè)第一比例可以為1∶1。
(4)留白計(jì)分。獲取射線檢測(cè)返回的格子矩陣,檢索獲取有對(duì)象的格子數(shù)量和沒(méi)對(duì)象的格子數(shù)量,進(jìn)行對(duì)比,根據(jù)有對(duì)象的格子數(shù)量與沒(méi)對(duì)象的格子數(shù)量的比例確定留白計(jì)分?jǐn)?shù)值,有對(duì)象的格子數(shù)量與沒(méi)對(duì)象的格子數(shù)量的比例與預(yù)設(shè)第二比例差距越小則留白計(jì)分?jǐn)?shù)值越高。預(yù)設(shè)第二比例可以為3∶7或7∶3。
根據(jù)上面各項(xiàng)計(jì)分,將各項(xiàng)計(jì)分相加之和取平均值來(lái)得到構(gòu)圖得分。當(dāng)然還可以采用不同計(jì)分項(xiàng)對(duì)應(yīng)不同的權(quán)重來(lái)計(jì)算最終的構(gòu)圖得分。進(jìn)一步地,在所述按照預(yù)設(shè)評(píng)分規(guī)則對(duì)所述構(gòu)圖畫(huà)面進(jìn)行評(píng)分,得到構(gòu)圖得分之后還可以對(duì)多個(gè)構(gòu)圖畫(huà)面的構(gòu)圖得分高低,生成顯示信息顯示在排行榜上,所述顯示信息包括:排行榜界面、構(gòu)圖得分、角色信息。通過(guò)排行榜可以清楚的記錄每次設(shè)計(jì)構(gòu)圖的得分排名。通過(guò)元素?cái)[放可以快速進(jìn)行構(gòu)圖設(shè)計(jì),便于反思、調(diào)整和修改。
漫游場(chǎng)景(見(jiàn)圖5),參與者可以帶著設(shè)計(jì)構(gòu)圖的課題進(jìn)入場(chǎng)景,從聽(tīng)老師教授轉(zhuǎn)變?yōu)橛H身經(jīng)歷,在場(chǎng)景中自由游覽采風(fēng),身臨其境體會(huì)國(guó)畫(huà)意境,在實(shí)踐感知中,獲取更多的藝術(shù)靈感和創(chuàng)作動(dòng)力,有利于學(xué)生們藝術(shù)修養(yǎng)的養(yǎng)成和中華優(yōu)秀傳統(tǒng)文化的傳承[20]。
圖5 漫游場(chǎng)景
在游覽時(shí),對(duì)手柄操作實(shí)現(xiàn)交互功能,滿(mǎn)足學(xué)習(xí)和娛樂(lè)需求。如UI交互菜單包含作品賞析功能、拍照功能、幫助功能,以及構(gòu)圖訓(xùn)練、游覽關(guān)卡和首頁(yè)關(guān)卡切換功能(見(jiàn)圖6)。再者,可在感應(yīng)器范圍內(nèi)移動(dòng)或者通過(guò)瞬移方法移動(dòng),在場(chǎng)景自由游覽(見(jiàn)圖7);去到風(fēng)景優(yōu)美的地方,打開(kāi)你的相機(jī)拍下美好瞬間(見(jiàn)圖8);可與帶藍(lán)色圖標(biāo)物體互動(dòng)(見(jiàn)圖9)。
圖6 UI菜單
圖7 移動(dòng)功能
圖8 相機(jī)功能
圖9 抓取功能
利用VR情境,將學(xué)生學(xué)習(xí)的注意力從老師的PPT和一堆令人迷惘的圖片資料中解脫出來(lái)。學(xué)生進(jìn)入水墨風(fēng)格的VR仿真系統(tǒng)后,通過(guò)聽(tīng)、看、觸摸、移動(dòng)、交互等方式觀察和思考[21]。突破學(xué)生學(xué)習(xí)動(dòng)機(jī)難激發(fā)的教學(xué)難點(diǎn),讓學(xué)生在情境中不知不覺(jué)地產(chǎn)生學(xué)習(xí)期待,按照從使用→學(xué)習(xí)→檢驗(yàn)→鞏固的學(xué)習(xí)過(guò)程,順利完成學(xué)習(xí)任務(wù)。學(xué)習(xí)情境可以循環(huán)呈現(xiàn),無(wú)限次滿(mǎn)足學(xué)生體驗(yàn)和驗(yàn)證的欲望,降低對(duì)老師和環(huán)境依賴(lài),增強(qiáng)獨(dú)立學(xué)習(xí)的能力,根據(jù)自己的學(xué)習(xí)進(jìn)度量體裁衣。
遵循智慧型技能學(xué)習(xí)過(guò)程的心理學(xué)原理,依據(jù)項(xiàng)目教學(xué)設(shè)計(jì)思路,以《設(shè)計(jì)構(gòu)圖的VR體驗(yàn)》虛擬教學(xué)資源為情境,設(shè)計(jì)了3個(gè)等級(jí)的教學(xué)活動(dòng):一次體驗(yàn),學(xué)習(xí)國(guó)畫(huà)構(gòu)圖形式的運(yùn)用,掌握基本概念;二次體驗(yàn),構(gòu)圖理解的反思與改進(jìn);三次體驗(yàn),強(qiáng)化學(xué)生國(guó)畫(huà)構(gòu)圖設(shè)計(jì)能力,培養(yǎng)國(guó)畫(huà)思維[22]。帶著問(wèn)題的學(xué)習(xí)方法,提高解決問(wèn)題的能力,促進(jìn)學(xué)生的深度參與及深層學(xué)習(xí)。
課程結(jié)束后對(duì)課程中30位學(xué)生問(wèn)卷調(diào)查取樣(見(jiàn)圖10),分析和評(píng)估教學(xué)資源的有效性、學(xué)生學(xué)習(xí)動(dòng)機(jī)和參與度,得出以下結(jié)論:學(xué)生對(duì)VR身臨其境的水墨風(fēng)格體驗(yàn),愉悅感極強(qiáng),93%的學(xué)生對(duì)國(guó)畫(huà)4種基本構(gòu)圖形式能直觀理解、運(yùn)用并產(chǎn)生對(duì)國(guó)畫(huà)的喜愛(ài)。
圖10 問(wèn)卷調(diào)查表
通過(guò)體驗(yàn)、實(shí)踐和創(chuàng)作性學(xué)習(xí),以更具體和創(chuàng)造性的方式獲得知識(shí)。該“設(shè)計(jì)構(gòu)圖的VR體驗(yàn)”資源并不拘泥于某節(jié)課程使用,場(chǎng)景的開(kāi)放性設(shè)計(jì),適合所有藝術(shù)基礎(chǔ)課程教學(xué)使用,易于讓使用者創(chuàng)作出更多的應(yīng)用價(jià)值。
VR教學(xué)資源的成本和內(nèi)容是發(fā)展中最大障礙,它的普及還需要時(shí)間讓這個(gè)新技術(shù)成為一般機(jī)構(gòu)承擔(dān)得起的教育投資[23];另外市場(chǎng)上已有一些VR資源,但內(nèi)容質(zhì)量還不是很高,而且也不是專(zhuān)門(mén)用于教育上,仍然需要時(shí)間開(kāi)發(fā)高質(zhì)量和針對(duì)性的教育資源。
本文原創(chuàng)案例“設(shè)計(jì)構(gòu)圖的VR體驗(yàn)”詳細(xì)分析了教學(xué)內(nèi)容的設(shè)計(jì)和開(kāi)發(fā),提出以傳統(tǒng)國(guó)畫(huà)布局為理論依據(jù)的基礎(chǔ)構(gòu)圖方法,目標(biāo)是培養(yǎng)學(xué)生構(gòu)圖能力和傳承中華優(yōu)秀文化,如何在現(xiàn)代平面設(shè)計(jì)當(dāng)中應(yīng)用中國(guó)畫(huà)的構(gòu)圖藝術(shù),不僅是構(gòu)建本土民族文化作品的要求,也是保護(hù)民族文化的一種方式[24]。學(xué)生可在立體的水墨風(fēng)格場(chǎng)景自由游覽,模擬寫(xiě)生采風(fēng)的活動(dòng),可抓取物體在畫(huà)框中自由擺放訓(xùn)練構(gòu)圖能力[25]。通過(guò)趣味性的情節(jié)和VR沉浸性體驗(yàn)的特點(diǎn),帶動(dòng)學(xué)生學(xué)習(xí)的主動(dòng)性,區(qū)別于傳統(tǒng)的單向傳播方式,激發(fā)新的思想和意義。針對(duì)不同年齡層、科目的學(xué)習(xí)需求制定教學(xué)資源,是有效的輔助學(xué)生掌握困難的知識(shí)點(diǎn)的,連接到互聯(lián)網(wǎng)傳播渠道讓VR教學(xué)資源得到普遍應(yīng)用。