編碼方式對不同性質(zhì)語篇記憶的影響：跨通道的分析視角

王 慧 宮朝銘 歐陽文珍

(1江蘇師范大學(xué)科，江蘇 徐州 221000;2中國礦業(yè)大學(xué)徐海學(xué)院，江蘇 徐州 221000)

一、問題提出

1999年拉考夫等學(xué)者首次提出第二代認(rèn)知科學(xué)的概念，即具身認(rèn)知(Embodied Cognition，EC)，不同于傳統(tǒng)認(rèn)知理論離身認(rèn)知(Disembodied Cognition，DC)，第二代認(rèn)知科學(xué)反對主客二元論，認(rèn)為人的認(rèn)知不是運(yùn)行在“身體硬件”之上用以指揮身體的“心理軟件”，主張人的認(rèn)知是身體(包括大腦在內(nèi))的認(rèn)知，強(qiáng)調(diào)認(rèn)知過程身心一體和認(rèn)知的具身效應(yīng)，以及身體操作對語義信息的促進(jìn)作用，并通過行為學(xué)和認(rèn)知神經(jīng)科學(xué)方法對這一觀點(diǎn)進(jìn)行了一定程度的驗(yàn)證[1][2][3][4]。如對工具的命名任務(wù)會激活顳中回和左側(cè)前運(yùn)動皮質(zhì)，而這兩個腦區(qū)在想象自我操作物體時也會得到激活。

”移動閱讀”概念細(xì)化身體操作為是否呈現(xiàn)實(shí)物進(jìn)行外顯操作為標(biāo)準(zhǔn)，區(qū)分出身體操作(Physical Manipulation,PM)和想象操作(Imagined Manipulation,IM)兩種”移動”的方式，探索兩種操作對于學(xué)習(xí)者空間判斷和記憶保持的影響，并預(yù)測身體操作將促進(jìn)抽象性質(zhì)內(nèi)容的學(xué)習(xí)[5]。在理解抽象信息時引起的運(yùn)動反應(yīng)與描述具體物體傳遞的句子的程度相同[1]。視覺和聽覺是人類感知信息的最主要通道，那么，收聽抽象語篇音頻的具身效應(yīng)是什么樣呢？因此，探究視覺和聽覺兩個通道的刺激反應(yīng)具有極重要的意義。注意資源的感覺通道特異性指出視覺和聽覺事件的加工平行且相互獨(dú)立，不同感覺通道的信息編碼和加工存在不同[6]。有研究表明，記憶、思維等高級心理過程與身體行動密切相關(guān)[7]，注意資源的感覺通道特異性為應(yīng)用具身操作閱讀進(jìn)行音頻材料提升語篇記憶的研究提供了理論依據(jù)。

以往研究多數(shù)聚焦視覺通道，較少考察聽覺通道閱讀閱讀材料的記憶差異[8][9][10][11]。本研究從跨通道的角度入手，將對跨通道下記憶空間表征的特點(diǎn)進(jìn)行探討，更直觀地比較視覺通道和聽覺通道下記憶空間表征的差異，探索改進(jìn)實(shí)驗(yàn)材料的閱讀形式后對語篇記憶的影響，尤其是研究結(jié)果將為視覺障礙人群的語篇記憶效果提高提供更科學(xué)的指導(dǎo)。已有研究顯示，在考察記憶水平的過程中，要同時參考再認(rèn)和回憶兩個指標(biāo)[12]。綜上所述，本研究擬通過兩個實(shí)驗(yàn)，分別考察閱讀方式和通道改變對閱讀語篇效果的影響，即再認(rèn)水平和回憶水平的影響。

二、實(shí)驗(yàn)研究

1.被試

選擇144名學(xué)生參加試驗(yàn)，被試不了解實(shí)驗(yàn)?zāi)康?，聽力正常，視力或矯正視力正常，無色覺障礙，隨機(jī)分到音頻形象材料和抽象材料組，每組72人，其中兩個大組的編碼方式分為DC和PM的各36人，男女各半，年齡在18～21歲之間，實(shí)驗(yàn)完成后獲得一份精美的禮物。

2.實(shí)驗(yàn)材料

通過預(yù)實(shí)驗(yàn)篩選出來正式實(shí)驗(yàn)的材料。答題測試計分，答對一道積一分，共10道題。正式實(shí)驗(yàn)共6份實(shí)驗(yàn)材料，形象類、抽象類材料各3份，通過電腦錄制的標(biāo)準(zhǔn)普通話女聲發(fā)音的音頻。

3.實(shí)驗(yàn)設(shè)計

采用2編碼方式(DC、PM)*2材料性質(zhì)(形象、抽象)被試間實(shí)驗(yàn)設(shè)計。因變量是答題正確率，自變量是編碼方式、材料性質(zhì)。

4.實(shí)驗(yàn)程序

實(shí)驗(yàn)分兩個階段。一是即時階段，采用Gardiner和Klee的研究范式中編碼、干擾任務(wù)、“對回憶的再認(rèn)”的三個環(huán)節(jié)。以團(tuán)體方式開始試驗(yàn)，保證實(shí)驗(yàn)場所安靜，被試獨(dú)立完成實(shí)驗(yàn)。本實(shí)驗(yàn)的編碼方式分為DC和PM兩種。實(shí)驗(yàn)前，通過指導(dǎo)語告知被試實(shí)驗(yàn)程序和注意事項，指導(dǎo)語均由主試一人執(zhí)行。閱讀/收聽文本形象和抽象材料的測試指導(dǎo)語程序上一致。被試閱讀/收聽完材料后進(jìn)行執(zhí)行干擾任務(wù)階段，即被試觀看一段視頻，觀看結(jié)束，進(jìn)入“對回憶的再認(rèn)”答題階段。二是延時階段。七天后，同一組被試再次完成“對回憶的再認(rèn)”任務(wù)，被試再次完成階段一的測試題。為保證再測數(shù)據(jù)是被試自然狀態(tài)的回憶再認(rèn)，被試提前不知道7天后的再測實(shí)驗(yàn)。統(tǒng)計兩次答題的正確率進(jìn)行比較分析。

三、實(shí)驗(yàn)結(jié)果

再認(rèn)正確率結(jié)果顯示，對材料性質(zhì)與編碼方式的單變量方差分析主體間效應(yīng)檢驗(yàn)發(fā)現(xiàn)，編碼方式主效應(yīng)顯著，F(xiàn)(1,68)=6.721，P<0.05，Eta2=0.090，DC編碼方式被試的答題成績(M=5.611,SD=0.295)和PM編碼方式被試的答題成績(M=6.694,SD=0.295)差異顯著。材料性質(zhì)主效應(yīng)顯著，F(xiàn)(1,68)=6.721，P<0.05，Eta2=0.090，被試閱讀形象材料答題成績(M=6.694,SD=0.295)和被試閱讀抽象材料答題成績(M=5.611,SD=0.295)差異顯著。編碼方式和材料性質(zhì)交互作用不顯著，F(xiàn)(1,68)=7.347，P>0.05，Eta2=0.033。

進(jìn)一步分析形象材料性質(zhì)在編碼方式上的顯著差異，F(xiàn)(1,34)=7.039，P<0.05，Eta2=0.172，PM編碼方式收聽形象材料的答題成績(M=7.556,SD=0.459)顯著高于DC編碼方式(M=5.833,SD=0.459)；抽象材料在編碼方式上差異不顯著，F(xiàn)(1,34)=0.713，P>0.05，Eta2=0.021，DC編碼方式閱讀抽象材料再測答題成績(M=5.389,SD=0.372)，PM編碼方式閱讀抽象材料答題成績(M=5.833,SD=0.372)無差異。這說明PM編碼方式的優(yōu)勢只在收聽形象音頻語篇材料時。

回憶正確率顯示，對材料性質(zhì)與編碼方式的單變量方差分析主體間效應(yīng)檢驗(yàn)發(fā)現(xiàn)，編碼方式主效應(yīng)顯著，F(xiàn)(1,68)=50.000，P<0.05，Eta2=0.177，PM編碼方式被試的答題成績(M=5.167,SD=0.308)顯著高于DC編碼方式(M=3.500,SD= 0.308)差異顯著。材料性質(zhì)主效應(yīng)不顯著，F(xiàn)(1,68)=12.500，P>0.05，Eta2=0.051，被試收聽形象材料再測答題成績(M=4.750,SD=0.308)和被試收聽抽象材料再測答題成績(M=3.917,SD=0.308)差異不顯著。編碼方式和材料性質(zhì)交互作用不顯著，F(xiàn)(1,68)=1.964，P>0.05，Eta2=0.028。上述結(jié)果說明：編碼方式、材料性質(zhì)對收聽效果都有影響。

進(jìn)一步分析形象材料性質(zhì)在編碼方式上的顯著差異，F(xiàn)(1,34)=12.022，P<0.05，Eta2=0.261，PM編碼方式收聽形象材料的答題成績(M=5.889,SD=0.465)顯著高于DC編碼方式(M=3.611,SD=0.465)；抽象材料在編碼方式上差異不顯著，F(xiàn)(1,34)=3.385，P>0.05，Eta2=0.091，DC編碼方式閱讀抽象材料再測答題成績(M=3.389,SD=0.406)，PM編碼方式閱讀抽象材料答題成績(M=4.444,SD=0.406)，這說明PM編碼方式的優(yōu)勢只影響收聽形象音頻語篇材料。

四、討論

即時階段，關(guān)于語篇記憶效果，即再認(rèn)正確率，PM編碼方式的語篇記憶效果最好。即使更換通道方式，依然保持了PM操作效應(yīng)的一致性，即PM操作編碼方式的語篇記憶效果遙遙領(lǐng)先于DC編碼方式，兩種編碼方式之間存在顯著差異。進(jìn)一步說明了我們的思考方式取決于我們所擁有怎樣的身體[1]。收聽形象音頻的語篇記憶比抽象音頻好，說明材料性質(zhì)是關(guān)鍵，操作效應(yīng)僅僅體現(xiàn)在了形象類的語篇上，弱化了材料類型的差異。進(jìn)一步分析可知，音頻呈現(xiàn)的言語工作記憶比文本少一個轉(zhuǎn)換環(huán)節(jié)，直接進(jìn)行語音編碼的優(yōu)勢明顯。延時階段，關(guān)于語篇記憶保持，即回憶正確率。PM編碼方式的語篇記憶保持效果最好，記得最牢，形象類語篇材料記憶保持效果比抽象材料的好。說明身體操作對記憶保持增強(qiáng)有促進(jìn)作用，而語篇材料的具身性越強(qiáng)，操作效應(yīng)越明顯。因此，即使更換了通道方式，依然是在PM編碼方式下的記憶保持情況好，但是促進(jìn)效果僅僅表現(xiàn)在收聽形象類材料上。出現(xiàn)這個結(jié)果，說明當(dāng)語篇閱讀材料以音頻形式呈現(xiàn)時，抽象材料的學(xué)習(xí)內(nèi)容是否經(jīng)過身體操作就不那么重要了。

操作效應(yīng)未出現(xiàn)在收聽抽象語篇材料上，可能與認(rèn)知資源的分配和學(xué)習(xí)風(fēng)格有關(guān)。

雖然注意資源會平衡分配完成視、聽覺任務(wù)，相互獨(dú)立，平行加工，這也是注意資源的感覺通道特異性，但是由于認(rèn)知資源的實(shí)際分配問題，閱讀兩類性質(zhì)語篇材料可能會消耗不同的認(rèn)知負(fù)荷，認(rèn)知負(fù)荷分配不均導(dǎo)致語篇記憶和記憶保持效果不一。已有認(rèn)知負(fù)荷的研究顯示，明確人的認(rèn)知資源是固定的、有限的，即外部認(rèn)知負(fù)荷、內(nèi)部認(rèn)知負(fù)荷和相關(guān)認(rèn)知負(fù)荷此消彼長[13]。所以，這有可能是收聽抽象類語篇材料未發(fā)生操作效應(yīng)的因素之一。另有研究表明，認(rèn)知風(fēng)格和信息呈現(xiàn)方式對學(xué)習(xí)者認(rèn)知負(fù)荷影響的研究中指出認(rèn)知負(fù)荷過重的情況導(dǎo)致記憶下降[14]。當(dāng)刺激呈現(xiàn)通道與學(xué)習(xí)風(fēng)格匹配，則會降低學(xué)習(xí)者的認(rèn)知負(fù)荷，反之則增加學(xué)習(xí)者的認(rèn)知負(fù)荷。因此，閱讀語篇材料的通道方式與學(xué)習(xí)者的感知學(xué)習(xí)風(fēng)格之間也存在交互作用，共同影響學(xué)習(xí)效果。還有研究表明自我損耗的通道效應(yīng)的作用，即感知通道呈現(xiàn)方式與學(xué)習(xí)風(fēng)格不匹配時，都會影響自動化加工水平[8]。綜上所述，就研究結(jié)果分析可知，注意資源分配、認(rèn)知負(fù)荷、學(xué)習(xí)風(fēng)格等因素，都有可能影響著跨通道閱讀兩類語篇材料的操作效應(yīng)，那么在具體研究時，我們一定不能脫離明確閱讀材料的性質(zhì)等因素，身體操作促進(jìn)語篇記憶效果也能千篇一律地給出統(tǒng)一的標(biāo)準(zhǔn)，如傳統(tǒng)觀點(diǎn)認(rèn)為的“心靈手巧”，因?yàn)樵陂喿x形象類語篇材料時出現(xiàn)了“手巧促進(jìn)心靈”現(xiàn)象。因此，探索如何為非視覺通道或者有視覺障礙的個體提供更有效的閱讀、記憶和記憶保持的新途徑，首先要從材料性質(zhì)和呈現(xiàn)方式導(dǎo)致的身體操作效應(yīng)的非統(tǒng)一性出發(fā)，同時兼顧學(xué)習(xí)者的學(xué)習(xí)通道偏好和學(xué)習(xí)風(fēng)格特點(diǎn)等因素，這些都是要考慮到的相關(guān)因素。

五、結(jié)論

與視覺通道一樣，聽覺通道也存在顯著的PM操作效應(yīng)，但對于在收聽抽象類語篇音頻材料未發(fā)生操作效應(yīng)的原因尚未定論，這將都有待于下一步的研究。

第一，優(yōu)化聽覺通道下的操作效應(yīng)的研究范式。已有研究顯示，當(dāng)感被試知學(xué)習(xí)風(fēng)格與通道呈現(xiàn)方式匹配時，學(xué)習(xí)效果更好[15]。未來聽覺通道下的操作效應(yīng)研究應(yīng)探索包含被試學(xué)習(xí)風(fēng)格區(qū)分的實(shí)驗(yàn)范式。

第二，未來可以用ERP 和FMRI以外的方法，進(jìn)一步考察視聽通道下操作效應(yīng)發(fā)生的認(rèn)知神經(jīng)機(jī)制。

第三，未來還可以從注意資源分配特點(diǎn)探索PM操作效應(yīng)對形象、抽象類語篇閱讀效果的影響。

第四，已有研究顯示動作表征的積累影響學(xué)習(xí)記憶能力，未來還可以探索動作表征水平對PM操作效應(yīng)的影響，尋找促進(jìn)操作效應(yīng)的新方法。