韓慶年 沙恩·道森 卡桑德拉·科爾文
摘? ?要:基于教學(xué)數(shù)據(jù)挖掘的學(xué)習(xí)分析在大學(xué)中的大規(guī)模應(yīng)用已成趨勢(shì),許多大學(xué)紛紛尋求提升學(xué)生學(xué)習(xí)的創(chuàng)新方法,以更好地應(yīng)對(duì)未來(lái)發(fā)展的挑戰(zhàn)。文章在文獻(xiàn)研究和實(shí)地考察的基礎(chǔ)上,通過(guò)對(duì)澳大利亞多所大學(xué)的24位學(xué)習(xí)分析領(lǐng)域?qū)<业纳疃仍L談,并對(duì)訪談文本進(jìn)行編碼分析,結(jié)果發(fā)現(xiàn):澳大利亞高校的學(xué)習(xí)分析實(shí)踐基礎(chǔ)條件較好,在國(guó)際學(xué)習(xí)分析研究領(lǐng)域中網(wǎng)絡(luò)中心度較高;其總體特征為自下而上的微觀層面的學(xué)習(xí)分析和自上而下的宏觀層面的學(xué)習(xí)分析共存;挑戰(zhàn)主要存在于數(shù)據(jù)、能力與素養(yǎng)、組織協(xié)調(diào)、經(jīng)費(fèi)等方面。澳大利亞高校學(xué)習(xí)分析方面的實(shí)踐和研究已觸及大學(xué)組織內(nèi)部協(xié)調(diào)機(jī)制,促進(jìn)了大學(xué)內(nèi)部組織機(jī)構(gòu)的變革,也為目前尚處于起步階段的我國(guó)高校的學(xué)習(xí)分析實(shí)踐,提供了參考和借鑒。
關(guān)鍵詞:澳大利亞;學(xué)習(xí)分析;數(shù)據(jù)挖掘;組織變革;學(xué)生保留率
中圖分類(lèi)號(hào):G434? ? ? 文獻(xiàn)標(biāo)志碼:A? ? ? 文章編號(hào):1673-8454(2022)10-0031-09
一、引言
進(jìn)入21世紀(jì)以來(lái),澳大利亞政府一方面推行“質(zhì)量標(biāo)準(zhǔn)驅(qū)動(dòng)”的高等教育改革,另一方面信奉新公共管理理念,強(qiáng)調(diào)市場(chǎng)的介入,主張采用新自由主義導(dǎo)向、競(jìng)爭(zhēng)性的高等教育撥款政策,政府對(duì)大學(xué)撥款占大學(xué)經(jīng)費(fèi)來(lái)源的比例逐漸減少。[1]
在經(jīng)費(fèi)來(lái)源結(jié)構(gòu)性變化和大學(xué)擴(kuò)招的雙重壓力之下,澳大利亞高等教育面臨巨大的挑戰(zhàn)。主要體現(xiàn)在保持教育教學(xué)水平和控制學(xué)生流失兩個(gè)方面,后者尤甚。據(jù)獨(dú)立智庫(kù)格拉坦研究所(Grattan Institute)發(fā)表的報(bào)告,澳大利亞有近五分之一的學(xué)生不能順利畢業(yè)。[2]事實(shí)上,因?yàn)楦鱾€(gè)大學(xué)之間差異較大,有些大學(xué)的學(xué)生保留率低至70%以下,即便是悉尼大學(xué)、墨爾本大學(xué)等世界一流名校對(duì)學(xué)生保留率也非常擔(dān)憂。[3-8]澳大利亞放棄學(xué)業(yè)的學(xué)生比例也大大高于經(jīng)濟(jì)合作與發(fā)展組織(Organization for Economic Co-operation and Development,簡(jiǎn)稱OECD)的平均水平,這已經(jīng)成為澳大利亞高等教育界的普遍焦慮。[9]
與歐美國(guó)家一樣,澳大利亞教育界更多使用學(xué)生保留率來(lái)表示學(xué)生仍然在學(xué)業(yè)軌道內(nèi),沒(méi)有離開(kāi)、輟學(xué)、學(xué)業(yè)失敗、退學(xué)等。盡管壓力重重,但澳大利亞教育界一直努力從積極的視角研究學(xué)生保留率滑落的原因,并采取多種措施來(lái)提升學(xué)生保留率。
據(jù)澳大利亞高等教育標(biāo)準(zhǔn)委員會(huì)(Higher Education Standards Panel)2017年發(fā)布的研究報(bào)告所述,學(xué)生不能繼續(xù)學(xué)業(yè)的原因主要包括兩個(gè)層面:一是院校的問(wèn)題,比如學(xué)習(xí)環(huán)境問(wèn)題、教師能力不足、生師比高、學(xué)習(xí)支持不足等;二是學(xué)生個(gè)人的問(wèn)題,如經(jīng)濟(jì)、健康、情感、學(xué)習(xí)投入等,學(xué)生個(gè)人因素只能解釋一小部分(22.5%)的問(wèn)題,機(jī)構(gòu)因素對(duì)學(xué)生輟學(xué)問(wèn)題的解釋力更大。[10]
因此,大學(xué)普遍關(guān)注學(xué)生的需求,重視收集在校生、畢業(yè)生、雇主等利益相關(guān)者對(duì)大學(xué)教育質(zhì)量的反饋信息,[11]通過(guò)收集在校生和畢業(yè)生對(duì)課程、教學(xué)、科研等的評(píng)價(jià)信息,不斷改進(jìn)教學(xué)和管理水平,優(yōu)化學(xué)習(xí)環(huán)境,改善學(xué)習(xí)體驗(yàn),盡可能地使學(xué)生保留在學(xué)習(xí)軌道內(nèi),成功完成學(xué)業(yè)。
學(xué)習(xí)管理系統(tǒng)、學(xué)生信息系統(tǒng)、社會(huì)化媒體、教學(xué)視頻錄制等教育技術(shù)的規(guī)?;\(yùn)用,使關(guān)于教學(xué)實(shí)踐的大數(shù)據(jù)采集和存儲(chǔ)成為可能,[12]這些數(shù)字蹤跡能夠被挖掘、分析,用來(lái)表征、識(shí)別、評(píng)估學(xué)習(xí)。[13]因此,通過(guò)學(xué)習(xí)分析來(lái)“測(cè)量、收集、分析和報(bào)告有關(guān)學(xué)生和學(xué)習(xí)環(huán)境的數(shù)據(jù),以理解和最優(yōu)化學(xué)習(xí)及其發(fā)生的環(huán)境”成為澳大利亞高校的普遍做法。學(xué)習(xí)分析被視為提高學(xué)生保留率的重要戰(zhàn)略,也得到澳大利亞教學(xué)辦公室(Office of Learning and Teaching,簡(jiǎn)稱OLT)等教育主管部門(mén)的眾多項(xiàng)目資助,如表1所示。
二、訪談設(shè)計(jì)
為進(jìn)一步探尋當(dāng)前澳大利亞高校學(xué)習(xí)分析實(shí)踐的進(jìn)展情況,在前期文獻(xiàn)研究和實(shí)地考察的基礎(chǔ)上,課題組對(duì)澳大利亞多所大學(xué)的專(zhuān)家學(xué)者和實(shí)踐從業(yè)人員開(kāi)展了系統(tǒng)的文本訪談,較為深入、全面地了解澳大利亞高校學(xué)習(xí)分析實(shí)踐的現(xiàn)狀、發(fā)展優(yōu)勢(shì)、存在問(wèn)題,以期為我國(guó)高校實(shí)踐提供借鑒。
(一)訪談提綱擬定
課題組圍繞澳大利亞大學(xué)學(xué)習(xí)分析實(shí)踐的狀況、發(fā)展優(yōu)勢(shì)和面臨的挑戰(zhàn),設(shè)計(jì)了5個(gè)方面的問(wèn)題,由受訪者作答:①學(xué)習(xí)分析的定義;②澳大利亞學(xué)習(xí)分析發(fā)展的驅(qū)動(dòng)力;③澳大利亞學(xué)習(xí)分析發(fā)展的主要優(yōu)勢(shì)和挑戰(zhàn);④澳大利亞學(xué)習(xí)分析的國(guó)際異同;⑤參與或主持的實(shí)際學(xué)習(xí)分析項(xiàng)目。
(二)訪談對(duì)象選擇
訪談對(duì)象選擇方面主要考慮要盡可能地囊括學(xué)習(xí)分析研究人員、大學(xué)或有關(guān)機(jī)構(gòu)的學(xué)習(xí)分析實(shí)際從業(yè)人員,共設(shè)計(jì)了3個(gè)途徑:第一類(lèi),通過(guò)文獻(xiàn)檢索篩選出以第一作者身份發(fā)文兩篇以上的共67名作者。第二類(lèi),澳大利亞學(xué)習(xí)分析特別小組(Learning Analytics Special Interest Group,簡(jiǎn)稱LA-SIG)成員。LA-SIG是一個(gè)由澳大利亞和新西蘭地區(qū)的高校學(xué)習(xí)分析方面的學(xué)者和管理者共同組成的學(xué)習(xí)分析溝通網(wǎng)絡(luò),其成員遍布澳大利亞各所大學(xué)。第三類(lèi),由南澳大學(xué)項(xiàng)目組共同討論,增補(bǔ)業(yè)內(nèi)專(zhuān)家9人。
(三)訪談稿發(fā)放和收集
第一類(lèi)67名論文作者和第三類(lèi)9名增補(bǔ)業(yè)內(nèi)專(zhuān)家的訪談提綱由筆者通過(guò)電子郵件發(fā)出,共涉及澳大利亞33所大學(xué)和有關(guān)組織機(jī)構(gòu)。第二類(lèi)訪談對(duì)象LA-SIG成員由協(xié)會(huì)秘書(shū)處轉(zhuǎn)發(fā)調(diào)查提綱。最終共收到24份完整有效的答卷,其中17份來(lái)自論文作者,6份來(lái)自增補(bǔ)業(yè)內(nèi)專(zhuān)家,1份來(lái)自LA-SIG成員。
(四)訪談稿編碼
盡管訪談提綱中對(duì)研究問(wèn)題列出綱要,但學(xué)者們對(duì)問(wèn)題的回答往往表現(xiàn)出其對(duì)學(xué)習(xí)分析的整體認(rèn)識(shí),對(duì)各問(wèn)題的回答之間的邊界并不齊整。基于此,筆者借鑒扎根理論方法對(duì)訪談稿展開(kāi)分析,并基于NVIVO 12 Plus軟件對(duì)24份訪談稿逐題編碼、分析、提煉。
1.第一輪開(kāi)放式編碼
對(duì)搜集到的文本資料加以概念化和范疇化,即對(duì)資料數(shù)據(jù)逐詞、逐句、逐行、逐段地貼標(biāo)簽、做摘要,進(jìn)行現(xiàn)象定義,不斷將這些現(xiàn)象概念化,進(jìn)而從這些概念中抽象出主題。[20]該階段通過(guò)“定義現(xiàn)象—界定概念—命名主題”逐步展開(kāi)。經(jīng)兩名研究者共同討論、編碼,此階段共貼標(biāo)簽386個(gè)。經(jīng)反復(fù)考慮、討論、對(duì)比與修改,剔除重復(fù)次數(shù)極少(≦2)的概念以及部分前后矛盾的概念,大致產(chǎn)生68個(gè)概念,浮現(xiàn)出11個(gè)主題:認(rèn)知、態(tài)度、研究聚焦、驅(qū)動(dòng)力、經(jīng)費(fèi)、利益相關(guān)者、阻礙、促進(jìn)、地位、項(xiàng)目、目標(biāo)等。
例如,“阻礙”這一主題主要表示澳大利亞各高校推行學(xué)習(xí)分析所面臨的困難或挑戰(zhàn),受訪者報(bào)告出組織協(xié)調(diào)、組織惰性、數(shù)據(jù)問(wèn)題、收益不明、認(rèn)知不足、倫理約束等6個(gè)概念。其中,組織惰性所貼標(biāo)簽及其受訪者資料描述如表2所示。
2.第二輪軸心編碼
基于第一輪編碼抽象出的主題及概念,進(jìn)行第二輪編碼,進(jìn)一步凝練主題和概念。最終,第二階段編碼確定6個(gè)主題,編號(hào)為A1至A6;抽象出26個(gè)概念,編號(hào)為a01至a26;參考點(diǎn)共233個(gè)。放棄了第一輪編碼產(chǎn)生的利益相關(guān)者、目標(biāo)等主題,如表3所示。
3.第三輪選擇性編碼
選擇性編碼是從各主題中提煉核心主題,并分析核心主題與其他主題的關(guān)系。本輪編碼結(jié)合原始文本,將第二輪編碼生成的6個(gè)主題進(jìn)一步歸納為3個(gè)核心主題,即用AA1認(rèn)知來(lái)概括A1定義、A2態(tài)度和A3國(guó)際比較,表示澳大利亞大學(xué)對(duì)學(xué)習(xí)分析的總體認(rèn)知;用AA2機(jī)遇來(lái)概括A4驅(qū)動(dòng)力和A5促進(jìn)因素,表示澳大利亞大學(xué)發(fā)展學(xué)習(xí)分析的優(yōu)勢(shì)或機(jī)遇;用AA3挑戰(zhàn)來(lái)概括A6阻礙因素,表示澳大利亞高校學(xué)習(xí)分析實(shí)踐面臨的挑戰(zhàn)。
三、編碼分析
結(jié)合原始文本,根據(jù)三次編碼結(jié)果,經(jīng)共同討論,確立從認(rèn)知、機(jī)遇和挑戰(zhàn)三個(gè)維度對(duì)結(jié)果進(jìn)行表述、呈現(xiàn)和分析。
(一)認(rèn)知
1.定義的多樣
受訪者對(duì)學(xué)習(xí)分析的定義表現(xiàn)出多樣性,形成6個(gè)難以進(jìn)一步歸并的概念,即公認(rèn)定義、多義性、數(shù)據(jù)、學(xué)科、學(xué)與教、戰(zhàn)略決策。
①公認(rèn)定義,表示受訪者完全認(rèn)同澳大利亞學(xué)習(xí)分析研究會(huì)(Society for Learning Analytics Research,簡(jiǎn)稱SoLAR)的定義,沒(méi)有進(jìn)一步闡述。②多義性,表示學(xué)習(xí)分析的涵義較多,難以一概而論。③數(shù)據(jù),表示受訪者認(rèn)為學(xué)習(xí)分析是對(duì)數(shù)據(jù)的處理和利用。④學(xué)科,表示受訪者認(rèn)為學(xué)習(xí)分析應(yīng)作為一個(gè)專(zhuān)門(mén)的研究和實(shí)踐領(lǐng)域,并成為一門(mén)獨(dú)立的學(xué)科,形成自己的學(xué)科內(nèi)涵。⑤學(xué)與教,表示受訪者認(rèn)為學(xué)習(xí)分析的主要目的是提升學(xué)習(xí)和教學(xué)水平。⑥戰(zhàn)略決策,表示受訪者認(rèn)為學(xué)習(xí)分析是一種用來(lái)支持院校進(jìn)行戰(zhàn)略決策的手段和依據(jù)。
可見(jiàn),對(duì)于學(xué)習(xí)分析這一看似確定的概念,澳大利亞學(xué)者之間存在眾多不同的認(rèn)識(shí),總體上可從兩個(gè)層面進(jìn)行概括:一是微觀層面,將學(xué)習(xí)分析視為一種技術(shù)解決方案,是對(duì)學(xué)習(xí)數(shù)據(jù)的處理,用來(lái)改進(jìn)學(xué)與教。系統(tǒng)提供數(shù)據(jù)及其分析以支持教師采取行動(dòng)來(lái)診斷、干預(yù)和改進(jìn)學(xué)與教,這符合SoLAR對(duì)學(xué)習(xí)分析的定義。二是宏觀層面,從院校的視角將學(xué)習(xí)分析看作是支持教育決策以應(yīng)對(duì)保留率滑落等問(wèn)題的策略,將學(xué)習(xí)分析提升到至關(guān)重要的戰(zhàn)略地位。這一類(lèi)學(xué)習(xí)分析不局限于對(duì)學(xué)習(xí)數(shù)據(jù)的分析,而是要對(duì)多數(shù)據(jù)源進(jìn)行整合,數(shù)據(jù)量龐大、結(jié)構(gòu)復(fù)雜。
從戰(zhàn)略決策的宏觀層面界定學(xué)習(xí)分析是對(duì)微觀學(xué)習(xí)分析概念的擴(kuò)展,受訪者認(rèn)為學(xué)習(xí)分析有助于支持管理者決策,認(rèn)為應(yīng)當(dāng)在院校層面推動(dòng)學(xué)習(xí)分析。
2.態(tài)度的撕裂
對(duì)概念的不同認(rèn)知導(dǎo)致受訪者態(tài)度方面的巨大分歧。他們一方面認(rèn)為澳大利亞大學(xué)中有許多非常有價(jià)值的自下而上的“草根”型學(xué)習(xí)分析實(shí)踐,在許多方面與歐美同行同步;但另一方面有關(guān)態(tài)度的16個(gè)節(jié)點(diǎn)中,有14項(xiàng)同時(shí)表達(dá)了批評(píng)態(tài)度。典型批評(píng)意見(jiàn)如下所示:
·不切實(shí)際的期待;
·我并沒(méi)有看到多少好好打基礎(chǔ)和投資未來(lái)的耐心;
·因?yàn)楸姸嘣?,并沒(méi)有什么真正尋求變革的決心;
·加劇了一種將有限的經(jīng)費(fèi)花在那些最缺乏學(xué)習(xí)動(dòng)機(jī)和能力的學(xué)生身上的現(xiàn)象;
·我懷疑這些工作并不是真正的學(xué)習(xí)分析;
·老師們并不能持續(xù)使用它;
·不幸的是,往往僅僅是由學(xué)生保留率驅(qū)動(dòng)的,實(shí)際上應(yīng)該更多著力于改進(jìn)教學(xué)和學(xué)習(xí)。
可見(jiàn),學(xué)者們對(duì)學(xué)習(xí)分析持批判立場(chǎng)是較為普遍的現(xiàn)象,對(duì)院校宏觀層面推行學(xué)習(xí)分析目的的合理性存在質(zhì)疑,對(duì)學(xué)習(xí)分析所導(dǎo)致的將有限資源投給那些并不熱愛(ài)學(xué)習(xí)的學(xué)生產(chǎn)生擔(dān)憂,對(duì)教師持續(xù)使用學(xué)習(xí)分析以改進(jìn)學(xué)與教的愿望存在懷疑,對(duì)領(lǐng)導(dǎo)層推行學(xué)習(xí)分析的決策能力有所質(zhì)疑。
這種批判性態(tài)度的形成,一方面固然是因?yàn)榇_有其事,另一方面也來(lái)自于學(xué)者與國(guó)際,尤其是歐美同行的比較。盡管前期文獻(xiàn)研究顯示,澳大利亞學(xué)習(xí)分析在國(guó)際學(xué)術(shù)領(lǐng)域發(fā)文頻次和中心度均位居前列(見(jiàn)表4),在學(xué)習(xí)分析用于自上而下戰(zhàn)略決策方面的研究具有一定的領(lǐng)先性。但更多的編碼節(jié)點(diǎn)也顯示,他們較為普遍地認(rèn)為澳大利亞學(xué)者在相關(guān)研究經(jīng)費(fèi)方面比歐美同行更“缺錢(qián)”,政府投入更少。同時(shí),受訪者還認(rèn)為學(xué)習(xí)分析還不夠成熟,跨組織的實(shí)踐和研究仍然不多,對(duì)學(xué)習(xí)分析的認(rèn)知和理解不如英美同行。
(二)機(jī)遇
受訪者認(rèn)為澳大利亞大學(xué)學(xué)習(xí)分析發(fā)展有許多優(yōu)勢(shì),如對(duì)學(xué)習(xí)分析概念有豐富的認(rèn)知、技術(shù)與能力方面有先發(fā)優(yōu)勢(shì)、大學(xué)普遍重視并愿意去推進(jìn)、學(xué)習(xí)分析研究在國(guó)際上較為前沿等,具體體現(xiàn)在以下幾個(gè)方面:
1.基礎(chǔ)條件好
地域廣闊、人口分散的特點(diǎn),促使澳大利亞遠(yuǎn)程教育起步早,迄今已有100多年的歷史,超過(guò)40所傳統(tǒng)公立高校和私立大學(xué)在常規(guī)教學(xué)之外同時(shí)提供遠(yuǎn)程教育服務(wù)。這種雙重辦學(xué)模式的傳統(tǒng),一定程度上使澳大利亞大學(xué)普遍關(guān)注遠(yuǎn)程辦學(xué)和信息技術(shù)在教育教學(xué)中的應(yīng)用,注重學(xué)生學(xué)習(xí)的過(guò)程監(jiān)控,積累了大量的原始數(shù)據(jù),由教學(xué)保障部門(mén)來(lái)分析以支持決策。
受訪者認(rèn)為澳大利亞大學(xué)信息化基礎(chǔ)設(shè)施較為先進(jìn),普遍使用成熟的學(xué)習(xí)管理系統(tǒng),并且嵌入簡(jiǎn)單數(shù)據(jù)分析模塊,教師和管理者對(duì)挖掘教學(xué)數(shù)據(jù)具有一定的共識(shí)。
2.驅(qū)動(dòng)力強(qiáng)
根據(jù)編碼顯示,受訪者主要從兩個(gè)維度表達(dá)推行學(xué)習(xí)分析的動(dòng)力。
(1)微觀層面的教學(xué)驅(qū)動(dòng)
出于改進(jìn)學(xué)與教的目的而實(shí)施學(xué)習(xí)分析,具體如“識(shí)別”特定類(lèi)型學(xué)生、“理解”教學(xué)、“評(píng)價(jià)”學(xué)習(xí)、“預(yù)測(cè)”學(xué)生表現(xiàn)和成績(jī)、“干預(yù)”學(xué)習(xí)過(guò)程、“改進(jìn)”學(xué)習(xí)結(jié)果,主要聚焦于給予學(xué)生反饋、優(yōu)化學(xué)習(xí)環(huán)境、個(gè)性化學(xué)習(xí)、改進(jìn)教學(xué)策略、提升學(xué)習(xí)體驗(yàn)等能夠直接惠及學(xué)生的驅(qū)動(dòng)因素。
(2)宏觀層面的管理驅(qū)動(dòng)
受訪者認(rèn)為推行學(xué)習(xí)分析的動(dòng)力主要來(lái)自管理者為提高管理效率、效能而實(shí)施學(xué)習(xí)分析,包括改進(jìn)教學(xué)管理、提升管理系統(tǒng)性能、優(yōu)化組織機(jī)構(gòu)、保持院校競(jìng)爭(zhēng)力、提升學(xué)生保留率、節(jié)約成本等驅(qū)動(dòng)力。
兩個(gè)維度的驅(qū)動(dòng)力也體現(xiàn)出澳大利亞大學(xué)中存在兩種學(xué)習(xí)分析實(shí)踐模式,即自上而下的模式和自下而上的模式。自上而下的模式一般是大學(xué)系統(tǒng)層面的,由專(zhuān)門(mén)團(tuán)隊(duì)整合多數(shù)據(jù)源進(jìn)行數(shù)據(jù)分析,能夠自動(dòng)診斷和干預(yù)。自下而上的模式一般在班級(jí)層面,由教師或?qū)I(yè)認(rèn)識(shí)個(gè)體或者少數(shù)人使用相對(duì)較小的數(shù)據(jù)源,采用社會(huì)網(wǎng)絡(luò)分析、話語(yǔ)分析、量化自我等方式進(jìn)行數(shù)據(jù)分析[21],如圖1所示。
以上兩種驅(qū)動(dòng)力和實(shí)踐模式在澳大利亞大學(xué)中都較為普遍。相對(duì)而言,澳大利亞大學(xué)推行自上而下實(shí)踐模式以支持宏觀層面的戰(zhàn)略決策,在歐美同行中也獲得贊譽(yù)。
3.科學(xué)研究?jī)?yōu)勢(shì)
文獻(xiàn)梳理和訪談均發(fā)現(xiàn),澳大利亞在學(xué)習(xí)分析的研究中具有明顯優(yōu)勢(shì),在國(guó)際學(xué)習(xí)分析領(lǐng)域中心度和存在感強(qiáng)。受訪者陳述的研究方面的優(yōu)勢(shì)具體體現(xiàn)在以下幾個(gè)方面:
(1)數(shù)據(jù)積累
如上所述,澳大利亞大學(xué)學(xué)習(xí)管理系統(tǒng)應(yīng)用普遍,比較重視教學(xué)數(shù)據(jù)的收集、整理,這為學(xué)者的研究提供了寶貴的資源。
(2)技術(shù)優(yōu)勢(shì)
受訪者認(rèn)為澳大利亞大學(xué)技術(shù)人才較多,尤其是教育數(shù)據(jù)挖掘?qū)iT(mén)人才多,數(shù)據(jù)科學(xué)家有力地支持了科研人員對(duì)研究數(shù)據(jù)的挖掘。
(3)理論支撐
學(xué)習(xí)分析研究人員在教學(xué)理論、教學(xué)設(shè)計(jì)、教學(xué)策略、認(rèn)知科學(xué)、教學(xué)評(píng)價(jià)等方面具有堅(jiān)實(shí)的理論支撐,這使其對(duì)數(shù)據(jù)及分析結(jié)果能夠作出有意義的解釋和恰當(dāng)應(yīng)用。
(4)研究人員和團(tuán)體
澳大利亞大學(xué)有眾多學(xué)習(xí)分析專(zhuān)業(yè)的研究人員和團(tuán)體,學(xué)習(xí)分析研究網(wǎng)絡(luò)覆蓋各所大學(xué)。自2013年起,澳大利亞學(xué)習(xí)分析夏季會(huì)議(Australia Learning Analytics Summer Institute,簡(jiǎn)稱A-LASI)便開(kāi)始召開(kāi)年度峰會(huì),研究者、政府部門(mén)和企業(yè)齊聚一堂,共同界定和發(fā)展學(xué)習(xí)分析領(lǐng)域。各大學(xué)和研究機(jī)構(gòu)也紛紛成立專(zhuān)門(mén)的學(xué)習(xí)分析組織,如新南威爾士大學(xué)的學(xué)習(xí)分析和教育數(shù)據(jù)科學(xué)研究會(huì),悉尼科技大學(xué)的連接智能研究中心,墨爾本大學(xué)、悉尼大學(xué)的學(xué)習(xí)分析研究組,維多利亞大學(xué)、塔斯馬尼亞大學(xué)、南澳大學(xué)的學(xué)習(xí)分析網(wǎng)絡(luò)、LA-SIG等。
(5)科研轉(zhuǎn)化
澳大利亞大學(xué)學(xué)習(xí)分析的一個(gè)顯著特征是研究人員和實(shí)踐人員會(huì)組成一個(gè)團(tuán)隊(duì),這會(huì)促使關(guān)于學(xué)情分析、學(xué)業(yè)預(yù)警、干預(yù)措施等方面的研究成果更容易轉(zhuǎn)化,從而推動(dòng)學(xué)習(xí)分析項(xiàng)目的落地。
(三)挑戰(zhàn)
盡管澳大利亞大學(xué)推行學(xué)習(xí)分析有眾多優(yōu)勢(shì),在國(guó)際領(lǐng)域也位居前列,但受訪者的報(bào)告卻表示出對(duì)大學(xué)學(xué)習(xí)分析實(shí)踐的擔(dān)憂,認(rèn)為高校學(xué)習(xí)分析存在眾多挑戰(zhàn)。52個(gè)編碼節(jié)點(diǎn)報(bào)告出受訪者認(rèn)為澳大利亞高校學(xué)習(xí)分析存在挑戰(zhàn),挑戰(zhàn)依次來(lái)自于:組織協(xié)調(diào)(17)、數(shù)據(jù)問(wèn)題(13)、能力與數(shù)據(jù)素養(yǎng)欠缺(11)、經(jīng)費(fèi)不足(11)等維度。
1.組織協(xié)調(diào)
共有17個(gè)參考點(diǎn)報(bào)告出高校學(xué)習(xí)分析實(shí)踐中遇到的挑戰(zhàn)來(lái)自于機(jī)構(gòu)的組織協(xié)調(diào),具體細(xì)分為:
(1)組織惰性??茖咏M織存在惰性,組織和個(gè)體工作負(fù)擔(dān)重,不愿意改變現(xiàn)狀。受訪者認(rèn)為這種組織惰性大規(guī)模地存在于澳大利亞大學(xué)的各個(gè)機(jī)構(gòu)中。
(2)責(zé)任模糊。作為一個(gè)相對(duì)新興的、跨學(xué)科的實(shí)踐領(lǐng)域,應(yīng)由哪些部門(mén)參與、哪個(gè)部門(mén)牽頭、各自應(yīng)負(fù)有什么樣的責(zé)任,在大學(xué)里仍較為模糊。更多的人認(rèn)為這些事應(yīng)歸信息技術(shù)部門(mén)負(fù)責(zé),而不會(huì)深度參與。
(3)協(xié)調(diào)困難。組織疲乏,行政流程扭曲,各部門(mén)之間缺少共識(shí)和緊密合作機(jī)制,缺少跨組織的連接和交流平臺(tái),基于數(shù)據(jù)的決策機(jī)制不能形成閉環(huán),組織之間的協(xié)調(diào)非常困難,導(dǎo)致學(xué)習(xí)分析項(xiàng)目推進(jìn)困難。
(4)外部連接欠缺。大學(xué)內(nèi)部學(xué)習(xí)分析實(shí)踐與外部的機(jī)構(gòu)、學(xué)者缺乏有效連接。
2.數(shù)據(jù)問(wèn)題
數(shù)據(jù)維度的挑戰(zhàn)來(lái)自以下幾個(gè)方面:
(1)數(shù)據(jù)質(zhì)量存疑。受訪者認(rèn)為大學(xué)收集的數(shù)據(jù)許多時(shí)候可能并不是關(guān)于學(xué)習(xí)和學(xué)習(xí)的發(fā)生,數(shù)據(jù)可能并不能表征學(xué)習(xí)本身,甚至存在數(shù)據(jù)陷阱,這極大地挑戰(zhàn)著數(shù)據(jù)的有意義使用和基于數(shù)據(jù)的決策。
(2)數(shù)據(jù)獲取難。數(shù)據(jù)繁雜異構(gòu),許多情況下數(shù)據(jù)的收集不能自動(dòng)完成,需要人工集成,研究人員和實(shí)踐工作者不一定能接觸到數(shù)據(jù),也缺少整合使用數(shù)據(jù)的能力。
(3)數(shù)據(jù)的不恰當(dāng)使用。將學(xué)習(xí)數(shù)據(jù)直接用于教學(xué)質(zhì)量保證,用于對(duì)師生的教學(xué)進(jìn)行評(píng)價(jià),常常會(huì)發(fā)生對(duì)數(shù)據(jù)的不恰當(dāng)解釋和引用。
(4)數(shù)據(jù)倫理約束。澳大利亞的高校對(duì)研究和實(shí)踐有倫理規(guī)制,嚴(yán)苛的隱私保護(hù)客觀上導(dǎo)致學(xué)生數(shù)據(jù)獲取困難。此外,大數(shù)據(jù)可能導(dǎo)致的對(duì)教育公平和民主的威脅,也使相關(guān)大學(xué)在有關(guān)學(xué)生數(shù)據(jù)的使用方面異常謹(jǐn)慎。
3.能力與素養(yǎng)欠缺
受訪者認(rèn)為澳大利亞高校學(xué)習(xí)分析技術(shù)仍然欠缺,不如英美同行先進(jìn)。尤其是相關(guān)技術(shù)更新快,導(dǎo)致跟進(jìn)不足,對(duì)大的學(xué)習(xí)分析項(xiàng)目的架構(gòu)能力也比較欠缺。但他們認(rèn)為能力與素養(yǎng)的欠缺更為突出地表現(xiàn)在管理者群體身上。數(shù)據(jù)素養(yǎng)和專(zhuān)業(yè)知識(shí)的不足,使管理者對(duì)大數(shù)據(jù)存在一種膚淺的認(rèn)識(shí),對(duì)學(xué)習(xí)分析存在不切實(shí)際的期待,將學(xué)習(xí)分析視作一種“神奇的子彈”,或者說(shuō)是一種“快修”工具,對(duì)執(zhí)行學(xué)習(xí)分析項(xiàng)目的代價(jià)和成本認(rèn)識(shí)不足,進(jìn)而對(duì)基礎(chǔ)性工作缺少耐心和投入,更缺少對(duì)數(shù)據(jù)進(jìn)行恰當(dāng)解釋和運(yùn)用的能力。
事實(shí)上,理解如何使用學(xué)習(xí)分析技術(shù),如何從龐大復(fù)雜異構(gòu)的學(xué)習(xí)數(shù)據(jù)中提取出有價(jià)值的信息,對(duì)于高校領(lǐng)導(dǎo)者和教職員工來(lái)說(shuō)還是相對(duì)比較新的能力,并不容易掌握。[23]因此,許多學(xué)習(xí)分析項(xiàng)目只停留于實(shí)驗(yàn)室階段和理論研究階段,并不能對(duì)所有的教育教學(xué)決策作出所期待的貢獻(xiàn)。
4.經(jīng)費(fèi)不足
11個(gè)參考點(diǎn)報(bào)告出大學(xué)學(xué)習(xí)分析實(shí)踐的挑戰(zhàn)是經(jīng)費(fèi)不足。2016年3月OLT的撤銷(xiāo),讓許多受訪者認(rèn)為這可能表明國(guó)家層面關(guān)注度的減弱,因而導(dǎo)致研發(fā)費(fèi)用縮減,研究資源獲取的競(jìng)爭(zhēng)性加強(qiáng),學(xué)習(xí)分析實(shí)踐推進(jìn)有難度。
四、結(jié)論
澳大利亞高校學(xué)習(xí)分析實(shí)踐基礎(chǔ)條件好,研究與實(shí)踐均很活躍,與國(guó)際同行交流合作廣泛,在國(guó)際學(xué)習(xí)分析研究領(lǐng)域中網(wǎng)絡(luò)中心度高。就發(fā)展模式而言,基于小規(guī)模數(shù)據(jù)、自下而上、著眼于改進(jìn)學(xué)與教本身的微觀學(xué)習(xí)分析實(shí)踐和基于大數(shù)據(jù)、自上而下、著眼于學(xué)生保留的宏觀學(xué)習(xí)分析實(shí)踐相互并行、補(bǔ)充、融合,形成了澳大利亞高校學(xué)習(xí)分析實(shí)踐的總體特征。
隨著各類(lèi)學(xué)習(xí)分析項(xiàng)目的深度推進(jìn),也面臨著多重挑戰(zhàn),主要集中在數(shù)據(jù)、能力、組織、經(jīng)費(fèi)等方面。組織協(xié)調(diào)成為受訪者重點(diǎn)報(bào)告的挑戰(zhàn),這恰恰說(shuō)明澳大利亞高校學(xué)習(xí)分析方面的實(shí)踐和研究已觸及大學(xué)組織內(nèi)部協(xié)調(diào)機(jī)制,促動(dòng)了大學(xué)內(nèi)部組織機(jī)構(gòu)的變革。
喬治·西蒙斯(George Siemens)等提出五階段學(xué)習(xí)分析采納成熟度模型:①意識(shí),如使用一些學(xué)習(xí)管理系統(tǒng)中的原始數(shù)據(jù)形成簡(jiǎn)單的報(bào)告;②實(shí)驗(yàn),使用一些較為深入的分析報(bào)告和簡(jiǎn)單的儀表盤(pán);③對(duì)組織、機(jī)構(gòu)和學(xué)習(xí)產(chǎn)生影響;④組織變革,能夠基于數(shù)據(jù)生成預(yù)測(cè)模型,進(jìn)行個(gè)性化學(xué)習(xí),組織策略發(fā)生效力等;⑤行業(yè)領(lǐng)域變革,比如行業(yè)數(shù)據(jù)共享能力的提升、大的行業(yè)革新、開(kāi)放數(shù)據(jù)、機(jī)構(gòu)層面能夠迅捷作出反應(yīng),等等。[15]
綜上所述,澳大利亞高校學(xué)習(xí)分析發(fā)展總體已處于西蒙斯模型的第四階段,即組織變革時(shí)期,學(xué)習(xí)分析的實(shí)踐應(yīng)用已進(jìn)入深水區(qū),觸及到多重利益相關(guān)者,在碰撞中對(duì)大學(xué)的組織形態(tài)和文化產(chǎn)生了挑戰(zhàn),也重塑著大學(xué)的組織形態(tài)和文化。
五、啟示
在澳大利亞和歐美等發(fā)達(dá)國(guó)家,學(xué)習(xí)分析在大學(xué)中的大規(guī)模應(yīng)用已成為一種趨勢(shì),各個(gè)機(jī)構(gòu)紛紛尋求提升學(xué)生學(xué)習(xí)的創(chuàng)新辦法,以更好地應(yīng)對(duì)就業(yè)市場(chǎng)等各方面的挑戰(zhàn)。[21]我國(guó)學(xué)者和教育實(shí)踐人員近年來(lái)對(duì)學(xué)習(xí)分析的興趣也在不斷升溫。
2012年以來(lái),學(xué)習(xí)分析開(kāi)始進(jìn)入我國(guó)學(xué)者和教育管理者的視野,相關(guān)文獻(xiàn)呈現(xiàn)逐年遞增的趨勢(shì)。其中,絕大部分文獻(xiàn)集中于介紹該領(lǐng)域國(guó)外的研究進(jìn)展,包括學(xué)習(xí)分析概念、分析框架、分析方法、分析工具、典型應(yīng)用案例等。
在我國(guó)部分高校學(xué)習(xí)分析實(shí)踐也已起步,尤其是在新冠肺炎疫情防控常態(tài)化的情形下,在線教學(xué)和混合式學(xué)習(xí)成為教學(xué)常態(tài),許多學(xué)者、管理者也開(kāi)始對(duì)學(xué)習(xí)數(shù)據(jù),尤其是學(xué)生的學(xué)習(xí)行為數(shù)據(jù)進(jìn)行收集、分析、評(píng)估、報(bào)告,這些相對(duì)微觀的學(xué)習(xí)分析更接近于SoLAR對(duì)學(xué)習(xí)分析的經(jīng)典定義。高校宏觀層面的大數(shù)據(jù)挖掘項(xiàng)目往往是整合人事、科研、招生、財(cái)務(wù)、后勤等各主題軟硬件平臺(tái),建立統(tǒng)一大數(shù)據(jù)基礎(chǔ)平臺(tái),對(duì)來(lái)自各主題數(shù)據(jù)庫(kù)的數(shù)據(jù)進(jìn)行處理,建立數(shù)據(jù)倉(cāng)庫(kù),提供應(yīng)用服務(wù),如大數(shù)據(jù)駕駛艙等。
目前,我國(guó)高校線上線下相融合的教學(xué)模式尚處于發(fā)展初期,數(shù)字化教學(xué)數(shù)據(jù)分散、異構(gòu)、繁復(fù),存在較大規(guī)模、標(biāo)準(zhǔn)化、系統(tǒng)化的教學(xué)數(shù)據(jù)獲取難、分析難、應(yīng)用難,教學(xué)數(shù)據(jù)挖掘還不夠深入充分等問(wèn)題。自上而下的學(xué)習(xí)分析實(shí)踐尚處于起步階段。
對(duì)于學(xué)習(xí)行為數(shù)據(jù)的研究,我國(guó)學(xué)者在理念、技術(shù)與方法等方面已開(kāi)展大量研究,但高校實(shí)踐中對(duì)教育、教學(xué)數(shù)據(jù)的挖掘與學(xué)界的研究并不匹配。一方面,微觀層面的學(xué)術(shù)研究成果缺少在大學(xué)里規(guī)?;瘜?shí)踐的檢驗(yàn),其可用性不強(qiáng),對(duì)使用者的數(shù)據(jù)整合、理解、應(yīng)用等數(shù)據(jù)素養(yǎng)和能力要求過(guò)高,所形成的建議與對(duì)策距離轉(zhuǎn)化為決策有較大差距。另一方面,高校學(xué)習(xí)分析實(shí)踐對(duì)教學(xué)數(shù)據(jù)欠缺深入系統(tǒng)的挖掘,缺少恰當(dāng)可用的理論和方法的指導(dǎo),亟待開(kāi)展深入系統(tǒng)的研究,以指導(dǎo)高校學(xué)習(xí)分析的實(shí)踐應(yīng)用。
總而言之,我國(guó)高校應(yīng)支持一線教學(xué)和研究人員的“草根”研究和實(shí)踐探索,加強(qiáng)組織和構(gòu)建跨學(xué)科背景的研究團(tuán)隊(duì),將學(xué)者的實(shí)驗(yàn)室研究與學(xué)習(xí)分析實(shí)踐相結(jié)合,在實(shí)踐中檢驗(yàn)研究成果的可用性,以利于規(guī)?;瘧?yīng)用。決策者層面的自上而下的宏觀實(shí)踐,應(yīng)在學(xué)習(xí)科學(xué)理論的支撐下統(tǒng)籌開(kāi)展,可納入高校數(shù)據(jù)治理業(yè)務(wù)框架中。主導(dǎo)者需明確大學(xué)中的各種價(jià)值觀和權(quán)力關(guān)系,明確內(nèi)部各組織機(jī)構(gòu)的職責(zé),梳理業(yè)務(wù)流程和分工策略。[22]各層決策者應(yīng)對(duì)學(xué)習(xí)分析有恰當(dāng)?shù)恼J(rèn)知和足夠的耐心,不斷加強(qiáng)基礎(chǔ)設(shè)施和數(shù)據(jù)建設(shè),充分理解和把握學(xué)習(xí)分析的能與不能,方可真正從中受益。
參考文獻(xiàn):
[1]何曉芳.20世紀(jì)80年代以來(lái)澳大利亞高等教育政策變遷[J].高教發(fā)展與評(píng)估,2013(1):62-69.
[2]NORTON A, CHERASTIDTHAM I, MACKEY W. Dropping out: the benefits and costs of trying university[M]. Melbourne: Grattan Institute, 2018:3.
[3]BARNES S, MACALPINE G, MUNRO A. Track and Connect: Enhancing student retention and success at the University of Sydney. A Practice Report[J]. The International Journal of the First Year in Higher Education, 2015(6):195-202.
[4]COLVIN C, ROGERS T, WADE A, et al. Student retention and learning analytics: a snapshot of Australian practices and a framework for advancement[R]. Canberra, ACT: Australian Government Office for Learning and Teaching, 2016.
[5]BOWLES T V, BRINDLE K A. Identifying facilitating factors and barriers to improving student retention rates in tertiary teaching courses: a systematic review[J]. Higher Education Research & Development, 2017,36(5):903-919.
[6]KAHU E R, NELSON K. Student engagement in the educational interface: Understanding the mechanisms of student success[J]. Higher Education Research & Development, 2018(1):58-71.
[7]BORNSCHLEGL M, CASHMAN D. Improving distance student retention through satisfaction and authentic experiences[J]. International Journal of Online Pedagogy and Course Design (IJOPCD), 2018,8(3):60-77.
[8]TIGHT M. Student retention and engagement in higher education[J]. Journal of Further and Higher Education, 2020(44):689-704.
[9]OECD. Education at a Glance 2019: OECD Indicators[R]. Paris: OECD Publishing, 2019.
[10]Higher Education Standards Panel. Final report-Improving retention, completion and success in higher education[R]. Canberra ACT:Australian Government Department of Education and Training, 2017.
[11]焦磊,謝安邦.澳大利亞大學(xué)外部利益相關(guān)者信息反饋機(jī)制探析[J].江蘇高教,2011(4):153-155.
[12]CAMPBELL J P. Utilizing student data Within the course management system to determine undergraduate student academic success: An exploratory study[D]. West Lafayette City: Purdue University, 2007.
[13]PARDO A, KLOOS C D. Stepping out of the box: towards analytics outside the learning management system[C]//Proceedings of the 1st International Conference on Learning Analytics and Knowledge, New York: ACM, 2011:163-167.
[14]SIEMENS G, DAWSON S, LYNCH G. Improving the quality and productivity of the higher education sector: policy and strategy for systems-level deployment of learning analytics[R]. Canberra, ACT: Australian Government Office for Learning and Teaching, 2016.
[15]HODGES B, BEDFORD T, HARTLEY J, et al. Enabling retention: Processes and strategies for improving student retention in university-based enabling programs: final report 2013[R]. Canberra, ACT: Australian Government Office for Learning and Teaching, 2013.
[16]FISHER J, VALENZUELA F, WHALE S. Learning analytics: A bottom up approach to enhancing and evaluating students online learning[C]. Higher Education Research & the Student Learning Experience in Business(Office of Learning and Teaching Dissemination), 2013.
[17]NELSON K J , CLARKE J A , STOODLEY I D, et al. Establishing a framework for transforming student engagement, success and retention in higher education institutions[R]. Canberra ACT: Australian Government Office for Learning and Teaching, 2014.
[18]WEST D, HUIJSER H, LIZZIO A, et al. Learning Analytics: Assisting Universities with Student Retention[R]. Canberra ACT: Office for Learning & Teaching, 2015.
[19]HICKS M. Impact evaluation of key themes funded by the Office for Learning and Teaching 2012-2016[R]. Department of Education and Training, Canberra, ACT: Australian Government Office for Learning and Teaching, 2016.
[20]李俊龍,單姍,徐彬.提升高校畢業(yè)生就業(yè)質(zhì)量路徑的分析與研究——基于江蘇省7所高校的畢業(yè)生就業(yè)質(zhì)量報(bào)告文本分析[J].中國(guó)大學(xué)教學(xué),2021(6):87-96.
[21]VIBERG O, HATAKKA M, B?LTER O, et al. The current landscape of learning analytics in higher education[J]. Computers in Human Behavior, 2018,89:98-110.
[22]陳伯棟,黃天慧.解析學(xué)習(xí)分析學(xué):一次撬動(dòng)冰山的嘗試[J].開(kāi)放學(xué)習(xí)研究,2017(4):1-9.
作者簡(jiǎn)介:
韓慶年,副教授,碩士,主要研究方向?yàn)檫h(yuǎn)程教育、在線教學(xué)評(píng)價(jià)等,郵箱:hanqingnian@foxmail.com;
沙恩·道森(Shane Dawson),教授,博士,主要研究方向?yàn)閿?shù)字化學(xué)習(xí)、學(xué)習(xí)分析等,郵箱:Shane.Dawson@unisa.edu.au;
卡桑德拉·科爾文(Cassandra Colvin),教授,博士,主要研究方向?yàn)閷W(xué)習(xí)分析、學(xué)習(xí)投入等,郵箱:Cassandra.Colvin @unisa.edu.au。
Recognition, Opportunity and Challenge of Learning Analytics
in University Based on Interviews from 24 Australian Experts
Qingnian HAN1, Shane DAWSON2, Cassandra COLVIN2
(1.Deans office, Jiangsu Open University, Nanjing Jiangsu 210036;
2.Teaching Innovation Unit, Unversity of South Australia, Adelaide5000, Aus)
Abstract: The large-scale application of Learning Analytics (LA) based on instructional data mining has become a trend in Australian tertiary. Meanwhile, universities have started to explore innovative ways to enhance student learning, so as to better meet the challenges in the future. Based on literature review and field investigation, the authors conducted the email-based text interviews with 24 experts in the field of LA from Australia universities. After in-depth coding and analysis of texts, this paper reaches the following findings. Australian universities have a comparatively solid infrastructure in LA, and present quite active and high centrality in international LA research network. LA in Australia universities has two co-existing modes, including bottom-up mode and top-down mode. Challenges mainly come from data source, data literacy, LA competency, organization and lack of funding, etc. The practice and research of LA in Australian universities have touched on the coordination mechanism within the university and promoted the internal reform of the university administration. The practice of LA in Chinese universities is still in its infancy. It is urgent to strengthen LA research focusing on infrastructure and data construction, so as to find out a practical path to adopt LA.
Keywords: Australia; Learning analytics; Data mining; Organizational change; Student retention
編輯:李曉萍? ? 校對(duì):王天鵬