• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    人工智能賦能教育評價:“學(xué)評融合”新理念及核心要素

    2021-03-16 08:29:23張生王雪齊媛
    中國遠(yuǎn)程教育 2021年2期
    關(guān)鍵詞:評價改革教育評價人工智能

    張生 王雪 齊媛

    【摘 要】?? 人工智能時代是在以物理世界為主的世界上新增了一個數(shù)字世界,人們的生活、生產(chǎn)和學(xué)習(xí)方式發(fā)生了重大改變,生產(chǎn)力的巨大變革必然帶來生產(chǎn)關(guān)系和上層建筑的變革。為應(yīng)對這一變革,教育必然從知識技能的培養(yǎng)轉(zhuǎn)向?qū)W生核心素養(yǎng)的養(yǎng)成,教育評價也必然轉(zhuǎn)向以促進(jìn)學(xué)生核心素養(yǎng)的發(fā)展為核心。本文首先從診斷為核心的評價現(xiàn)實困境出發(fā),提出了學(xué)評融合的評價新理念,其次從理論層面介紹了人工智能時代學(xué)評融合的重要價值和意義,詳細(xì)闡述了學(xué)評融合的概念、內(nèi)涵與核心特征,最后從實踐層面建構(gòu)了人工智能時代學(xué)評融合的評價框架,提出生成與展示、參與評價活動、反思與改進(jìn)三個學(xué)評融合理念下評價作為高階思維學(xué)習(xí)活動的核心階段,并嘗試構(gòu)建各階段的核心要素,為數(shù)字世界學(xué)生評價能力的發(fā)展與測量、評價系統(tǒng)的研究與研發(fā)以及教學(xué)實踐活動提供具體、可操作的依據(jù)。

    【關(guān)鍵詞】? 學(xué)評融合;評價理念;核心素養(yǎng);人工智能;評價改革;評價能力;教育評價

    【中圖分類號】? ?G40-058.1? ? ? ? ?【文獻(xiàn)標(biāo)識碼】? A? ? ? ?【文章編號】? 1009-458x(2021)2-0001-09

    一、問題提出

    中共中央、國務(wù)院2020年印發(fā)了《深化新時代教育評價改革總體方案》(以下簡稱“方案”)?!斗桨浮分赋?,教育評價事關(guān)教育發(fā)展的方向,要系統(tǒng)推進(jìn)教育評價改革,努力培養(yǎng)擔(dān)當(dāng)民族復(fù)興大任的時代新人。十九屆五中全會指出要加快推進(jìn)教育現(xiàn)代化的新征程。隨著以人工智能、大數(shù)據(jù)、互聯(lián)網(wǎng)+為代表的現(xiàn)代信息技術(shù)的迅猛發(fā)展,嶄新的數(shù)字世界成為人們工作、生活和學(xué)習(xí)的重要場所,生產(chǎn)力與生產(chǎn)關(guān)系的變革使得大量機(jī)械性、重復(fù)性的職業(yè)被數(shù)字世界提供的算法服務(wù)所取代,伴隨著勞動力被大量解放人工智能時代對人才有了全新要求,教育也必然聚焦到以創(chuàng)新能力、批判意識等高階思維培養(yǎng)為核心的育人過程上來。在物理世界與數(shù)字世界雙重發(fā)展的基礎(chǔ)上,教育評價急需實踐創(chuàng)新(齊媛, 等, 2020),而實踐創(chuàng)新的根本源于評價理念創(chuàng)新,深入研究學(xué)評融合的新理念、新方法和新技術(shù)以及運用新模式是促進(jìn)評價改革落地的關(guān)鍵。

    在理論發(fā)展的不同階段,評價的關(guān)注點處在由診斷到學(xué)習(xí)、由外部到內(nèi)部、由知識到能力的逐步發(fā)展變化中。基于評價實施的不同目的和方法,Earl(2003, p. 26)最早區(qū)分了關(guān)于學(xué)習(xí)的評價、為了學(xué)習(xí)的評價和作為學(xué)習(xí)的評價。關(guān)于學(xué)習(xí)的評價也被叫作“總結(jié)性評價”,是指教師在教學(xué)單元結(jié)束時使用評價對學(xué)生的學(xué)習(xí)結(jié)果進(jìn)行檢查(OFarrell, 2009, p. 7),其目的是向?qū)W生或父母報告學(xué)生在學(xué)校的學(xué)習(xí)進(jìn)度,通常通過班級內(nèi)該生相對于其他學(xué)生的排名來實現(xiàn)。為了學(xué)習(xí)的評價是形成性評估的代表術(shù)語,是一個以學(xué)習(xí)為導(dǎo)向的過程,可以促進(jìn)學(xué)生接受并基于反饋采取行動,最終改善和增進(jìn)對學(xué)習(xí)的理解(Bennett, 2011; Wiliam, 2011)。為了學(xué)習(xí)的評價將重點從總結(jié)性評價轉(zhuǎn)為形成性評價,從判斷到描述(Bennett, 2011),對學(xué)生進(jìn)入下一階段前盡快轉(zhuǎn)變其錯誤理解至關(guān)重要。作為學(xué)習(xí)的評價聚焦學(xué)生的元認(rèn)知能力和素養(yǎng)發(fā)展(Earl & Giles, 2011),鼓勵學(xué)生積極參與評價過程,同時參考學(xué)生的既定學(xué)習(xí)目標(biāo),主要通過自我評估、自我監(jiān)控和自我調(diào)節(jié)來縮小他們自身的學(xué)習(xí)差距并確定下一步的學(xué)習(xí)計劃和個人目標(biāo)。Earl(2003, p. 28)指出,在作為學(xué)習(xí)的評價中學(xué)生間幾乎不存在比較,它要求教師從知識的傳授者轉(zhuǎn)變?yōu)閷W(xué)生學(xué)習(xí)的引導(dǎo)者,讓學(xué)生體會理解自我的“認(rèn)知過程”以幫助學(xué)生在學(xué)習(xí)中學(xué)會監(jiān)控和及時調(diào)整。雖然Earl(2003, p. 28)認(rèn)為作為學(xué)習(xí)的評價是為了學(xué)習(xí)的評價的一部分,但也有部分學(xué)者認(rèn)為它應(yīng)該是一種獨立的教學(xué)評價方法(Gottlieb, 2016, p. 23),為了學(xué)習(xí)的評價更具公共性、交互性和教學(xué)性,突出了實踐社區(qū)的本質(zhì),而作為學(xué)習(xí)的評價相對私密、個人和更具反思性,抓住了自我調(diào)節(jié)學(xué)習(xí)的特征(Allal, 2019; Lam, 2018)。

    盡管為了學(xué)習(xí)的評價和作為學(xué)習(xí)的評價對學(xué)習(xí)者的積極作用得到認(rèn)可,但在教學(xué)實踐中迫于考試和升學(xué)的壓力關(guān)于學(xué)習(xí)的評價往往更受關(guān)注(Muchlis, Ibnu, Subandi, & Marfuah, 2020)。不僅作為學(xué)習(xí)的評價由于對提高學(xué)生學(xué)業(yè)成績的局限性而很少被實踐(Knight, 2002),為了學(xué)習(xí)的評價(形成性評價)也被認(rèn)為有減少的趨勢,未能發(fā)揮其潛能(Gibbs & Simpson, 2004)。例如在課程中各種評價任務(wù)分配不均勻,測驗往往鼓勵記憶或表面的學(xué)習(xí)方法(Ramsden, 2003),無法支撐學(xué)生高階思維能力的發(fā)展(Rust, Price, & ODonovan, 2003)。作為學(xué)習(xí)的評價和為了學(xué)習(xí)的評價的共同特征就是反饋的使用,無論采用內(nèi)部反饋還是外部反饋,二者都指向發(fā)展學(xué)生的元認(rèn)知能力和達(dá)成學(xué)習(xí)標(biāo)準(zhǔn)的意識(Andrade & Brookhart, 2016, pp. 293-309)。但在實踐中反饋通常是無效的,主要原因在于反饋不及時(Carless, 2006)以及反饋的數(shù)量和迭代周期有待提高(Taras, 2006)。另一個值得關(guān)注的問題是學(xué)生對兩種評價的感知,特別是它是否會增加學(xué)生的額外負(fù)擔(dān)。一些學(xué)生可能會將某些類型的形成性評價解釋為沒有分?jǐn)?shù)的額外工作,或者認(rèn)為它們是沒有必要的(Yorke, 2003)。

    教育評價改革與發(fā)展的困境催生理念的創(chuàng)新。評價應(yīng)當(dāng)是多件事情的集成體(Boud, 2000)。在人工智能時代,評價應(yīng)同時涵蓋診斷和學(xué)習(xí)的目的,既要評估學(xué)生成績,也要通過評估使他們提高;它的評價標(biāo)準(zhǔn)既要有篩選價值,也要涵蓋個體的增值性評價;評價的結(jié)果既要傳遞顯性信息,也要傳遞隱性信息。本文基于評價改革的需求和人工智能時代的特點,從理論和實踐層面提出學(xué)評融合的評價新理念,以促進(jìn)學(xué)生核心素養(yǎng)的發(fā)展為目標(biāo),推動評價活動科學(xué)、大規(guī)模、常態(tài)化地開展。

    二、學(xué)評融合的概念、內(nèi)涵與核心特征

    (一)學(xué)評融合的概念與內(nèi)涵

    學(xué)評融合是基于數(shù)字世界的教育,統(tǒng)籌評價的學(xué)習(xí)性和診斷性為一體,強調(diào)以多種方式促進(jìn)學(xué)生主動發(fā)展的一種評價新理念。強調(diào)通過數(shù)字世界將評價融入學(xué)生的學(xué)習(xí)活動過程中,鼓勵人人展示分享成果、人人參與系列評價活動,基于評價過程與評價數(shù)據(jù)不斷反思改進(jìn),促進(jìn)學(xué)生自身核心素養(yǎng)的發(fā)展;通過數(shù)字世界記錄的學(xué)習(xí)過程數(shù)據(jù)和評價過程數(shù)據(jù),建立各種模型來計算學(xué)生認(rèn)知、社會性、心理等多方面素養(yǎng)的發(fā)展,再以可理解的方式呈現(xiàn)出來。具體如圖1所示。

    (二)學(xué)評融合的核心特征

    學(xué)評融合的評價理念不同于傳統(tǒng)的評價理念,它有五個典型特征:一是強調(diào)評價的學(xué)習(xí)性和診斷性的融合;二是強調(diào)評價是一種高階思維的學(xué)習(xí)活動;三是強調(diào)基于學(xué)習(xí)過程數(shù)據(jù)、利用人工智能大數(shù)據(jù)分析技術(shù)來開展過程性評價;四是強調(diào)基于數(shù)字世界開展學(xué)評融合;五是強調(diào)進(jìn)步和成功的評價,保持學(xué)生與生俱來的好奇心。

    1. 強調(diào)評價的學(xué)習(xí)性和診斷性的融合

    先發(fā)揮評價的學(xué)習(xí)性功能,再基于學(xué)習(xí)過程數(shù)據(jù)進(jìn)行數(shù)據(jù)建模評價,是學(xué)評融合的首要特征,也是區(qū)別于傳統(tǒng)先診斷再改進(jìn)的評價理念,其評價的流程更簡捷,更加指向?qū)W生核心素養(yǎng)的發(fā)展。

    以往評價實踐更多地關(guān)注終結(jié)性評價,即作為診斷性的評價,其評價流程如圖2所示。學(xué)生一般會經(jīng)歷從測驗、評價、反饋到改進(jìn)的過程,雖然其對一般認(rèn)知能力的考察已頗有成效,但由于在物理世界中教師的課堂時間和展示空間均有限,不僅不能展示每一位學(xué)生創(chuàng)作的過程和結(jié)果,更難為每一位學(xué)生提供個性化的反饋和指導(dǎo),學(xué)生的改進(jìn)效果不盡如人意。因此,本文提出學(xué)評融合的評價新理念,其評價流程如圖3所示,即依托數(shù)字世界,將評價各核心要素融合于學(xué)習(xí)活動中,以學(xué)生為主體,鼓勵人人參與展示、人人參與對他人的評價,讓每一位學(xué)生都能在評價活動中提高核心素養(yǎng),在評價反饋中進(jìn)一步改進(jìn)學(xué)習(xí)。

    2. 強調(diào)評價過程是一種高階思維的學(xué)習(xí)活動

    學(xué)評融合強調(diào)評價過程是一種高階思維的學(xué)習(xí)活動,是對學(xué)生元認(rèn)知、心理理論的常態(tài)化訓(xùn)練與實踐。

    學(xué)評融合強調(diào)學(xué)生在原有認(rèn)知展示基礎(chǔ)上,在閱讀他人作品、評價并提出改進(jìn)意見的過程中,思維得到再一次升華,思維的深度與廣度得以發(fā)展。評價過程也是關(guān)注他人的創(chuàng)作背景、思維模式、總結(jié)他人優(yōu)勢與不足的過程,是對同伴深度認(rèn)識的過程,是“知彼”的思維過程,這不僅是一種高階思維的發(fā)展,也是學(xué)生社會性發(fā)展的一種方式,是直接指向?qū)W生核心素養(yǎng)發(fā)展的一種新的評價。學(xué)生在大量評價他人作品的過程中逐步認(rèn)識到事物的多面性,再在改進(jìn)自己作品的過程中認(rèn)識到自己思維過程的優(yōu)勢和不足,通過這一“知己”的思維過程逐步樹立創(chuàng)新意識,保持自己的特點與不同,在追求共性的基礎(chǔ)上追求個性的發(fā)展,思維得以螺旋式上升,核心素養(yǎng)得以發(fā)展。最終通過評價活動達(dá)到“知己知彼”的目的,思維境界得以提升。

    3. 強調(diào)基于學(xué)習(xí)過程的診斷評價

    學(xué)評融合強調(diào)基于學(xué)習(xí)過程的診斷評價,即利用大數(shù)據(jù)、人工智能技術(shù)、學(xué)習(xí)分析技術(shù)對學(xué)生的各種行為進(jìn)行計算、建模和可視化,具有實時性、動態(tài)性、發(fā)展性和可理解性的特點。

    評價作為高階思維學(xué)習(xí)活動會產(chǎn)生大量的學(xué)習(xí)過程數(shù)據(jù),包括學(xué)生的個人基本信息、學(xué)生的作品數(shù)據(jù)、瀏覽數(shù)據(jù)、評價數(shù)據(jù)、修改數(shù)據(jù)以及過程中的時間點和時長等時間維度的數(shù)據(jù)。結(jié)合學(xué)生的歷史數(shù)據(jù),如作業(yè)考試成績、學(xué)習(xí)風(fēng)格、人格特質(zhì)、興趣特長等學(xué)習(xí)品質(zhì)數(shù)據(jù),通過物聯(lián)網(wǎng)技術(shù)、大數(shù)據(jù)挖掘技術(shù)和智能決策與可視化技術(shù),建立學(xué)生的認(rèn)知發(fā)展、學(xué)業(yè)發(fā)展、社會性發(fā)展等不同方面的計算模型,構(gòu)建一系列的決策預(yù)警分析模型,并基于不同地域和群體特征構(gòu)建不同的學(xué)習(xí)者特征模型,可以動態(tài)地診斷、決策反饋。不僅能夠描述學(xué)生的當(dāng)前發(fā)展?fàn)顩r,展示一定時期內(nèi)學(xué)生各方面的發(fā)展,還能對未來的發(fā)展進(jìn)行模擬推演,從而及早采取有效措施調(diào)整教育教學(xué)。

    4. 強調(diào)對數(shù)字世界的運用

    學(xué)評融合必須基于數(shù)字世界開展,才能有效發(fā)揮數(shù)字世界展示、分享、交流、評價、自動計算、智能決策和可視化的優(yōu)點,才能讓學(xué)評融合更加常態(tài)、更加精準(zhǔn)和更加科學(xué),才能有效促進(jìn)深度學(xué)習(xí)和基于數(shù)據(jù)建立現(xiàn)代治理制度與體系。

    在人工智能時代,數(shù)字世界的時空泛在、物理世界的時空拓展,人人展示、同伴評價、個人反思與改進(jìn)可以常態(tài)化開展,評價內(nèi)隱于學(xué)生的學(xué)習(xí)過程成為可能,學(xué)評融合的高階思維特點可以得到常態(tài)化的訓(xùn)練和發(fā)展。同時,數(shù)字世界對學(xué)習(xí)過程能夠自動記錄、存儲,結(jié)合不同的目的建立不同的計算模型,開展智能化的診斷,自動及時反饋。另外,數(shù)字世界能夠大規(guī)模、常態(tài)化、個性化地進(jìn)行分析,不僅能給個人提供有針對性的學(xué)習(xí)過程報告,提出有針對性的建議,助力個性化學(xué)習(xí)的開展,還能支持科學(xué)管理與決策,及早發(fā)現(xiàn)區(qū)域性、群體性問題,及早進(jìn)行模擬推演,快速科學(xué)決策,進(jìn)而大幅度、大規(guī)模提升教育教學(xué)質(zhì)量。

    5. 強調(diào)保持學(xué)生的好奇心

    保持學(xué)生的好奇心是學(xué)評融合最關(guān)鍵的特征。評價是為了更多地讓學(xué)生體驗自身的進(jìn)步和成功,保持學(xué)生與生俱來的好奇心,保持高效的學(xué)習(xí)動力,減輕學(xué)生的負(fù)擔(dān)。在學(xué)評融合理念下,人人展示自己的優(yōu)點和不同,人人發(fā)現(xiàn)他人的優(yōu)點和不同,發(fā)現(xiàn)他人的美和成長,進(jìn)而營造一種積極向上的育人氛圍。

    傳統(tǒng)的評價理念受制于測試與學(xué)習(xí)分離,整個評價過程主要是教師在開展,學(xué)生則是被動地參與評價,教師更加關(guān)注成績優(yōu)秀的學(xué)生,而對其他學(xué)生的表現(xiàn)視而不見。同時,由于時空限制大多數(shù)學(xué)生的努力程度會被忽視,評價開展得越多,排名靠后的學(xué)生受到的負(fù)向激勵越多,學(xué)生參與學(xué)習(xí)的興趣、動機(jī)越難以保持上升。由于學(xué)生不能參與評價過程,學(xué)生思維無法得到提升,使得學(xué)生的認(rèn)知停留在原有水平,不能有效改進(jìn)自己的作品,只能照搬教師眼中的優(yōu)秀作品,學(xué)生不僅無法獲得成就感,更會產(chǎn)生無力感和失敗感,潛移默化學(xué)生會覺得自己不行,進(jìn)而喪失學(xué)習(xí)的興趣和動機(jī)。另外,先評價診斷再改進(jìn)的評價理念還會加重師生的負(fù)擔(dān)。診斷的評價是為了測而測,這就形成了多種測評系統(tǒng)、多方測評主體的一同參與,加重了教師和學(xué)生的負(fù)擔(dān)。如果基于這個理念強化過程性評價,只會簡單增加終結(jié)性評價的頻率和采集點,要求教師和學(xué)生提交大量的照片、文件等過程性資料,不僅不能有效改進(jìn)教學(xué),反而會加重學(xué)生、家長、教師和學(xué)校的負(fù)擔(dān),難以持續(xù),也難以發(fā)揮以評促學(xué)的作用。

    三、學(xué)評融合中學(xué)的實施階段與核心要素

    學(xué)評融合在實踐層面和操作層面依賴數(shù)字世界的運用,重點強調(diào)評價的學(xué)習(xí)功能和診斷功能,核心前提是評價的學(xué)習(xí)性的運用,因此本文聚焦評價的學(xué)習(xí)性的階段和核心要素。具體而言,評價作為一種高級思維的學(xué)習(xí)活動,有生成與展示、參與評價活動、反思與改進(jìn)三個核心階段和多個核心要素,如圖4所示。

    (一)生成與展示及其核心要素

    學(xué)評融合理念落地的基礎(chǔ)是強調(diào)學(xué)生思維的生成與作品的展示,強調(diào)教師要利用數(shù)字世界重構(gòu)育人環(huán)境,優(yōu)化學(xué)與教的方式,強調(diào)學(xué)生從消費為主到生成為主,形成為了生成而消費的新型學(xué)與教方式。在學(xué)生生成的基礎(chǔ)上強調(diào)人人展示,這可以是在物理世界展示,當(dāng)然,更強調(diào)在數(shù)字世界的常態(tài)化展示與分享。即便作業(yè)是選擇題一類客觀性、標(biāo)準(zhǔn)化的任務(wù),也需要教師開展基于答題板的任務(wù)設(shè)計,學(xué)生基于選擇分布來進(jìn)行深度思維。例如,我能否說服他人同意我的選擇是對的?我能否判斷他人思維的局限導(dǎo)致的錯誤選擇?我要修改我的答案嗎?學(xué)生基于答題數(shù)據(jù)開展深度的討論和學(xué)習(xí),選項分布如圖5所示。

    生成與展示是學(xué)生參與評價活動的前提條件,學(xué)生在評價過程中關(guān)注的核心要素是學(xué)生對署名方式、評價主體和評價內(nèi)容有用性的心理期望與感知。

    1. 期望的評價署名方式

    同傳統(tǒng)的面授課堂相比,學(xué)評融合理念下的評價活動內(nèi)置于數(shù)字化學(xué)習(xí)空間,更關(guān)注對他人作品的理解與評價。在交互環(huán)境中,評價的署名方式對學(xué)生生成與展示的行為和心理都存在影響(張倩, 2007)。隨著同伴互評逐漸成為一種有效的評價方式(李菲茗, 2018),圈子效應(yīng)和權(quán)威效應(yīng)也逐漸凸顯,即給自己的好友較高分?jǐn)?shù)或給平時表現(xiàn)好的同伴較高分?jǐn)?shù)。這種效應(yīng)與評價的署名方式密切相關(guān)(舒存葉, 等, 2015),學(xué)生期望的署名方式從某種角度而言反映了依賴該效應(yīng)的傾向,進(jìn)而影響生成與展示部分的投入程度。對同伴互評的形式進(jìn)行分類,從評價者、被評價者角度可以分為署名、單向匿名和完全匿名。以往研究發(fā)現(xiàn),完全匿名和單向匿名條件下的評價更具有批判性,且不存在顯著差異,但是評價質(zhì)量不如署名條件下的評價(Yong Zhao, 1998; 王佑鎂, 2006)。因此,學(xué)評融合理念下的評價要關(guān)注學(xué)生期望的評價署名方式,體現(xiàn)個性化。

    2. 期望的評價主體

    學(xué)評融合強調(diào)學(xué)教并重的教學(xué)理念,評價活動也更加注重主體的多元化。評價主體在同伴互評中占有重要地位,而學(xué)生自身期望的評價主體也將潛在影響學(xué)生的生成投入和評價內(nèi)容的有用性感知等。該部分評價主體的分類將同下文中對評價對象的分類,不同學(xué)生期望的評價主體具有差異性,學(xué)評融合理念下的評價應(yīng)該在捕捉這種個性化差異的基礎(chǔ)上設(shè)計精準(zhǔn)的評價主體推薦功能。

    3. 評價內(nèi)容的有用性感知

    不同的評價內(nèi)容具有不同的作用,如激勵性評價有助于激發(fā)學(xué)生的積極性和創(chuàng)造性等,但研究也顯示,不同環(huán)境下同一評價內(nèi)容的作用也不是一成不變的。例如,隨著年級的增長男生會更傾向于選擇“客觀”的評價,而女生則相反,有從“客觀”轉(zhuǎn)向“稱贊”的趨勢。因此,富有不同個性特征的學(xué)生對不同評價內(nèi)容的感知是學(xué)評融合理念下的評價需要關(guān)注的,在此基礎(chǔ)上考慮教師、同伴、家長等不同多元主體的參與,將評價內(nèi)容和評價主體銜接,確定不同學(xué)生對評價內(nèi)容的主體有用性感知,推動評價的落地實施。

    (二)參與評價活動及其核心要素

    學(xué)評融合理念落地的關(guān)鍵是以人為核心開展自評或他評的學(xué)習(xí)活動,鼓勵跨學(xué)科的教研方式,核心就是評價是以人為出發(fā)點。自評或他評都是學(xué)生主動參與評價的象征,也是從他人角度制定戰(zhàn)略,將開放性的生成轉(zhuǎn)變?yōu)榭陀^的價值判斷。其中,面對同一開放性的生成任務(wù),衡量每個人的要求和標(biāo)準(zhǔn)也應(yīng)不同,故以人為核心的增值評價便自然得到關(guān)注。無論是自評還是他評都要求學(xué)生主動參與,評價的方式也多種多樣,涵蓋了點贊、打分、評級、評語等,在學(xué)生主動參與評價的過程中多種思考問題的角度和方式都會對其形成沖擊,這就促使學(xué)生不再停留在原有簡單認(rèn)知上,而是會萌發(fā)出更深層次的理解、困惑、迷茫。同時,學(xué)生的主動參與也會讓其更加了解評價標(biāo)準(zhǔn),有利于師生關(guān)系和同伴關(guān)系的發(fā)展。

    參與評價活動作為學(xué)評融合評價的核心,各要素的合理、共生發(fā)展是重中之重。從功能上可以將參與評價活動的核心要素劃分為基本要素和關(guān)鍵要素兩部分。評價對象、評價方式和評價內(nèi)容是表征評價活動參與情況的基本要素,評價投入和評價效能感是表征參與評價活動質(zhì)量的關(guān)鍵要素。

    1. 評價對象

    評價對象分為評價者和被評價者,從關(guān)系角度看包括學(xué)習(xí)距離、心理距離和成績距離三種類型。學(xué)習(xí)距離是指物理世界中的距離,可以分為同桌、同一學(xué)習(xí)小組的人、學(xué)習(xí)小組之外的人和其他同學(xué)等;心理距離是指親密關(guān)系所帶來的距離,可以分為好朋友、普通同學(xué)和我不喜歡的同學(xué)等;成績距離是由平時的學(xué)習(xí)表現(xiàn)所塑造的距離,分為平時成績好的人、平時成績一般的人和平時成績不太好的人。近期關(guān)于中小學(xué)生的評價活動現(xiàn)狀調(diào)查顯示,在學(xué)習(xí)距離中評價其他同學(xué)的比例最高,高達(dá)37%;在心理距離中評價好朋友的比例高達(dá)80%;在成績距離中評價平時成績好的比例高達(dá)58%。這說明現(xiàn)階段的評價還未合理、公平地考慮三個距離的評價對象安排。同時,也加重了同伴評價中的圈子效應(yīng)和權(quán)威效應(yīng)的發(fā)生風(fēng)險。

    2. 評價方式

    數(shù)字世界讓學(xué)評融合理念下多樣化的評價方式成為可能。在以往的學(xué)生互評中,以評分反饋和評語反饋為主,而學(xué)評融合理念下的評價方式包括點贊、評分、評級、評語、價值判斷、答題板的運用等,評價的媒體包括文本、語音、小視頻和作品標(biāo)注等。其中,不同的評價方式表征了學(xué)生參與評價時的不同思維層級。了解學(xué)生的評價方式喜好并結(jié)合不同評價方式在不同教學(xué)階段的適用性進(jìn)行合理設(shè)計將有助于提升評價活動效果。

    3. 評價內(nèi)容

    評語內(nèi)容可以從評價者和被評價者的角度分為評語焦點和評語形式兩個層面,評語焦點分為關(guān)注語言類和關(guān)注內(nèi)容類,評語形式分為認(rèn)知特征類和情感特征類(Patchan & Schunn, 2015; Gao, Schunn, & Yu, 2019)。本文討論廣義下的評價,只關(guān)注評語形式。認(rèn)知特征類是一些可采納評語,如“指出問題”“提出建議”“定位問題”“給出解決辦法”。情感特征類主要指“稱贊”“批評”兩類評語?!爸赋鰡栴}”是明確、直接指出作品中的問題或錯誤的評語。Matsumura等(Matsumura, Patthey-Chavez, Valdes, & Garnier, 2002)發(fā)現(xiàn)指出寫作文本整體性問題更有利于采納和修改。“提出建議”是針對項目問題或錯誤給出的修改意見,其特點是籠統(tǒng)、不具體(Nelson & Schunn, 2009),如“請你再好好想一想”?!岸ㄎ粏栴}”是明確指出問題的具體位置,如“我認(rèn)為這句話跟前面有點重復(fù)”,有利于被評價者理解問題進(jìn)而采納評語(高瑛, 等, 2019)?!敖o出解決辦法”是提供如何修改或提高作品質(zhì)量的評語,收到該評語的被評價者極有可能提高采納率并改進(jìn)作品質(zhì)量??偟膩碚f,相較于情感特征類,認(rèn)知特征類對學(xué)生后續(xù)評語采納和修改影響最大(Patchan, et al., 2015)。同時,不同類型的評語使學(xué)生產(chǎn)生的情緒體驗也有顯著差異(柏宏權(quán), 等, 2019)。這就要求在設(shè)計學(xué)評融合理念的評價活動時要合理利用不同類型的評價內(nèi)容。

    4. 評價投入

    評價投入是評價他人作品時的時間投入和評價頻率。兩者都表征了學(xué)生自評或評他活動的參與度,是學(xué)評融合理念下評價活動量的表現(xiàn)。由于學(xué)評融合理念更注重學(xué)生的評價生成,因此在評價投入中將主要關(guān)注評價頻率。Chen和Tsai分析了同伴評價的頻率對作品質(zhì)量的促進(jìn)作用。結(jié)果顯示,在前兩輪的學(xué)習(xí)中評價頻率會影響學(xué)業(yè)成績,但在第二輪到第三輪中的影響不明顯。李艷燕等(2020)的研究發(fā)現(xiàn),小組成員發(fā)帖越多,成員之間的社交網(wǎng)絡(luò)越聯(lián)通,越對小組成績有重要影響。因此,較好的設(shè)計評價的頻次是學(xué)評融合理念下的評價需要關(guān)注的要素。

    5. 評價效能感

    評價效能感是指學(xué)生基于對自身評價能力的主觀評價而形成的一種自信感。是在評價活動中,學(xué)生相信自己給出的評語經(jīng)過了仔細(xì)思考、對他人很有用、有充分的依據(jù)、符合一定標(biāo)準(zhǔn)等。目前,關(guān)于評價效能感的研究較少,但與其相近的自我效能感和評價行為間的研究表明,自我效能感可能是影響學(xué)生評價行為的一個重要因素(Hsia, Huang, & Hwang, 2016)。Wang和Shu-Ling(Wang & Wu, 2008)等基于社會認(rèn)知理論的視角,在探索同伴評價以及自我效能感對網(wǎng)絡(luò)學(xué)習(xí)的影響時發(fā)現(xiàn),自我效能感作為影響自我調(diào)節(jié)學(xué)習(xí)的關(guān)鍵變量之一,與學(xué)生的評價行為、學(xué)習(xí)策略的使用均存在顯著的相關(guān)性。

    (三)反思與改進(jìn)及其核心要素

    學(xué)評融合質(zhì)量的提升要求及時性和迭代性的反思與改進(jìn)。不管是從評價還是從支持自我調(diào)節(jié)學(xué)習(xí)方面看,大多數(shù)研究的重點還很少聚焦反思階段(奧爾加·維伯格, 等, 2020),而學(xué)生利用評價行為表現(xiàn)信息在反思階段做出改進(jìn)也至關(guān)重要。在參與評價活動后,學(xué)生將發(fā)現(xiàn)很多相似或完全不一樣的作品,進(jìn)而明白有很多思考問題的角度和方式,由此拓展了思維的廣度,在此基礎(chǔ)上的反思和改進(jìn)將是又一次認(rèn)知升華,它需要學(xué)生有元認(rèn)知的加工。在該階段學(xué)生雖然知道會有其他的想法和觀點,但并不會完全參照、變成它們,而是會潛移默化地吸收某些優(yōu)點,進(jìn)而將自己的作品發(fā)揮出特色。也就是說,評價行為讓改進(jìn)更容易。

    反思與改進(jìn)的核心要素可以從表征學(xué)生態(tài)度的評價采納要素、表征學(xué)生行為的反饋投入要素和表征學(xué)習(xí)過程的評價思維深度要素三個方面進(jìn)行歸納。

    1. 評價采納

    評價采納是判斷學(xué)生間互動有效性的一個重要環(huán)節(jié)(高瑛, 等, 2019)。學(xué)評融合理念的評價強調(diào)以人為中心和評價的增值性,因此,被評價者的評價采納行為是說明該評價高質(zhì)量進(jìn)行的重要標(biāo)志。同時,在評價和采納之間很有可能存在某種潛在中介對反思與改進(jìn)行為產(chǎn)生影響,從認(rèn)知、情感和行為三個角度出發(fā),與評語采納關(guān)系密切的分別是“理解”“同意”“處理方式”,但研究結(jié)果不一(Patchan, Schunn, & Correnti, 2016)。“理解”是指一種認(rèn)知上了解或解釋意義及因由的能力。“同意”是指情感上對評價信息或評價能提高改進(jìn)質(zhì)量的認(rèn)同。“處理方式”是行為上對待評價信息的及時性。因此,學(xué)生“理解”“同意”“處理方式”的程度和及時性應(yīng)在設(shè)計學(xué)評融合理念的評價活動時被考慮。

    2. 反饋投入

    反饋投入是學(xué)生在得到他人評價后,進(jìn)行反饋的時間投入和頻率。兩者都表征了學(xué)生在參與評價活動后進(jìn)行反思與改進(jìn)的廣度,是學(xué)評融合理念下評價活動質(zhì)量的保障,同時對促進(jìn)評價活動三個部分的螺旋上升具有重要作用。由于學(xué)評融合理念更注重學(xué)生的反饋生成,因此在反饋投入中將主要關(guān)注學(xué)生反饋的頻率。

    3. 評價的思維深度

    學(xué)評融合理念的評價關(guān)注學(xué)生高階思維能力的培養(yǎng),而培養(yǎng)效果的表征與評價的思維深度密切相關(guān),即學(xué)生在評價活動中的情感獲得、認(rèn)知激發(fā)和實踐改進(jìn)程度。情感獲得即學(xué)生在多大程度上覺得評價他人時很開心、很有成就感等。認(rèn)知激發(fā)即學(xué)生在多大程度上認(rèn)為評價拓展了自身視野、激發(fā)了靈感等。實踐改進(jìn)是學(xué)生對評價能夠讓自己更好地完成作品、看到不同解決辦法、更加了解評分標(biāo)準(zhǔn)的認(rèn)可程度。高階的評價思維深度是學(xué)評融合理念的發(fā)展目標(biāo),因此在設(shè)計評價活動時要充分考慮學(xué)生評價思維深度的發(fā)展?fàn)顩r。

    四、小結(jié)

    本文面向人工智能時代下的教育評價變革,提出了新的學(xué)評融合理念,并詳細(xì)闡述了學(xué)評融合理念的概念、內(nèi)涵與五大特征,提出了學(xué)評融合中評價的學(xué)習(xí)活動落地的實施框架和核心要素。當(dāng)然,學(xué)評融合的落地還需要更多的探索研究與實踐。

    一是學(xué)評融合理念強調(diào)自下而上的評價改革,是針對一線實踐層面提升質(zhì)量而設(shè)計的一種新型評價體系。當(dāng)前我國的教育評價體系還處在不斷完善的階段,在國家、省級層面開展大規(guī)模的以診斷為核心的終結(jié)性評價有其必要性,但不能停留在知識技能掌握的導(dǎo)向上,要強調(diào)和關(guān)注對學(xué)生核心素養(yǎng)的評價,快速獲取學(xué)生發(fā)展的狀況、特點,并挖掘背后的成長規(guī)律。

    二是學(xué)評融合理念的落地有利于實踐一線提升教育水平,提高教師的育人能力。建議更多研究者能夠聚焦評價的學(xué)習(xí)功能的研究,避免過度強調(diào)評價的診斷性,導(dǎo)致學(xué)生、家長、教師、學(xué)校的評價負(fù)擔(dān)不斷加重,但評價改進(jìn)卻原地踏步。研究人員可以更多地利用PISA數(shù)據(jù)、我國對外發(fā)布的質(zhì)量監(jiān)測數(shù)據(jù)以及已有的研究數(shù)據(jù),加強基于評價數(shù)據(jù)改進(jìn)的能力,提出可切實落地的實踐方法,助力我國基礎(chǔ)教育質(zhì)量的提升,助力學(xué)校育人方式的轉(zhuǎn)變。

    三是期待更多的評價第三方聚焦利用數(shù)字世界科學(xué)診斷、科學(xué)提升學(xué)生的核心素養(yǎng),強化評價的學(xué)習(xí)性,建立有利于學(xué)生、教師發(fā)展的評價環(huán)境,尤其在加強過程性評價、探索增值性評價的背景下,科學(xué)推進(jìn)、科學(xué)實踐,不做應(yīng)試教育的助推器,而是探索開展有利于學(xué)生發(fā)展的評價活動,基于學(xué)習(xí)活動數(shù)據(jù),利用人工智能、大數(shù)據(jù)等優(yōu)勢研發(fā)科學(xué)的計算模型和個性化學(xué)習(xí)模型,開展大規(guī)模的質(zhì)量提升與科學(xué)診斷。

    雖然學(xué)評融合理念能夠提升學(xué)生的高階思維能力,解決以評促學(xué)低質(zhì)、低效的問題,但在當(dāng)前教學(xué)實踐中仍可能存在諸多挑戰(zhàn):一是對學(xué)評融合理念的理解不夠,不能構(gòu)建基于學(xué)評融合理念的育人生態(tài);二是數(shù)字世界的建設(shè)不夠,很多地方由于多種原因還不具備常態(tài)化、大規(guī)模開展的條件,不少地區(qū)目前還處在物理世界育人的階段,欠缺對數(shù)字世界育人的規(guī)律和方法的認(rèn)識和運用,不具備基于數(shù)字世界常態(tài)化育人的條件和能力,學(xué)評融合的落地還有待于更多、大規(guī)模的研究和實踐。

    Hsia, L., Huang, I., & Hwang, G. (2016). A web-based peer-assessment approach to improving junior high school studentsperformance, self-efficacy and motivation in performing arts courses. British Journal of Educational Technology, 47(4), 618-632.

    Knight, P. (2002). Summative assessment in higher education: practices in disarray, Studies in Higher Education, 27(3), 275-286.

    Lam, R. (2018). Understanding assessment as learning in writing classrooms: The case of portfolio assessment. Iranian Journal of Language Teaching Research, 6(3), 19-36.

    Matsumura, L. C., Patthey-Chavez, G., Valdes, R., & Garnier, H. (2002). Teacher feedback, writing assignment quality, and third-grade studentsrevision in lower-and higher-achieving urban schools. The Elementary School Journal, 103(1), 3-25.

    Muchlis, Ibnu, S., Subandi, & Marfuah, S. (2020). StudentsResult of Learning at Chemistry Department through Assessment of, for, and as Learning Implementation. International Journal of Instruction, 13(2), 165-178.

    Nelson, M. M., & Schunn, C. D. (2009). The nature of feedback: How different types of peer feedback affect writing performance. Instructional Science, 37(4), 375-401.

    OFarrell, C. (2009). Enhancing student learning through assessment. Dublin, UK: Institute of Technology.

    Patchan, M. M., & Schunn, C. D. (2015). Understanding the benefits of providing peer feedback: How students respond to peerstexts of varying quality. Instructional Science, 43(5), 591-614.

    Patchan, Melissa M, Schunn, Christian D, & Correnti, Richard J. (2016). The Nature of Feedback: How Peer Feedback Features Affect StudentsImplementation Rate and Quality of Revisions. Journal of Educational Psychology, 108(8), 1098-1120.

    Ramsden, P. (2003). Learning to teaching in higher education (2nd ed.). London, UK: Routledge.

    Rust, C., Price, M. & ODonovan, B. (2003). Improving studentslearning by developing their understanding of assessment criteria and processes, Assessment and Evaluation in Higher Education, 28(2), 147-164.

    Taras, M. (2006). Do unto others or not: equity in feedback for undergraduates, Assessment and Evaluation in Higher Education, 31(3), 365-377.

    Wang, Shu-Ling, & Wu, Pei-Yi. (2008). The role of feedback and self-efficacy on web-based learning: The social cognitive perspective. Computers and Education, 51(4), 1589-1598.

    Wiliam, D. (2011). What is assessment for learning? Studies in Educational Evaluation, 37,3-14.

    Yong Zhao. (1998). The Effects of Anonymity on Computer-Mediated Peer Review[J]. Internati-onal Journal of Educational Telecommunications, 4(4), 311-345.

    Yorke, M. (2003). Formative assessment in higher education: moves towards theory and enhancement of pedagogic practice, Higher Education, 45, 477-501.

    收稿日期:2020-11-22

    定稿日期:2020-12-23

    作者簡介:張生,博士,副教授,博士生導(dǎo)師;王雪,碩士研究生。北京師范大學(xué)中國基礎(chǔ)教育質(zhì)量監(jiān)測協(xié)同創(chuàng)新中心(100875)。

    齊媛,博士,助理研究員,中國教育科學(xué)研究院(100088)。

    責(zé)任編輯 劉 莉

    猜你喜歡
    評價改革教育評價人工智能
    2019:人工智能
    商界(2019年12期)2019-01-03 06:59:05
    人工智能與就業(yè)
    數(shù)讀人工智能
    小康(2017年16期)2017-06-07 09:00:59
    改革小學(xué)語文考試評價的幾點嘗試
    考試周刊(2016年100期)2017-01-07 17:47:47
    小學(xué)數(shù)學(xué)作業(yè)評價改革之我見
    考試周刊(2016年99期)2016-12-26 15:45:21
    談?wù)劷逃u價與學(xué)校教育管理的重要性
    高職英語形成性評價研究與實踐
    考試周刊(2016年90期)2016-12-01 20:47:13
    關(guān)注“人的發(fā)展”:“核心素養(yǎng)”觀下學(xué)校教育的召喚
    基于幼兒成長的有效教育評價研究
    成才之路(2016年32期)2016-11-19 17:13:08
    下一幕,人工智能!
    制服诱惑二区| xxx大片免费视频| 黄片播放在线免费| 国产精品一二三区在线看| 老熟女久久久| 成人亚洲精品一区在线观看| 婷婷色综合大香蕉| 久久综合国产亚洲精品| 建设人人有责人人尽责人人享有的| 男女无遮挡免费网站观看| 伦理电影大哥的女人| 亚洲精品,欧美精品| 十分钟在线观看高清视频www| 在线观看免费高清a一片| 国产精品99久久99久久久不卡 | 麻豆av在线久日| 久久久久视频综合| 国产精品久久久久成人av| 欧美成人精品欧美一级黄| 午夜福利,免费看| 亚洲av国产av综合av卡| 天堂8中文在线网| 亚洲精品第二区| 精品视频人人做人人爽| 久久天躁狠狠躁夜夜2o2o | 老司机影院成人| 国产亚洲av片在线观看秒播厂| 女性生殖器流出的白浆| 操美女的视频在线观看| av国产久精品久网站免费入址| 男人舔女人的私密视频| 五月开心婷婷网| 观看av在线不卡| 综合色丁香网| 欧美成人精品欧美一级黄| 91精品三级在线观看| 亚洲精品,欧美精品| 久久久久人妻精品一区果冻| 韩国高清视频一区二区三区| 人妻一区二区av| 超色免费av| 一级毛片电影观看| 日韩中文字幕欧美一区二区 | 又大又爽又粗| 精品少妇久久久久久888优播| 韩国高清视频一区二区三区| 精品少妇黑人巨大在线播放| 视频区图区小说| 一区二区三区四区激情视频| 极品少妇高潮喷水抽搐| 欧美xxⅹ黑人| 久久久久精品国产欧美久久久 | 中国国产av一级| 亚洲欧美激情在线| 国产探花极品一区二区| 别揉我奶头~嗯~啊~动态视频 | 久久ye,这里只有精品| 国产黄色视频一区二区在线观看| 另类亚洲欧美激情| 国产一区二区三区av在线| 观看美女的网站| 另类精品久久| 看十八女毛片水多多多| 777米奇影视久久| av不卡在线播放| 国产精品久久久av美女十八| 中文字幕另类日韩欧美亚洲嫩草| 午夜久久久在线观看| 欧美精品亚洲一区二区| 国产成人一区二区在线| 亚洲色图 男人天堂 中文字幕| 精品午夜福利在线看| 高清欧美精品videossex| 丝袜喷水一区| 亚洲精品aⅴ在线观看| 久久久久视频综合| 欧美成人午夜精品| 人妻一区二区av| 91aial.com中文字幕在线观看| 亚洲情色 制服丝袜| 天堂俺去俺来也www色官网| 久久天堂一区二区三区四区| 美女主播在线视频| 精品少妇内射三级| 亚洲欧美色中文字幕在线| 在线看a的网站| 高清av免费在线| 国产 精品1| 精品人妻在线不人妻| 电影成人av| 欧美国产精品一级二级三级| 韩国av在线不卡| 亚洲男人天堂网一区| 成人黄色视频免费在线看| 亚洲 欧美一区二区三区| 狠狠精品人妻久久久久久综合| 捣出白浆h1v1| 精品国产一区二区久久| 在线 av 中文字幕| 国产又色又爽无遮挡免| 丝袜人妻中文字幕| 国产免费视频播放在线视频| 女人高潮潮喷娇喘18禁视频| 永久免费av网站大全| 欧美中文综合在线视频| 欧美成人精品欧美一级黄| 90打野战视频偷拍视频| 一本色道久久久久久精品综合| 美女福利国产在线| 国产xxxxx性猛交| 日韩一本色道免费dvd| 亚洲av电影在线观看一区二区三区| 妹子高潮喷水视频| 国产男女超爽视频在线观看| 国产精品三级大全| 国产精品蜜桃在线观看| 成人免费观看视频高清| 国产精品免费大片| 欧美 日韩 精品 国产| 亚洲av电影在线进入| 最近最新中文字幕免费大全7| 老司机影院成人| 免费看不卡的av| 免费观看a级毛片全部| 亚洲,一卡二卡三卡| 国产精品久久久久久精品古装| 国产在线视频一区二区| 狂野欧美激情性xxxx| 亚洲欧美一区二区三区国产| 国产精品.久久久| 国产97色在线日韩免费| 99热全是精品| 黄色一级大片看看| 国产男女内射视频| 中文字幕亚洲精品专区| 精品福利永久在线观看| 国产99久久九九免费精品| 伊人久久国产一区二区| 视频在线观看一区二区三区| 色视频在线一区二区三区| 日韩制服丝袜自拍偷拍| 欧美在线一区亚洲| 日日爽夜夜爽网站| 91成人精品电影| 国产精品久久久久久人妻精品电影 | 久久国产亚洲av麻豆专区| 精品亚洲成a人片在线观看| 成人毛片60女人毛片免费| 久久久久精品国产欧美久久久 | 国产av国产精品国产| 人人妻,人人澡人人爽秒播 | 精品久久久久久电影网| 欧美成人午夜精品| 肉色欧美久久久久久久蜜桃| 精品一区在线观看国产| 亚洲少妇的诱惑av| 大香蕉久久成人网| av电影中文网址| 精品人妻在线不人妻| 亚洲熟女精品中文字幕| 老司机在亚洲福利影院| 欧美激情极品国产一区二区三区| 国产精品熟女久久久久浪| 日日啪夜夜爽| 男女下面插进去视频免费观看| av天堂久久9| 中文字幕制服av| 久久人妻熟女aⅴ| 国产精品一区二区在线不卡| 999久久久国产精品视频| 中文字幕另类日韩欧美亚洲嫩草| 亚洲av电影在线观看一区二区三区| 黑人巨大精品欧美一区二区蜜桃| 18在线观看网站| av国产精品久久久久影院| 国产亚洲精品第一综合不卡| 亚洲国产欧美一区二区综合| 一级毛片我不卡| 考比视频在线观看| 十分钟在线观看高清视频www| 少妇人妻精品综合一区二区| 天天添夜夜摸| 久久综合国产亚洲精品| 成年动漫av网址| 欧美日韩视频精品一区| 亚洲国产精品成人久久小说| 人人妻人人澡人人爽人人夜夜| 日韩av免费高清视频| 婷婷成人精品国产| 亚洲国产精品一区二区三区在线| 国产1区2区3区精品| 日韩 欧美 亚洲 中文字幕| 黄片无遮挡物在线观看| 中文乱码字字幕精品一区二区三区| 欧美黄色片欧美黄色片| 国产亚洲欧美精品永久| 嫩草影视91久久| a级毛片在线看网站| 日日爽夜夜爽网站| 亚洲精华国产精华液的使用体验| 亚洲成国产人片在线观看| 国产日韩欧美视频二区| 制服丝袜香蕉在线| av在线播放精品| 美女午夜性视频免费| 只有这里有精品99| 欧美日韩av久久| 精品酒店卫生间| 亚洲精品国产一区二区精华液| 亚洲精品中文字幕在线视频| 亚洲国产欧美一区二区综合| 又黄又粗又硬又大视频| 九草在线视频观看| 黑人猛操日本美女一级片| 成年av动漫网址| 亚洲精品自拍成人| 免费日韩欧美在线观看| 亚洲成色77777| 精品一区在线观看国产| 日韩视频在线欧美| 少妇人妻 视频| 777久久人妻少妇嫩草av网站| 国产成人精品福利久久| 9色porny在线观看| 男女无遮挡免费网站观看| 免费在线观看黄色视频的| 老司机在亚洲福利影院| 男女之事视频高清在线观看 | 日韩免费高清中文字幕av| 亚洲成人国产一区在线观看 | av国产久精品久网站免费入址| 1024香蕉在线观看| 亚洲综合色网址| 999久久久国产精品视频| 亚洲激情五月婷婷啪啪| 99久国产av精品国产电影| 老汉色av国产亚洲站长工具| 中国国产av一级| 国产一区有黄有色的免费视频| av免费观看日本| 下体分泌物呈黄色| 免费女性裸体啪啪无遮挡网站| 校园人妻丝袜中文字幕| 日韩精品免费视频一区二区三区| 成人国产麻豆网| 国产乱来视频区| 国产av码专区亚洲av| 久久综合国产亚洲精品| 国产又色又爽无遮挡免| 777米奇影视久久| 亚洲专区中文字幕在线 | 国产爽快片一区二区三区| 亚洲av国产av综合av卡| 一本—道久久a久久精品蜜桃钙片| 婷婷色av中文字幕| 丝袜人妻中文字幕| 国产精品一区二区精品视频观看| 亚洲国产精品一区二区三区在线| 午夜福利影视在线免费观看| 看十八女毛片水多多多| 亚洲色图综合在线观看| 免费在线观看完整版高清| 中文精品一卡2卡3卡4更新| 中文字幕制服av| 18在线观看网站| 欧美国产精品va在线观看不卡| 在线天堂中文资源库| 男女高潮啪啪啪动态图| 精品视频人人做人人爽| 大码成人一级视频| av在线app专区| 国产精品一国产av| 麻豆乱淫一区二区| 亚洲国产欧美一区二区综合| 美女国产高潮福利片在线看| 久久人妻熟女aⅴ| 美女福利国产在线| 岛国毛片在线播放| av国产精品久久久久影院| 久久久欧美国产精品| 成人国产av品久久久| 纵有疾风起免费观看全集完整版| 99九九在线精品视频| 亚洲在久久综合| 男女国产视频网站| 欧美黑人精品巨大| 亚洲精品国产一区二区精华液| 极品少妇高潮喷水抽搐| 国产一区二区在线观看av| 亚洲成人一二三区av| 久久免费观看电影| 在现免费观看毛片| 亚洲七黄色美女视频| 久久精品国产综合久久久| 在线天堂中文资源库| 国产日韩一区二区三区精品不卡| 热99久久久久精品小说推荐| 夫妻午夜视频| 午夜福利乱码中文字幕| 成年女人毛片免费观看观看9 | 久久婷婷青草| 国产亚洲欧美精品永久| 丁香六月天网| 99热网站在线观看| av线在线观看网站| 亚洲欧美成人综合另类久久久| 激情视频va一区二区三区| 天天操日日干夜夜撸| 咕卡用的链子| 亚洲成人av在线免费| 国产99久久九九免费精品| 久久亚洲国产成人精品v| 日本猛色少妇xxxxx猛交久久| tube8黄色片| 国产精品秋霞免费鲁丝片| 欧美 日韩 精品 国产| 国产黄频视频在线观看| 亚洲熟女毛片儿| 天天操日日干夜夜撸| 欧美人与性动交α欧美软件| 精品国产乱码久久久久久男人| 国产免费视频播放在线视频| 成人亚洲精品一区在线观看| 亚洲婷婷狠狠爱综合网| 成人亚洲欧美一区二区av| 丁香六月欧美| 国产成人精品福利久久| 国产成人a∨麻豆精品| 精品人妻熟女毛片av久久网站| 男女国产视频网站| 蜜桃在线观看..| √禁漫天堂资源中文www| 美女午夜性视频免费| 少妇的丰满在线观看| 高清在线视频一区二区三区| 又大又黄又爽视频免费| av线在线观看网站| 在线免费观看不下载黄p国产| 午夜福利网站1000一区二区三区| 五月天丁香电影| 欧美激情高清一区二区三区 | 中文天堂在线官网| 一边摸一边抽搐一进一出视频| 精品免费久久久久久久清纯 | 巨乳人妻的诱惑在线观看| 最近最新中文字幕免费大全7| 国产乱人偷精品视频| 国产精品秋霞免费鲁丝片| 天天躁夜夜躁狠狠躁躁| 人人妻人人澡人人看| 18禁动态无遮挡网站| 观看av在线不卡| 亚洲国产欧美日韩在线播放| 操出白浆在线播放| www.自偷自拍.com| 99热网站在线观看| 午夜影院在线不卡| 亚洲综合色网址| 美女中出高潮动态图| 亚洲综合色网址| 巨乳人妻的诱惑在线观看| 日韩中文字幕视频在线看片| 国产淫语在线视频| 欧美另类一区| 亚洲成人国产一区在线观看 | 999精品在线视频| 如日韩欧美国产精品一区二区三区| 丰满饥渴人妻一区二区三| 免费高清在线观看视频在线观看| 亚洲精品国产区一区二| 69精品国产乱码久久久| 久久人人97超碰香蕉20202| 精品国产乱码久久久久久小说| 久久久久久人人人人人| 久久久精品国产亚洲av高清涩受| 丁香六月天网| 成人三级做爰电影| 赤兔流量卡办理| 国产视频首页在线观看| 亚洲成av片中文字幕在线观看| 我的亚洲天堂| 国产欧美亚洲国产| 嫩草影院入口| 精品国产一区二区三区久久久樱花| 99久久99久久久精品蜜桃| 99国产综合亚洲精品| 人妻人人澡人人爽人人| 高清黄色对白视频在线免费看| a级毛片黄视频| 亚洲精品aⅴ在线观看| 97人妻天天添夜夜摸| a级毛片在线看网站| 亚洲欧美日韩另类电影网站| 久久精品亚洲av国产电影网| 悠悠久久av| 久久久久精品久久久久真实原创| 女人高潮潮喷娇喘18禁视频| 色综合欧美亚洲国产小说| 成年动漫av网址| 久久久精品94久久精品| 中文字幕人妻丝袜一区二区 | 大话2 男鬼变身卡| 97精品久久久久久久久久精品| 18在线观看网站| 在线观看www视频免费| 男人操女人黄网站| 自线自在国产av| 日日撸夜夜添| 伊人久久国产一区二区| 99香蕉大伊视频| 嫩草影视91久久| 日日撸夜夜添| 免费少妇av软件| 男女边吃奶边做爰视频| 人人妻人人爽人人添夜夜欢视频| 啦啦啦视频在线资源免费观看| 亚洲av日韩精品久久久久久密 | 亚洲欧美精品综合一区二区三区| 超色免费av| 美女视频免费永久观看网站| 日韩一卡2卡3卡4卡2021年| 少妇精品久久久久久久| 一级毛片电影观看| 十八禁网站网址无遮挡| 嫩草影院入口| 高清黄色对白视频在线免费看| 亚洲欧美一区二区三区国产| 亚洲熟女精品中文字幕| 伊人久久国产一区二区| 熟女少妇亚洲综合色aaa.| 亚洲精品成人av观看孕妇| 日韩一本色道免费dvd| 黄网站色视频无遮挡免费观看| 亚洲天堂av无毛| 男人舔女人的私密视频| 国产一区亚洲一区在线观看| 国产精品香港三级国产av潘金莲 | 韩国高清视频一区二区三区| 又大又黄又爽视频免费| 国产日韩欧美在线精品| 久久久久人妻精品一区果冻| av有码第一页| 国产精品熟女久久久久浪| 纵有疾风起免费观看全集完整版| 麻豆精品久久久久久蜜桃| 国产精品一国产av| 涩涩av久久男人的天堂| 国产成人欧美在线观看 | 又大又爽又粗| 久久久久久久国产电影| 中国三级夫妇交换| 精品人妻在线不人妻| 人人澡人人妻人| 国产免费现黄频在线看| 女性被躁到高潮视频| 日韩大码丰满熟妇| 免费黄网站久久成人精品| 成人国产麻豆网| 亚洲欧美色中文字幕在线| 欧美另类一区| 美女高潮到喷水免费观看| 美国免费a级毛片| 亚洲av欧美aⅴ国产| 天堂俺去俺来也www色官网| 久久久久精品久久久久真实原创| 亚洲第一av免费看| 在线观看国产h片| 国产欧美亚洲国产| 日本欧美国产在线视频| 国产精品蜜桃在线观看| av片东京热男人的天堂| 考比视频在线观看| 日日摸夜夜添夜夜爱| 中文字幕另类日韩欧美亚洲嫩草| 免费黄色在线免费观看| 日韩精品有码人妻一区| 久久狼人影院| 精品一区二区三区av网在线观看 | 观看美女的网站| 久久国产精品大桥未久av| 久久久久精品性色| av免费观看日本| 无遮挡黄片免费观看| 男女国产视频网站| videosex国产| a级毛片黄视频| 国产一区二区三区av在线| 十八禁高潮呻吟视频| 国产激情久久老熟女| 国产成人一区二区在线| 女人爽到高潮嗷嗷叫在线视频| 国产精品 国内视频| 亚洲成人一二三区av| 桃花免费在线播放| 久久天堂一区二区三区四区| 色播在线永久视频| 日韩av不卡免费在线播放| 老汉色∧v一级毛片| 桃花免费在线播放| 亚洲精品一二三| 91精品国产国语对白视频| 精品免费久久久久久久清纯 | 中文字幕人妻丝袜一区二区 | 欧美亚洲 丝袜 人妻 在线| www.自偷自拍.com| 男女边吃奶边做爰视频| 女性生殖器流出的白浆| 黄色视频在线播放观看不卡| 99热国产这里只有精品6| 男人添女人高潮全过程视频| 国产日韩欧美亚洲二区| av网站在线播放免费| 在线精品无人区一区二区三| 亚洲自偷自拍图片 自拍| 大香蕉久久成人网| 午夜福利视频在线观看免费| 制服人妻中文乱码| 丝袜美腿诱惑在线| 一级黄片播放器| 亚洲美女视频黄频| 80岁老熟妇乱子伦牲交| 亚洲成人手机| 一级片免费观看大全| 久久久久久久国产电影| www.精华液| 美女高潮到喷水免费观看| av女优亚洲男人天堂| 别揉我奶头~嗯~啊~动态视频 | 人人妻,人人澡人人爽秒播 | 国产免费一区二区三区四区乱码| 亚洲一区二区三区欧美精品| 精品亚洲乱码少妇综合久久| 国产高清国产精品国产三级| 亚洲av电影在线进入| 少妇 在线观看| bbb黄色大片| 青春草视频在线免费观看| 精品少妇久久久久久888优播| 51午夜福利影视在线观看| 妹子高潮喷水视频| 自拍欧美九色日韩亚洲蝌蚪91| 国产探花极品一区二区| 成年人午夜在线观看视频| 99香蕉大伊视频| 久久精品熟女亚洲av麻豆精品| 日日爽夜夜爽网站| 天天躁夜夜躁狠狠久久av| 丝瓜视频免费看黄片| 精品一区在线观看国产| 最近中文字幕2019免费版| 一边摸一边做爽爽视频免费| 菩萨蛮人人尽说江南好唐韦庄| kizo精华| 中文字幕精品免费在线观看视频| 青草久久国产| 欧美av亚洲av综合av国产av | 人体艺术视频欧美日本| 青春草国产在线视频| 亚洲免费av在线视频| 一本一本久久a久久精品综合妖精| 夜夜骑夜夜射夜夜干| 成人手机av| 久久国产精品男人的天堂亚洲| xxxhd国产人妻xxx| 午夜福利网站1000一区二区三区| 久久久久久人妻| 国产亚洲最大av| 欧美日韩亚洲综合一区二区三区_| 国产精品国产三级国产专区5o| 桃花免费在线播放| 中文字幕人妻丝袜一区二区 | 亚洲天堂av无毛| 国产精品香港三级国产av潘金莲 | 极品少妇高潮喷水抽搐| 黄片播放在线免费| 久久99一区二区三区| 成年av动漫网址| 国产高清国产精品国产三级| 免费女性裸体啪啪无遮挡网站| 欧美 日韩 精品 国产| √禁漫天堂资源中文www| 色网站视频免费| 亚洲精品国产区一区二| 2018国产大陆天天弄谢| 日韩熟女老妇一区二区性免费视频| 一级a爱视频在线免费观看| 国产精品秋霞免费鲁丝片| 熟女av电影| 五月天丁香电影| 午夜老司机福利片| 久久天堂一区二区三区四区| 我要看黄色一级片免费的| 哪个播放器可以免费观看大片| 午夜免费观看性视频| 王馨瑶露胸无遮挡在线观看| 欧美精品一区二区免费开放| 日韩 欧美 亚洲 中文字幕| 男男h啪啪无遮挡| 18在线观看网站| 日本欧美视频一区| 毛片一级片免费看久久久久| 日韩大码丰满熟妇| 国产色婷婷99| 国产免费一区二区三区四区乱码| 香蕉国产在线看| 美女中出高潮动态图| netflix在线观看网站| 亚洲熟女精品中文字幕| 成人午夜精彩视频在线观看| 一级毛片我不卡| 别揉我奶头~嗯~啊~动态视频 | 五月天丁香电影| 亚洲人成电影观看| 成年av动漫网址| 丰满乱子伦码专区|