• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    深度解讀學(xué)前教育質(zhì)量評(píng)價(jià)的信度、效度和公平性

    2024-02-19 11:38:38陳德枝
    幼兒教育·教育科學(xué)版 2024年2期
    關(guān)鍵詞:公平性效度信度

    【摘要】信度、效度和公平性是學(xué)前教育質(zhì)量評(píng)價(jià)的三個(gè)基本測(cè)量學(xué)屬性。本文基于《教育與心理測(cè)量標(biāo)準(zhǔn)》中信度、效度和公平性的基本內(nèi)涵,結(jié)合學(xué)前教育質(zhì)量評(píng)價(jià)的基本特點(diǎn),闡述學(xué)前教育質(zhì)量評(píng)價(jià)的信度、效度和公平性以及三者間的相互關(guān)系,并針對(duì)當(dāng)前學(xué)前教育質(zhì)量評(píng)價(jià)測(cè)量學(xué)屬性研究進(jìn)展,進(jìn)一步指出未來(lái)信度、效度和公平性探索的主要方向和方法。

    【關(guān)鍵詞】學(xué)前教育質(zhì)量評(píng)價(jià);信度;效度;公平性

    【中圖分類(lèi)號(hào)】G610 【文獻(xiàn)標(biāo)識(shí)碼】A? ?【文章編號(hào)】1004-4604(2024)1/2-0063-06

    學(xué)前教育質(zhì)量評(píng)價(jià)是學(xué)前教育事業(yè)改革和發(fā)展的重要議題。 信度(Reliability)、效度(Valiability)和公平性(Fairness)作為學(xué)前教育質(zhì)量評(píng)價(jià)的基本測(cè)量學(xué)屬性,是評(píng)價(jià)科學(xué)性和權(quán)威性的重要基礎(chǔ)和基本保障。本文基于2014年美國(guó)教育研究學(xué)會(huì)、美國(guó)心理學(xué)會(huì)和美國(guó)國(guó)家教育測(cè)量委員會(huì)頒布的《教育與心理測(cè)量標(biāo)準(zhǔn)》中對(duì)信度、效度和公平性的界定,探索學(xué)前教育質(zhì)量評(píng)價(jià)的基本測(cè)量學(xué)屬性,旨在為幼兒園保育教育質(zhì)量細(xì)則的構(gòu)建、學(xué)前教育質(zhì)量評(píng)價(jià)方法和過(guò)程的規(guī)范以及幼兒園保育教育質(zhì)量的提升提供方向指引。

    一、學(xué)前教育質(zhì)量評(píng)價(jià)的信度及研究進(jìn)展

    1.學(xué)前教育質(zhì)量評(píng)價(jià)的信度

    信度指重復(fù)測(cè)試結(jié)果的一致性?!?〕學(xué)前教育質(zhì)量評(píng)價(jià)的信度指評(píng)價(jià)者采用相同的標(biāo)準(zhǔn)對(duì)幼兒園進(jìn)行重復(fù)評(píng)價(jià),以使結(jié)果趨于一致或穩(wěn)定?;趯W(xué)前教育質(zhì)量評(píng)價(jià)目前采用的評(píng)價(jià)方法,信度的影響因素主要來(lái)自評(píng)價(jià)內(nèi)容和評(píng)價(jià)者。學(xué)前教育質(zhì)量評(píng)價(jià)通常圍繞評(píng)價(jià)量表或標(biāo)準(zhǔn)展開(kāi),因此評(píng)價(jià)量表或標(biāo)準(zhǔn)的可信性也是質(zhì)量評(píng)價(jià)信度的影響因素之一。另外,學(xué)前教育質(zhì)量評(píng)價(jià)多采用評(píng)價(jià)者現(xiàn)場(chǎng)測(cè)評(píng)的方式。雖然對(duì)評(píng)價(jià)者進(jìn)行了統(tǒng)一、嚴(yán)格的測(cè)評(píng)培訓(xùn),但由評(píng)價(jià)者主觀評(píng)價(jià)引起的誤差依然是影響測(cè)評(píng)結(jié)果準(zhǔn)確性的重要因素?!?-5〕

    2.學(xué)前教育質(zhì)量評(píng)價(jià)信度的研究進(jìn)展

    短時(shí)間內(nèi)有規(guī)模地組織評(píng)價(jià)者對(duì)幼兒園進(jìn)行重復(fù)測(cè)評(píng)具有一定難度。當(dāng)前有關(guān)保教質(zhì)量評(píng)價(jià)的信度估計(jì)主要采用經(jīng)典測(cè)量理論信度系數(shù)估計(jì)的常見(jiàn)方法,如內(nèi)部一致性α系數(shù)、概化系數(shù)、評(píng)分者一致性百分比等。幾種常見(jiàn)的國(guó)內(nèi)外保教質(zhì)量評(píng)價(jià)工具,如中國(guó)托幼機(jī)構(gòu)教育質(zhì)量評(píng)價(jià)量表(C?ECERS)、〔6〕中國(guó)幼兒園教育質(zhì)量評(píng)價(jià)量表、〔7〕幼兒園教育質(zhì)量評(píng)價(jià)手冊(cè)、〔8〕走向優(yōu)質(zhì)——中國(guó)幼兒園教育質(zhì)量評(píng)價(jià)標(biāo)準(zhǔn)、〔9〕幼兒學(xué)習(xí)環(huán)境評(píng)量表(Early Childhood Environmental Rating Scale)系列、〔10,11〕課堂評(píng)估評(píng)分系統(tǒng)(CLassroom Assessment Scoring System)、〔12,13〕照料者參與性評(píng)量表(Caregiver Involvement Scale)、〔14〕幼兒園教育質(zhì)量評(píng)估(Presc?

    hool Program Quality Assessment)〔15〕以及持續(xù)共享思維和情緒情感健康評(píng)量表(Sustained Shared Thinking and Emotional Wellbeing scale)〔16〕等均采用α系數(shù)表征量表評(píng)價(jià)內(nèi)容的一致性。中國(guó)托幼機(jī)構(gòu)教育質(zhì)量評(píng)價(jià)量表還采用概化系數(shù)分析量表內(nèi)容的信度?!?7〕評(píng)分者一致性百分比或評(píng)分者相關(guān)系數(shù)是學(xué)前教育質(zhì)量評(píng)價(jià)報(bào)告中評(píng)價(jià)者一致性的常用統(tǒng)計(jì)量,如中國(guó)托幼機(jī)構(gòu)教育質(zhì)量評(píng)價(jià)量表、幼兒學(xué)習(xí)環(huán)境評(píng)量表系列和課堂評(píng)估評(píng)分系統(tǒng)等均采用該方法估計(jì)評(píng)分者一致性等。〔18-21〕另外,近年來(lái)項(xiàng)目反應(yīng)理論(IRT)也逐步被用于質(zhì)量評(píng)價(jià)信度分析,如多側(cè)面拉希模型(MFRM)方法多被用于中國(guó)托幼機(jī)構(gòu)教育質(zhì)量評(píng)價(jià)量表的評(píng)價(jià)者信度等?!?2〕

    二、學(xué)前教育質(zhì)量評(píng)價(jià)的效度及研究進(jìn)展

    1.學(xué)前教育質(zhì)量評(píng)價(jià)的效度

    效度指測(cè)評(píng)結(jié)果被實(shí)證和理論支持所解釋的程度。〔23〕學(xué)前教育質(zhì)量評(píng)價(jià)的效度是指評(píng)價(jià)結(jié)果被來(lái)自幼兒園保教質(zhì)量的實(shí)證和理論支持所解釋的程度。具體而言,學(xué)前教育質(zhì)量評(píng)價(jià)的效度通常圍繞學(xué)前教育質(zhì)量評(píng)價(jià)內(nèi)容及內(nèi)在結(jié)構(gòu)、評(píng)價(jià)過(guò)程、評(píng)價(jià)結(jié)果與其他變量的關(guān)系、評(píng)價(jià)結(jié)果的解釋和應(yīng)用五個(gè)方面展開(kāi)。而在實(shí)踐中則圍繞內(nèi)容效度、反應(yīng)過(guò)程效度、結(jié)構(gòu)效度和校標(biāo)關(guān)聯(lián)效度四個(gè)方面展開(kāi)。

    內(nèi)容效度以評(píng)價(jià)項(xiàng)目或指標(biāo)的表述、呈現(xiàn)形式、管理和評(píng)分規(guī)則等為取證來(lái)源,并以專(zhuān)家判斷為依據(jù)。反應(yīng)過(guò)程效度的取證主要來(lái)自評(píng)價(jià)者的評(píng)分過(guò)程與測(cè)評(píng)結(jié)果預(yù)期解釋的一致性程度。結(jié)構(gòu)效度指評(píng)價(jià)內(nèi)容的內(nèi)在結(jié)構(gòu)與預(yù)先假設(shè)的結(jié)構(gòu)是否一致,通常采用實(shí)證研究來(lái)探索和驗(yàn)證結(jié)構(gòu)效度。校標(biāo)關(guān)聯(lián)效度常把兒童發(fā)展水平作為與其他變量的關(guān)系取證。已有研究一般采用兒童語(yǔ)言、數(shù)學(xué)和情感社會(huì)性發(fā)展水平為其他變量,探討質(zhì)量與這些發(fā)展變量的關(guān)系來(lái)佐證質(zhì)量評(píng)價(jià)的有效性。〔24-29〕

    2.學(xué)前教育質(zhì)量評(píng)價(jià)效度的研究進(jìn)展

    一直以來(lái)作為學(xué)前教育質(zhì)量評(píng)價(jià)效度研究的關(guān)注點(diǎn),結(jié)構(gòu)效度通常采用探索性因素(EFA)和驗(yàn)證性因素(CFA)分析學(xué)前教育質(zhì)量評(píng)價(jià)工具的潛在內(nèi)部結(jié)構(gòu)。如探索性因素和驗(yàn)證性因素的分析結(jié)果表明,幼兒學(xué)習(xí)環(huán)境評(píng)量表主要評(píng)價(jià)兩個(gè)潛在因子:結(jié)構(gòu)性質(zhì)量和過(guò)程性質(zhì)量?!?0〕由于評(píng)價(jià)量表和樣本量的不同以及探索性因素方法本身的限制,研究所得結(jié)論可能有所不同。有研究結(jié)果顯示幼兒園保教質(zhì)量由兒童課程和活動(dòng)的結(jié)構(gòu)與支持、教職人員與幼兒間的互動(dòng)及對(duì)教師專(zhuān)業(yè)成長(zhǎng)和家長(zhǎng)需求的支持三個(gè)潛在結(jié)構(gòu)組成?!?1〕

    來(lái)自與其他變量關(guān)系的效度取證研究也是學(xué)前教育質(zhì)量評(píng)價(jià)效度研究的熱點(diǎn)。受兒童情感社會(huì)性測(cè)量等所限,當(dāng)前效度取證的其他變量更多采用的是兒童語(yǔ)言和數(shù)學(xué)認(rèn)知發(fā)展,并通過(guò)求取這些變量與質(zhì)量評(píng)價(jià)結(jié)果的關(guān)系來(lái)探討效度。采用的分析方法由簡(jiǎn)單的二元相關(guān)到復(fù)雜的回歸分析,如多水平回歸模型等?!?2,33〕近年來(lái),幼兒園保教質(zhì)量的縱向追蹤和增值評(píng)價(jià)已成為學(xué)前教育質(zhì)量評(píng)價(jià)效度研究的一大趨勢(shì)?!?4-36〕

    內(nèi)容效度主要用于統(tǒng)計(jì)和分析專(zhuān)家評(píng)判結(jié)果的一致性。另外,已有文獻(xiàn)中僅有少量研究對(duì)過(guò)程效度進(jìn)行了初步探討。這些研究主要采用項(xiàng)目反應(yīng)理論的等級(jí)反應(yīng)模型(Grade Response Model)、一般分步評(píng)分模型(Generalized Partial Rating Model)等多級(jí)計(jì)分方法探討照料者參與性評(píng)量表和幼兒學(xué)習(xí)環(huán)境評(píng)量表的過(guò)程效度?!?7-39〕過(guò)程效度之所以被忽略,一方面可能是因?yàn)檫^(guò)程效度的分析方法還不夠簡(jiǎn)便和大眾化;另一方面則是因?yàn)檫^(guò)程效度概念本身還未引起足夠的重視。

    在評(píng)價(jià)結(jié)果解釋和應(yīng)用的有效性方面,美國(guó)的質(zhì)量評(píng)價(jià)和提升系統(tǒng)(Quality Rating and Imp?

    roving System)不僅涉及不同的評(píng)價(jià)工具,同時(shí)還對(duì)來(lái)自不同地區(qū)和不同文化背景的幼兒園進(jìn)行評(píng)價(jià)和比較,為學(xué)前教育政策制定和質(zhì)量提升提供參考。〔40〕國(guó)內(nèi)也有對(duì)來(lái)自全國(guó)各地區(qū)各類(lèi)不同樣態(tài)的幼兒園進(jìn)行學(xué)前教育質(zhì)量和幼兒園課程質(zhì)量的比較工作。〔41-43〕以上都是對(duì)測(cè)評(píng)結(jié)果解釋和應(yīng)用的宏觀關(guān)注,具體針對(duì)某所幼兒園或某個(gè)班級(jí)質(zhì)量評(píng)價(jià)結(jié)果的診斷性解釋以及用于改進(jìn)和提升保育教育質(zhì)量的應(yīng)用,還有待實(shí)踐的深入探索。

    三、學(xué)前教育質(zhì)量評(píng)價(jià)的公平性及研究進(jìn)展

    1.學(xué)前教育質(zhì)量評(píng)價(jià)的公平性

    公平性指測(cè)試對(duì)所有預(yù)測(cè)個(gè)體具有相同的結(jié)構(gòu)和意義?!?4〕學(xué)前教育質(zhì)量評(píng)價(jià)的公平性是指評(píng)價(jià)的結(jié)構(gòu)和意義不會(huì)隨著參評(píng)幼兒園的類(lèi)型或所在地等的不同而發(fā)生變化。即無(wú)論是具有不同的類(lèi)型特征還是來(lái)自不同的群組,最終都有相同的質(zhì)量評(píng)價(jià)結(jié)構(gòu)和意義?;跍y(cè)量標(biāo)準(zhǔn)對(duì)公平性的界定,學(xué)前教育質(zhì)量評(píng)價(jià)的公平性主要包含以下四個(gè)方面:評(píng)價(jià)過(guò)程的公平性;沒(méi)有評(píng)價(jià)偏差;評(píng)價(jià)結(jié)構(gòu)的公平性;評(píng)價(jià)結(jié)果解釋的有效性。

    具體而言,評(píng)價(jià)過(guò)程的公平性指在評(píng)價(jià)內(nèi)容的設(shè)計(jì)、開(kāi)發(fā)和管理,乃至評(píng)價(jià)流程和賦分規(guī)則等方面,都要最大限度地減少對(duì)測(cè)評(píng)結(jié)果解釋有效性的影響。因此,在學(xué)前教育質(zhì)量評(píng)價(jià)標(biāo)準(zhǔn)的開(kāi)發(fā)和應(yīng)用中,要明確說(shuō)明評(píng)價(jià)結(jié)果的有效性解釋?zhuān)⒔缍▍⒃u(píng)幼兒園的個(gè)體和群體特征,如幼兒園規(guī)模、幼兒園辦園性質(zhì)和幼兒園所在地(城鎮(zhèn)和鄉(xiāng)村)等,以減少這些特征和群組變量對(duì)評(píng)價(jià)公平性的影響。公平性意味著沒(méi)有測(cè)評(píng)偏差,是學(xué)前教育質(zhì)量評(píng)價(jià)結(jié)果有效性解釋的基本保障。然而,實(shí)踐中無(wú)法完全消除測(cè)評(píng)偏差,通常是將偏差大小界定在可接受的范圍內(nèi)。學(xué)前教育質(zhì)量評(píng)價(jià)測(cè)評(píng)內(nèi)容的潛在結(jié)構(gòu)主要包含結(jié)構(gòu)性和過(guò)程性質(zhì)量?!?5〕評(píng)價(jià)結(jié)構(gòu)的公平性指確保該結(jié)構(gòu)對(duì)所有參評(píng)幼兒園是相同的。公平性還包含測(cè)評(píng)結(jié)果解釋的有效性。為保障學(xué)前教育質(zhì)量評(píng)價(jià)的公平性,評(píng)價(jià)開(kāi)發(fā)人員和研究者還需收集和提供支持評(píng)價(jià)公平性的相關(guān)依據(jù),并根據(jù)評(píng)價(jià)本身的局限性明確表達(dá)評(píng)價(jià)結(jié)果的預(yù)期解釋和用途。由于評(píng)價(jià)項(xiàng)目或指標(biāo)編制的有限性以及評(píng)價(jià)方法和流程本身的局限性等,評(píng)價(jià)的公平性會(huì)因此受到影響。如學(xué)前教育質(zhì)量評(píng)價(jià)通常采用觀察法,評(píng)價(jià)結(jié)果中往往都存在評(píng)價(jià)者的主觀性,因而對(duì)評(píng)價(jià)結(jié)果的解釋和應(yīng)用都需綜合且慎重考慮這些因素??梢?jiàn),測(cè)評(píng)結(jié)果解釋的有效性主要強(qiáng)調(diào)對(duì)測(cè)評(píng)工具、人員和過(guò)程等進(jìn)行基本的公平性支持,以保障效度探討中提及的測(cè)評(píng)結(jié)果解釋和應(yīng)用的有效性。

    2.學(xué)前教育質(zhì)量評(píng)價(jià)公平性的研究進(jìn)展

    學(xué)前教育質(zhì)量評(píng)價(jià)的公平性目前還未引起廣泛關(guān)注,相應(yīng)的研究探索也未真正起步。盡管如此,研究者在編制和開(kāi)發(fā)評(píng)價(jià)內(nèi)容時(shí),對(duì)測(cè)評(píng)內(nèi)容的界定和應(yīng)用范疇的考量以及說(shuō)明均關(guān)注了評(píng)價(jià)過(guò)程的公平性。如各量表手冊(cè)的操作說(shuō)明等都附有詳細(xì)的指標(biāo)解讀或賦分說(shuō)明,有些還標(biāo)注了不適用的指標(biāo)或項(xiàng)目等?!?6,47〕另外,在有關(guān)測(cè)評(píng)結(jié)構(gòu)的公平性方面,有研究針對(duì)不同類(lèi)型幼兒園(如城市和鄉(xiāng)村幼兒園)的測(cè)評(píng)潛在結(jié)構(gòu)進(jìn)行了討論。與已有研究結(jié)果一致,不同類(lèi)型的學(xué)前教育質(zhì)量評(píng)價(jià)具有相同的潛在結(jié)構(gòu)?!?8〕在測(cè)評(píng)結(jié)果解釋的有效性方面,如美國(guó)的質(zhì)量評(píng)價(jià)和提升系統(tǒng)在兩個(gè)不同的州展開(kāi)質(zhì)量測(cè)評(píng),在測(cè)評(píng)標(biāo)準(zhǔn)和流程、參與者和政策決策者等方面提出測(cè)評(píng)建議,即提供測(cè)評(píng)公平性的信息依據(jù)和支持,以最終保障測(cè)評(píng)結(jié)果解釋的有效性?!?9〕而在有關(guān)測(cè)評(píng)偏差的公平性上,已有文獻(xiàn)還鮮有報(bào)告。這不僅表明學(xué)前教育質(zhì)量評(píng)價(jià)的公平性還有大量空白有待探索,也從另一角度說(shuō)明學(xué)前教育質(zhì)量評(píng)價(jià)的科學(xué)性還需公平性方面的補(bǔ)充和鞏固。

    四、學(xué)前教育質(zhì)量評(píng)價(jià)三個(gè)測(cè)量學(xué)屬性間的相互關(guān)系

    信度、效度和公平性三個(gè)測(cè)量學(xué)屬性間存在相互制約、相輔相成的關(guān)系。首先,良好的信度是評(píng)價(jià)有效性的前提。學(xué)前教育質(zhì)量評(píng)價(jià)的信度包含評(píng)價(jià)內(nèi)容的可信性和評(píng)價(jià)過(guò)程的可信性。評(píng)價(jià)過(guò)程的可信性主要指由評(píng)價(jià)者的主觀評(píng)價(jià)造成的評(píng)價(jià)誤差。因而,減少評(píng)價(jià)誤差和提高評(píng)價(jià)者信度是提高學(xué)前教育質(zhì)量評(píng)價(jià)信度和效度的重要舉措。反過(guò)來(lái),學(xué)前教育質(zhì)量評(píng)價(jià)的效度也會(huì)影響其信度,評(píng)價(jià)效度高意味著評(píng)價(jià)結(jié)果信度越高。

    其次,學(xué)前教育質(zhì)量評(píng)價(jià)的效度是公平性的重要前提,同時(shí)公平性又是評(píng)價(jià)效度的重要體現(xiàn)。學(xué)前教育質(zhì)量評(píng)價(jià)的效度不僅指評(píng)價(jià)內(nèi)容、評(píng)價(jià)過(guò)程和其他變量關(guān)系的有效性,還包含評(píng)價(jià)結(jié)構(gòu)和評(píng)價(jià)結(jié)果解釋的有效性等。而測(cè)評(píng)同結(jié)構(gòu)性和評(píng)價(jià)結(jié)果解釋的有效性也是評(píng)價(jià)公平性的重要內(nèi)涵。因此,學(xué)前教育質(zhì)量評(píng)價(jià)的效度與公平性相輔相成,相互影響。

    最后,信度和公平性之間也會(huì)互相影響。一方面,學(xué)前教育質(zhì)量評(píng)價(jià)的信度是測(cè)評(píng)同結(jié)構(gòu)性和評(píng)價(jià)結(jié)果解釋有效性的重要前提。評(píng)價(jià)的信度低將直接影響評(píng)價(jià)結(jié)構(gòu)和評(píng)價(jià)結(jié)果解釋的有效性。與此同時(shí),信度也是減少測(cè)評(píng)偏差的重要基礎(chǔ)。隨著評(píng)價(jià)內(nèi)容和評(píng)價(jià)者信度的提高或評(píng)價(jià)誤差的減少,質(zhì)量評(píng)價(jià)的公平性會(huì)有所增強(qiáng)。另一方面,學(xué)前教育質(zhì)量評(píng)價(jià)的公平性也會(huì)影響其信度。公平性高意味著評(píng)價(jià)內(nèi)容、評(píng)價(jià)過(guò)程和評(píng)價(jià)技術(shù)等的可信性和有效性高,測(cè)評(píng)偏差比較小,間接表明測(cè)評(píng)信度高(見(jiàn)圖1)。

    只有同時(shí)提高信度、效度和公平性才能真正保障保教質(zhì)量評(píng)價(jià)的科學(xué)性和權(quán)威性,才能為學(xué)前教育質(zhì)量提升提供堅(jiān)實(shí)的測(cè)量學(xué)依據(jù)。

    五、學(xué)前教育質(zhì)量評(píng)價(jià)測(cè)量學(xué)屬性的研究展望

    1.學(xué)前教育質(zhì)量評(píng)價(jià)信度的研究展望

    信度的估計(jì)通常采用內(nèi)部一致性系數(shù)或概化系數(shù),由于這兩種分析和估計(jì)信度的方法都基于經(jīng)典測(cè)量理論(CTT),所以存在著信度估計(jì)值隨著樣本量而發(fā)生變化的問(wèn)題。而這會(huì)給評(píng)價(jià)工具或標(biāo)準(zhǔn)的使用帶來(lái)不小的挑戰(zhàn)。首先,每次使用都要估計(jì)信度大小,尤其是當(dāng)樣本量不夠大或針對(duì)單所幼兒園評(píng)價(jià)時(shí),基于經(jīng)典測(cè)量理論的方法就顯得十分有限。其次,內(nèi)部一致性系數(shù)或概化系數(shù)都基于總量表或其中的子量表,無(wú)法估計(jì)某個(gè)具體的評(píng)價(jià)項(xiàng)目或指標(biāo)的可信性,難以為評(píng)價(jià)項(xiàng)目或標(biāo)準(zhǔn)的修訂和規(guī)范提供詳細(xì)的信度信息。學(xué)前教育質(zhì)量評(píng)價(jià)中評(píng)價(jià)者信度受到越來(lái)越多的關(guān)注,如評(píng)價(jià)者一致性百分比或評(píng)價(jià)結(jié)果的相關(guān)系數(shù)常常用于報(bào)告評(píng)價(jià)者間的一致性。嚴(yán)格來(lái)說(shuō),這些方法都無(wú)法準(zhǔn)確評(píng)估評(píng)價(jià)者信度,只能統(tǒng)計(jì)評(píng)價(jià)者間的一致性,而評(píng)價(jià)者間的一致性和評(píng)價(jià)者信度是兩個(gè)完全不同的概念。

    近年來(lái),項(xiàng)目反應(yīng)理論在學(xué)前教育質(zhì)量評(píng)價(jià)屬性分析中的應(yīng)用逐漸增多。這不僅為某個(gè)具體項(xiàng)目或指標(biāo)的信度估計(jì)提供了可實(shí)現(xiàn)的方法和技術(shù),也為估計(jì)評(píng)價(jià)者信度提供了相應(yīng)的方法和技術(shù)。但是,已有研究主要是用參數(shù)方法進(jìn)行分析,并且都需要建立在很強(qiáng)的數(shù)學(xué)假設(shè)前提下。不同于參數(shù)方法需要建立于強(qiáng)假設(shè),非參數(shù)方法假設(shè)弱,且適合于小樣本等情況,用于分析學(xué)前教育質(zhì)量評(píng)價(jià)的信度或是將來(lái)更合適的選擇。

    2.學(xué)前教育質(zhì)量評(píng)價(jià)效度的研究展望

    內(nèi)容效度、結(jié)構(gòu)效度和實(shí)證效度以及與其他變量的關(guān)系等是目前學(xué)前教育質(zhì)量評(píng)價(jià)效度研究的主要內(nèi)容。未來(lái)可以考慮不同領(lǐng)域或方向的研究者對(duì)內(nèi)容效度的理解與思考,為內(nèi)容效度的取證提供更充實(shí)的測(cè)量學(xué)依據(jù)。

    在討論學(xué)前教育質(zhì)量評(píng)價(jià)的內(nèi)在結(jié)構(gòu)效度時(shí),已有研究常常采用探索性因素法(EFA)和驗(yàn)證性因素法(CFA)。與信度估計(jì)方法相同,這些方法都是基于經(jīng)典測(cè)量理論。因而,同樣存在著依賴(lài)隨機(jī)抽樣和無(wú)法適應(yīng)樣本量小的實(shí)際應(yīng)用情景問(wèn)題。另外,探索性因素法方法在公因子抽取個(gè)數(shù)和命名中存在一定的主觀色彩,也是學(xué)前教育質(zhì)量評(píng)價(jià)的內(nèi)在結(jié)構(gòu)目前還存在其他觀點(diǎn)的主要原因。未來(lái)在探索內(nèi)在結(jié)構(gòu)方面可以嘗試其他方法,如探索性因素法和項(xiàng)目反應(yīng)理論相結(jié)合的全息項(xiàng)目因素分析(FIFA)。更重要的是未來(lái)需結(jié)合中國(guó)文化背景和中國(guó)幼兒園保育教育特點(diǎn),構(gòu)建具有中國(guó)文化特色的學(xué)前教育質(zhì)量?jī)?nèi)在結(jié)構(gòu)。

    與其他變量的關(guān)系是學(xué)前教育質(zhì)量評(píng)價(jià)效度研究的重點(diǎn)。如前文所述,已有的大量討論均集中在保育教育質(zhì)量與兒童發(fā)展,如語(yǔ)言、數(shù)學(xué)和情感社會(huì)性等方面的關(guān)系。依據(jù)兒童發(fā)展的生態(tài)觀,未來(lái)在討論時(shí)可適當(dāng)兼顧其他變量,如家庭結(jié)構(gòu)、家庭經(jīng)濟(jì)收入以及社區(qū)環(huán)境等對(duì)兒童發(fā)展的影響。與此同時(shí),還需關(guān)注到學(xué)前教育質(zhì)量對(duì)兒童發(fā)展的長(zhǎng)期影響和效應(yīng),即追蹤探索。另外,在方法上基于項(xiàng)目反應(yīng)理論展開(kāi)學(xué)前教育質(zhì)量和兒童發(fā)展的長(zhǎng)期追蹤與監(jiān)測(cè)或是未來(lái)的一大趨勢(shì)。

    學(xué)前教育質(zhì)量評(píng)價(jià)的效度研究雖然有大量的實(shí)證支持,但這些取證主要來(lái)自?xún)?nèi)容效度和結(jié)構(gòu)效度,而在評(píng)價(jià)過(guò)程和結(jié)果解釋的有效性上仍存在大量空白。未來(lái),評(píng)價(jià)過(guò)程的有效性,尤其是評(píng)價(jià)者的有效性或許是學(xué)前教育質(zhì)量評(píng)價(jià)測(cè)量學(xué)屬性研究的重點(diǎn)之一。這將為學(xué)前教育質(zhì)量評(píng)價(jià)評(píng)委庫(kù)的建立和培訓(xùn)等提供測(cè)量學(xué)屬性參考。對(duì)評(píng)價(jià)結(jié)果的有效解釋和應(yīng)用通常是學(xué)前教育質(zhì)量評(píng)價(jià)容易被忽略的環(huán)節(jié)。因此,如何通過(guò)解釋評(píng)價(jià)結(jié)果促進(jìn)學(xué)前教育質(zhì)量不斷改進(jìn)和提升,是效度研究即將面臨的一大挑戰(zhàn)。

    3.學(xué)前教育質(zhì)量評(píng)價(jià)公平性的研究展望

    縱觀已有文獻(xiàn),學(xué)前教育質(zhì)量評(píng)價(jià)的公平性探索剛剛起步。未來(lái)一段時(shí)間內(nèi),基于測(cè)量學(xué)視角探討公平性將是學(xué)前教育質(zhì)量評(píng)價(jià)測(cè)量學(xué)屬性研究的重要內(nèi)容。這些研究將會(huì)聚焦于以下幾個(gè)方面。首先是基于測(cè)量學(xué)的學(xué)前教育質(zhì)量評(píng)價(jià)公平性的界定,包括對(duì)評(píng)價(jià)內(nèi)容、評(píng)價(jià)方法、評(píng)價(jià)過(guò)程和結(jié)果等的公平性界定。其次是衡量公平性大小的分析方法。目前,已有分析方法主要圍繞評(píng)價(jià)項(xiàng)目或指標(biāo)、評(píng)價(jià)量表和評(píng)價(jià)者三個(gè)不同方面對(duì)測(cè)評(píng)偏差進(jìn)行分析。例如,項(xiàng)目功能差異(Different Item Function)檢驗(yàn)方法針對(duì)測(cè)評(píng)項(xiàng)目的功能性差異進(jìn)行檢驗(yàn),而測(cè)驗(yàn)功能性差異(Different Testing Function)和評(píng)價(jià)者功能性差異(Different Rater Function)則針對(duì)量表和評(píng)價(jià)者的公平性進(jìn)行檢驗(yàn)。未來(lái),這些不同角度的分析方法將是探討學(xué)前教育質(zhì)量評(píng)價(jià)公平性的基本思路和技術(shù)。再次,測(cè)評(píng)內(nèi)在結(jié)構(gòu)對(duì)所有測(cè)評(píng)對(duì)象的同一性不僅是學(xué)前教育質(zhì)量評(píng)價(jià)效度研究的主要內(nèi)容,也是公平性的主要表征。消除測(cè)評(píng)對(duì)象如幼兒園的特征變量和組群變量的影響,提高測(cè)評(píng)的公平性也是未來(lái)公平性屬性研究的主要方向。最后,相同評(píng)價(jià)結(jié)果解釋的有效性是公平性的重要保障,如何有效、公平地解釋和應(yīng)用評(píng)價(jià)結(jié)果將是學(xué)前教育質(zhì)量評(píng)價(jià)未來(lái)不可或缺的內(nèi)容。

    參考文獻(xiàn):

    〔1〕〔23〕〔44〕ASSOCIATION,A. E.Standards for educational and psychological testing〔M〕.Washing,DC:American Educational Research Association,2018:11-50.

    〔2〕〔17〕CHEN D,HU B Y,F(xiàn)AN X,et al.Measurement quality of the Chinese Early Childhood Program Rating Scale:An investigation using multivariate generalizability theory〔J〕.Journal of Psychoeducational Assessment,2014,32(3):236-248.

    〔3〕〔22〕陳德枝,秦金亮,李克建.托幼機(jī)構(gòu)教育質(zhì)量評(píng)價(jià)中評(píng)委偏差的多側(cè)面 Rasch 分析 〔J〕.心理科學(xué),2016,39(3):628-636.

    〔4〕ENGELHARD JR G,WIND S A.Introduction to the special issue on rater?mediated assessments〔J〕. Journal of Educational Measurement,2019,56(3):475-477.

    〔5〕WIND S A.Examining the impacts of rater effects in performance assessments 〔J〕.Applied Psychological Measurement,2019,43(2):159-171.

    〔6〕〔18〕〔24〕〔33〕LI K,ZHANG P,HU B Y,et al.Testing the ‘thresholds’ of preschool education quality on child outcomes in China〔J〕.Early Childhood Research Quarterly,2019(47):445-456.

    〔7〕劉焱,潘月娟.《幼兒園教育環(huán)境質(zhì)量評(píng)價(jià)量表》的特點(diǎn)、結(jié)構(gòu)和信效度檢驗(yàn) 〔J〕.學(xué)前教育研究,2008(6):60-64.

    〔8〕中央教育科學(xué)研究所學(xué)前教育研究室.幼兒園教育質(zhì)量評(píng)價(jià)手冊(cè) 〔M〕.北京:教育科學(xué)出版社,2009.

    〔9〕〔19〕陳德枝,李克建,周兢.《走向優(yōu)質(zhì)——中國(guó)幼兒園教育質(zhì)量評(píng)價(jià)標(biāo)準(zhǔn)》的測(cè)量學(xué)屬性分析:基于我國(guó)100所幼兒園與1670名兒童的測(cè)評(píng)數(shù)據(jù) 〔J〕.學(xué)前教育研究,2021(1):3-16.

    〔10〕〔20〕SAKAI L M,WHITEBOOK M,WISHARD A,et al.Evaluating the Early Childhood Environment Rating Scale (ECERS):Assessing differences between the first and revised edition〔J〕.Early Childhood Research Quarterly,2003,18(4):427-445.

    〔11〕〔21〕〔31〕PERLMAN M,ZELLMAN G L,LE V?N.Examining the psychometric properties of the early childhood environment rating scale?revised (ECERS?R)〔J〕.Early Childhood Research Quarterly,2004,19(3):398-412.

    〔12〕PIANTA R C P K,HAMRE B K.Classroom assessment scoring system:Manual K?3〔M〕.Baltimore:Paul H Brookes Publishing,2008.

    〔13〕〔34〕〔37〕VERNON?FEAGANS L,MOKROVA I L,CARR R C,et al.Cumulative years of classroom quality from kindergarten to third grade:Prediction to children’s third grade literacy skills〔J〕.Early Childhood Research Quarterly,2019(47):531-540.

    〔14〕〔25〕COLWELL N,GORDON R A,F(xiàn)UJIMOTO K,et al.New evidence on the validity of the Arnett Caregiver Interaction Scale:Results from the early childhood longitudinal study?birth cohort 〔J〕.Early Childhood Research Quarterly,2013,28(2):218-233.

    〔15〕〔26〕FORM A.Infant?toddler program quality assessment〔M〕.Michigan:HighScope Press,2011.

    〔16〕〔27〕HOWARD S J,SIRAJ I,MELHUISH E C,et al.Measuring interactional quality in pre?school settings:Introduction and validation of the Sustained Shared Thinking and Emotional Wellbeing (SSTEW) scale〔J〕.Early Child Development and Care,2020,190(7):1017-1030.

    〔28〕〔38〕GORDON R A,HOFER K G,F(xiàn)UJIMOTO K A,et al.Identifying high?quality preschool programs:New evidence on the validity of the Early Childhood Environment Rating Scale?Revised (ECERS?R) in relation to school readiness goals〔J〕.Early Education and Development,2015,26(8):1086-1110.

    〔29〕〔32〕HUANG R,SIRAJ I.Profiles of Chinese pres?

    choolers’ academic and social?emotional development in relation to classroom quality:A multilevel latent profile approach 〔J〕.Child Development,2023,94(4):1002-1016.

    〔30〕〔45〕CASSIDY D J,HESTENES L L,HANSEN J K,et al.Revisiting the two faces of child care quality:Structure and process〔J〕.Early Education and Development,2005,16(4):505-520.

    〔35〕李琳,范潔瓊,任麗欣.幼兒園班級(jí)質(zhì)量追蹤評(píng)估與改進(jìn)探索:以上海市12所幼兒園20個(gè)班級(jí)3年追蹤評(píng)估為例 〔J〕.幼兒教育(教育科學(xué)),2022,915/916(7/8):20-26.

    〔36〕李琳,李孜佳,范潔瓊,等.幼兒園教育質(zhì)量對(duì)兒童發(fā)展增值的影響 〔J〕.學(xué)前教育研究,2021(4):31-47.

    〔39〕KIRBY G,CARONONGAN P,MALONE L M,et al.What do quality rating levels mean:Examining the implementation of QRIS ratings to inform validation〔J〕.Early Childhood Research Quarterly,2015(30):291-305.

    〔40〕CONNORS M C,MORRIS P A.Comparing state policy approaches to early care and education quality:A multidimensional assessment of quality rating and improvement systems and child care licensing regulations〔J〕.Early Childhood Research Quarterly,2015(30):266-279.

    〔41〕劉穎,虞永平.我國(guó)幼兒園管理質(zhì)量的現(xiàn)狀,類(lèi)別及其影響因素:基于潛在剖面分析的結(jié)果〔J〕.學(xué)前教育研究,2021(1):12.

    〔42〕原晉霞.我國(guó)幼兒園課程質(zhì)量現(xiàn)狀探索與提升建議 〔J〕.學(xué)前教育研究,2021(1):43-56.

    〔43〕吳瓊.我國(guó)幼兒園師資保障質(zhì)量評(píng)估與提升策略 〔J〕.學(xué)前教育研究,2021(1):57-66.

    〔46〕SYLVA K,TAGGART B.ECERS?E:The four curricular subscales extension to the early childhood environment rating scale (ECERS?R)〔M〕.New York:Teachers College Press,2010.

    〔47〕LI K,HU B Y,PAN Y,et al.Chinese Early Childhood Environment Rating Scale (trial) (CECERS):A validity study〔J〕.Early Childhood Research Quarterly,2014,29(3):268-282.

    〔48〕WOLF S,RAZA M,KIM S,et al.Measuring and predicting process quality in Ghanaian pre-primary classrooms using the Teacher Instructional Practices and Processes System (TIPPS) 〔J〕.Early Childhood Research Quarterly,2018(45):18-30.

    〔49〕LAHTI M,ELICKER J,ZELLMAN G,et al.Approaches to validating child care quality rating and improvement systems(QRIS):Results from two states with similar QRIS type designs 〔J〕.Early Childhood Research Quarterly,2015(30):280-290.

    Deeply Interpreting the Reliability, Validity, and Fairness of Preschool Education Quality Assessment: Based on the Education and Psychological Measurement Standards

    Chen Dezhi

    (College of Children Development and Education, Zhejiang Normal University, Hangzhou, Zhejiang, 311231)

    【Abstract】Reliability, validity, and fairness are the three fundamental attributes of quality assessment in preschool education. This article explores the basic connotations of these attributes, as outlined in the Education and Psychological Measurement Standards, and combines them with the unique characteristics of preschool education quality assessment. We provide an in?depth discussion of the reliability, validity, and fairness of preschool education quality assessment, as well as the interrelationships among them. Additionally, we highlight the main directions and methods for exploring reliability, validity, and fairness in future research, based on the current progress in the measurement attributes of preschool education quality assessment.

    【Keywords】preschool education quality assessment; reliability; validity; fairness

    *本文為浙江省教育考試院“十四五”規(guī)劃課題“基于評(píng)分者介導(dǎo)式評(píng)價(jià)IRT模型的學(xué)前教育質(zhì)量評(píng)價(jià)的測(cè)量學(xué)研究”(課題編號(hào):ZJEEA14529)和浙江省哲學(xué)社會(huì)科學(xué)規(guī)劃重點(diǎn)課題“基于認(rèn)知診斷的幼兒教師隱性知識(shí)的情景判斷性測(cè)驗(yàn)研究”(課題編號(hào):20NDJC07Z)的研究成果之一。

    **通信作者:陳德枝,浙江師范大學(xué)兒童發(fā)展與教育學(xué)院副教授,電子郵箱:cdezhi@zjnu.cn

    猜你喜歡
    公平性效度信度
    《廣東地區(qū)兒童中醫(yī)體質(zhì)辨識(shí)量表》的信度和效度研究
    慈善募捐規(guī)制中的國(guó)家與社會(huì):兼論《慈善法》的效度和限度
    一種提高TCP與UDP數(shù)據(jù)流公平性的擁塞控制機(jī)制
    公平性問(wèn)題例談
    科技成果評(píng)價(jià)的信度分析及模型優(yōu)化
    體育社會(huì)調(diào)查問(wèn)卷信度檢驗(yàn)的方法學(xué)探索——基于中文核心體育期刊163篇文章分析
    被看重感指數(shù)在中國(guó)大學(xué)生中的構(gòu)念效度
    關(guān)于公平性的思考
    外語(yǔ)形成性評(píng)估的效度驗(yàn)證框架
    中文版腦性癱瘓兒童生活質(zhì)量問(wèn)卷的信度
    最近在线观看免费完整版| 午夜影院日韩av| 中文字幕精品亚洲无线码一区| av中文乱码字幕在线| 99久久精品一区二区三区| 老司机福利观看| 美女高潮的动态| 春色校园在线视频观看| 亚洲精品一区av在线观看| 老师上课跳d突然被开到最大视频| 好男人在线观看高清免费视频| 男人的好看免费观看在线视频| 性欧美人与动物交配| 成年免费大片在线观看| 麻豆成人午夜福利视频| 亚洲av成人av| 国产女主播在线喷水免费视频网站 | 69av精品久久久久久| 美女cb高潮喷水在线观看| 成熟少妇高潮喷水视频| 欧美人与善性xxx| 又粗又爽又猛毛片免费看| 波多野结衣高清作品| 亚洲黑人精品在线| 久久午夜亚洲精品久久| 啪啪无遮挡十八禁网站| 我要看日韩黄色一级片| 国产私拍福利视频在线观看| 国产高潮美女av| 亚洲第一区二区三区不卡| 免费无遮挡裸体视频| 又黄又爽又免费观看的视频| 午夜福利高清视频| 大型黄色视频在线免费观看| 天堂av国产一区二区熟女人妻| 亚洲七黄色美女视频| 三级国产精品欧美在线观看| 免费无遮挡裸体视频| 熟妇人妻久久中文字幕3abv| 欧美bdsm另类| 免费大片18禁| 一区二区三区免费毛片| 久久亚洲真实| 久久精品人妻少妇| 免费一级毛片在线播放高清视频| 国产精品一区www在线观看 | 夜夜爽天天搞| 亚洲最大成人av| 99热这里只有是精品50| 69人妻影院| 国产真实伦视频高清在线观看 | 国产三级中文精品| 一区福利在线观看| 亚洲成人中文字幕在线播放| 欧美精品啪啪一区二区三区| 日韩亚洲欧美综合| 亚洲自偷自拍三级| 夜夜看夜夜爽夜夜摸| 91狼人影院| 久久香蕉精品热| 麻豆久久精品国产亚洲av| 在线观看66精品国产| 给我免费播放毛片高清在线观看| 国产精品,欧美在线| 精品一区二区三区人妻视频| 精品久久久久久久久久久久久| 日韩欧美在线二视频| 亚洲在线自拍视频| 精品久久久噜噜| 午夜精品在线福利| 五月玫瑰六月丁香| 中文字幕av成人在线电影| 中文字幕高清在线视频| 色视频www国产| 欧美色欧美亚洲另类二区| 蜜桃亚洲精品一区二区三区| 日本撒尿小便嘘嘘汇集6| 中亚洲国语对白在线视频| 精品久久久久久久久亚洲 | 身体一侧抽搐| 国产大屁股一区二区在线视频| 国产美女午夜福利| а√天堂www在线а√下载| 亚洲精华国产精华精| 嫩草影院新地址| 最近在线观看免费完整版| av视频在线观看入口| 一a级毛片在线观看| 国语自产精品视频在线第100页| 亚洲人成网站高清观看| 色视频www国产| 亚洲图色成人| 欧美高清成人免费视频www| av专区在线播放| 极品教师在线视频| 中亚洲国语对白在线视频| 搡女人真爽免费视频火全软件 | 午夜免费激情av| 男人和女人高潮做爰伦理| 如何舔出高潮| 午夜日韩欧美国产| 精品久久久久久久人妻蜜臀av| 亚洲天堂国产精品一区在线| 欧美成人a在线观看| 国产高清视频在线观看网站| 精品久久久久久,| 欧美一区二区精品小视频在线| 国产精品99久久久久久久久| 久久久久免费精品人妻一区二区| 在线天堂最新版资源| 女同久久另类99精品国产91| 亚洲国产日韩欧美精品在线观看| 女人被狂操c到高潮| 久久久久久大精品| 久久精品国产亚洲av香蕉五月| 日韩欧美国产一区二区入口| 日韩中文字幕欧美一区二区| 91午夜精品亚洲一区二区三区 | 亚洲人成网站在线播| 蜜桃亚洲精品一区二区三区| 亚洲一区高清亚洲精品| 舔av片在线| 国产私拍福利视频在线观看| 精品久久久久久,| 无遮挡黄片免费观看| 日韩精品青青久久久久久| 麻豆久久精品国产亚洲av| 国产蜜桃级精品一区二区三区| 在线观看美女被高潮喷水网站| 久久久久国内视频| 直男gayav资源| 国产精品一区二区免费欧美| 中出人妻视频一区二区| 嫩草影院新地址| 亚洲av日韩精品久久久久久密| 日韩中字成人| 22中文网久久字幕| 国产精品久久久久久亚洲av鲁大| 色哟哟哟哟哟哟| 久久热精品热| 亚洲av中文字字幕乱码综合| 亚洲精品久久国产高清桃花| 日日干狠狠操夜夜爽| 精品久久久久久久久av| 亚洲av免费在线观看| 狠狠狠狠99中文字幕| 少妇人妻精品综合一区二区 | 国产女主播在线喷水免费视频网站 | 亚洲真实伦在线观看| 一个人看视频在线观看www免费| 一个人看的www免费观看视频| 午夜福利高清视频| 国产真实伦视频高清在线观看 | 精品午夜福利在线看| 亚洲自拍偷在线| 在线播放无遮挡| 亚洲在线观看片| 淫妇啪啪啪对白视频| 人人妻人人看人人澡| 日日摸夜夜添夜夜添小说| aaaaa片日本免费| 好男人在线观看高清免费视频| 日韩av在线大香蕉| 成人特级av手机在线观看| 亚洲熟妇熟女久久| 一边摸一边抽搐一进一小说| 51国产日韩欧美| 久久99热6这里只有精品| 美女 人体艺术 gogo| 夜夜夜夜夜久久久久| 午夜亚洲福利在线播放| 欧美日韩精品成人综合77777| 性欧美人与动物交配| 一区二区三区四区激情视频 | 中文字幕久久专区| av天堂中文字幕网| 午夜福利高清视频| av中文乱码字幕在线| 国产精品免费一区二区三区在线| 精品人妻视频免费看| 在线天堂最新版资源| 久久久久久久久中文| 中文字幕高清在线视频| 一本精品99久久精品77| 搡老熟女国产l中国老女人| 久久精品夜夜夜夜夜久久蜜豆| 日本爱情动作片www.在线观看 | 制服丝袜大香蕉在线| 久久精品国产亚洲av香蕉五月| 三级国产精品欧美在线观看| 级片在线观看| 九九爱精品视频在线观看| 一级av片app| 热99re8久久精品国产| 又爽又黄无遮挡网站| 小蜜桃在线观看免费完整版高清| 精华霜和精华液先用哪个| 男女之事视频高清在线观看| xxxwww97欧美| 91麻豆av在线| 色视频www国产| 成人av在线播放网站| 美女cb高潮喷水在线观看| 99riav亚洲国产免费| 久久久久九九精品影院| 亚洲精品久久国产高清桃花| 春色校园在线视频观看| 亚洲av成人精品一区久久| 国产午夜福利久久久久久| 久久久成人免费电影| 一本久久中文字幕| 国产精品一区www在线观看 | 99九九线精品视频在线观看视频| 亚洲av成人av| 国产精品国产三级国产av玫瑰| АⅤ资源中文在线天堂| 国产私拍福利视频在线观看| 岛国在线免费视频观看| 高清在线国产一区| 亚洲,欧美,日韩| 亚洲精品色激情综合| 中文字幕熟女人妻在线| 91久久精品国产一区二区三区| 少妇的逼好多水| 日日撸夜夜添| 国产一区二区三区视频了| 精品人妻偷拍中文字幕| 亚洲一区二区三区色噜噜| 国产亚洲精品久久久久久毛片| 黄片wwwwww| 久99久视频精品免费| 国产色婷婷99| av中文乱码字幕在线| 九九久久精品国产亚洲av麻豆| 一夜夜www| 午夜精品在线福利| 婷婷丁香在线五月| 91精品国产九色| 淫秽高清视频在线观看| 听说在线观看完整版免费高清| 淫秽高清视频在线观看| 免费大片18禁| 99riav亚洲国产免费| 久9热在线精品视频| 亚洲人成网站在线播| 十八禁国产超污无遮挡网站| 欧美bdsm另类| 在现免费观看毛片| 赤兔流量卡办理| 免费电影在线观看免费观看| 亚洲欧美日韩高清专用| av黄色大香蕉| 国内精品一区二区在线观看| 亚洲美女黄片视频| 午夜免费男女啪啪视频观看 | 黄色配什么色好看| 91狼人影院| 亚洲avbb在线观看| 久久久精品大字幕| 看黄色毛片网站| 国产毛片a区久久久久| 久久99热这里只有精品18| 99国产精品一区二区蜜桃av| 成人美女网站在线观看视频| 久久欧美精品欧美久久欧美| 亚洲aⅴ乱码一区二区在线播放| 亚洲第一电影网av| 国产成人a区在线观看| 成人综合一区亚洲| 内射极品少妇av片p| 亚洲中文字幕日韩| 91在线观看av| 午夜亚洲福利在线播放| 国产一区二区在线av高清观看| 黄色女人牲交| 国产主播在线观看一区二区| 国产精品免费一区二区三区在线| 午夜老司机福利剧场| 久久精品国产亚洲网站| 三级毛片av免费| 男人的好看免费观看在线视频| 男人的好看免费观看在线视频| 午夜老司机福利剧场| 一本一本综合久久| 精品人妻熟女av久视频| 女人被狂操c到高潮| 99久久九九国产精品国产免费| 欧美日本亚洲视频在线播放| 亚洲一级一片aⅴ在线观看| 丝袜美腿在线中文| 97热精品久久久久久| 天堂√8在线中文| 天堂动漫精品| 中文字幕熟女人妻在线| 啪啪无遮挡十八禁网站| 婷婷丁香在线五月| av在线蜜桃| 久久久久久伊人网av| av在线老鸭窝| 免费看日本二区| 无人区码免费观看不卡| 久久亚洲真实| videossex国产| 精品人妻熟女av久视频| 免费在线观看成人毛片| 国产色爽女视频免费观看| 亚洲成人久久性| 国产精品,欧美在线| 亚洲国产精品成人综合色| 日本一二三区视频观看| 国产精品三级大全| 99九九线精品视频在线观看视频| 久久亚洲真实| 日韩欧美免费精品| 少妇猛男粗大的猛烈进出视频 | 免费av观看视频| 国产精品人妻久久久久久| 少妇高潮的动态图| 九九久久精品国产亚洲av麻豆| 日韩av在线大香蕉| 欧美色欧美亚洲另类二区| 一本一本综合久久| 好男人在线观看高清免费视频| 午夜精品久久久久久毛片777| 最新在线观看一区二区三区| 亚洲成a人片在线一区二区| 午夜精品一区二区三区免费看| 国产爱豆传媒在线观看| 久久久久久久久大av| 制服丝袜大香蕉在线| 嫩草影院入口| 国产淫片久久久久久久久| 高清在线国产一区| 午夜精品一区二区三区免费看| 麻豆一二三区av精品| 日韩精品中文字幕看吧| 国产一区二区在线观看日韩| 琪琪午夜伦伦电影理论片6080| 亚洲精品影视一区二区三区av| 久久久久九九精品影院| 美女cb高潮喷水在线观看| 韩国av在线不卡| 免费黄网站久久成人精品| 国产色婷婷99| 人妻夜夜爽99麻豆av| 久久亚洲真实| 欧美极品一区二区三区四区| 色5月婷婷丁香| 看十八女毛片水多多多| 看十八女毛片水多多多| 精品一区二区三区人妻视频| 成人三级黄色视频| 精品乱码久久久久久99久播| 高清毛片免费观看视频网站| 少妇熟女aⅴ在线视频| 欧美又色又爽又黄视频| 欧美日韩中文字幕国产精品一区二区三区| 一级毛片久久久久久久久女| 我要搜黄色片| 国产成人影院久久av| 午夜激情福利司机影院| 亚洲欧美激情综合另类| 91在线观看av| 美女免费视频网站| 欧美日韩乱码在线| 91精品国产九色| 久久久精品大字幕| 亚洲不卡免费看| 99热这里只有精品一区| 天堂网av新在线| 成人一区二区视频在线观看| 麻豆久久精品国产亚洲av| 麻豆国产97在线/欧美| 禁无遮挡网站| 精品午夜福利视频在线观看一区| 99久久精品一区二区三区| .国产精品久久| 亚洲成人久久性| 国产av在哪里看| 久久婷婷人人爽人人干人人爱| 成人特级av手机在线观看| 久久婷婷人人爽人人干人人爱| 免费不卡的大黄色大毛片视频在线观看 | 桃色一区二区三区在线观看| 狂野欧美白嫩少妇大欣赏| 内地一区二区视频在线| 看黄色毛片网站| 少妇的逼水好多| 国语自产精品视频在线第100页| 亚洲国产欧洲综合997久久,| 干丝袜人妻中文字幕| 色5月婷婷丁香| 日韩欧美精品v在线| 国产亚洲91精品色在线| 女生性感内裤真人,穿戴方法视频| 久久久久久久精品吃奶| 欧美zozozo另类| 超碰av人人做人人爽久久| 给我免费播放毛片高清在线观看| 亚洲,欧美,日韩| 五月玫瑰六月丁香| 别揉我奶头~嗯~啊~动态视频| a级毛片免费高清观看在线播放| 男插女下体视频免费在线播放| 精品99又大又爽又粗少妇毛片 | 亚洲av熟女| 人妻少妇偷人精品九色| 亚洲图色成人| 国产精品电影一区二区三区| 老熟妇仑乱视频hdxx| 九九热线精品视视频播放| 国产真实乱freesex| 亚洲av中文字字幕乱码综合| 日韩国内少妇激情av| 又黄又爽又免费观看的视频| 无遮挡黄片免费观看| 亚洲国产欧洲综合997久久,| 色哟哟·www| 亚洲最大成人手机在线| 亚洲av中文字字幕乱码综合| 国产精品无大码| 狂野欧美激情性xxxx在线观看| 亚洲人与动物交配视频| 99久国产av精品| 十八禁国产超污无遮挡网站| av天堂中文字幕网| 成人av一区二区三区在线看| 五月伊人婷婷丁香| 国产一区二区在线av高清观看| 99在线人妻在线中文字幕| 久久久国产成人精品二区| 成人av一区二区三区在线看| 久久6这里有精品| 亚洲av电影不卡..在线观看| 伦理电影大哥的女人| 此物有八面人人有两片| 亚洲乱码一区二区免费版| 长腿黑丝高跟| 亚洲内射少妇av| 亚洲va在线va天堂va国产| 成年免费大片在线观看| 又黄又爽又刺激的免费视频.| 亚洲精品一区av在线观看| 真人一进一出gif抽搐免费| 欧美日韩瑟瑟在线播放| www.色视频.com| 亚洲国产色片| 亚洲,欧美,日韩| 久久人人爽人人爽人人片va| 免费在线观看成人毛片| 老熟妇乱子伦视频在线观看| 免费电影在线观看免费观看| 99久久精品国产国产毛片| 韩国av一区二区三区四区| 久久久久久久久大av| 精品无人区乱码1区二区| 日本成人三级电影网站| 国产精品自产拍在线观看55亚洲| 又黄又爽又刺激的免费视频.| 亚洲人成网站在线播放欧美日韩| 午夜a级毛片| 亚洲国产欧洲综合997久久,| 小蜜桃在线观看免费完整版高清| 一本精品99久久精品77| 伦精品一区二区三区| 日本与韩国留学比较| 国产男人的电影天堂91| 熟女人妻精品中文字幕| av天堂中文字幕网| 成年女人永久免费观看视频| 欧美3d第一页| 欧美激情久久久久久爽电影| 久久精品国产亚洲av香蕉五月| 一区福利在线观看| 午夜亚洲福利在线播放| 嫁个100分男人电影在线观看| 亚洲av成人精品一区久久| 国产精品不卡视频一区二区| 色哟哟哟哟哟哟| 亚洲七黄色美女视频| xxxwww97欧美| 伦精品一区二区三区| 欧美日韩精品成人综合77777| 免费看美女性在线毛片视频| 午夜爱爱视频在线播放| 在线国产一区二区在线| 欧美一区二区精品小视频在线| 五月玫瑰六月丁香| 九九热线精品视视频播放| 国产麻豆成人av免费视频| 精品久久久久久久久久免费视频| 亚洲电影在线观看av| 99久久精品热视频| 国产69精品久久久久777片| 又粗又爽又猛毛片免费看| 美女cb高潮喷水在线观看| 国产av一区在线观看免费| 婷婷亚洲欧美| 最新中文字幕久久久久| 99久久无色码亚洲精品果冻| 中亚洲国语对白在线视频| 亚洲国产精品久久男人天堂| av天堂中文字幕网| 在线观看一区二区三区| 精品久久久久久久末码| 亚洲美女搞黄在线观看 | 夜夜爽天天搞| 大又大粗又爽又黄少妇毛片口| 成人高潮视频无遮挡免费网站| 国产午夜精品久久久久久一区二区三区 | 在线免费十八禁| 淫妇啪啪啪对白视频| 日本黄色视频三级网站网址| 国产av不卡久久| 国产大屁股一区二区在线视频| 婷婷六月久久综合丁香| 免费观看的影片在线观看| 最近最新中文字幕大全电影3| 老女人水多毛片| 国产午夜福利久久久久久| 久久婷婷人人爽人人干人人爱| 狂野欧美激情性xxxx在线观看| bbb黄色大片| 欧美潮喷喷水| 久久热精品热| 久久久久久久久久黄片| 男人和女人高潮做爰伦理| 亚洲最大成人中文| 在线免费观看的www视频| 97热精品久久久久久| 国产精品一区二区免费欧美| 中文亚洲av片在线观看爽| 亚洲国产高清在线一区二区三| 大型黄色视频在线免费观看| 国模一区二区三区四区视频| 国产av麻豆久久久久久久| 日韩欧美精品v在线| 人妻久久中文字幕网| 色噜噜av男人的天堂激情| 日韩欧美在线二视频| 婷婷色综合大香蕉| 少妇人妻精品综合一区二区 | 熟女电影av网| 欧美一区二区亚洲| 有码 亚洲区| 91麻豆av在线| 久久热精品热| 日韩av在线大香蕉| 亚洲av中文字字幕乱码综合| 我的女老师完整版在线观看| 在线免费十八禁| 国产黄片美女视频| 亚洲av一区综合| av在线老鸭窝| 少妇人妻一区二区三区视频| 国产精品嫩草影院av在线观看 | 国产探花在线观看一区二区| 国产精品久久久久久精品电影| 亚洲精品456在线播放app | 亚洲欧美清纯卡通| 欧美激情国产日韩精品一区| 黄色视频,在线免费观看| 看片在线看免费视频| 亚洲av免费在线观看| 直男gayav资源| 国产三级中文精品| 人妻少妇偷人精品九色| 日本-黄色视频高清免费观看| 一区二区三区免费毛片| 黄色日韩在线| 性插视频无遮挡在线免费观看| 国产精品一区二区三区四区免费观看 | 国内精品久久久久久久电影| 一区二区三区高清视频在线| 日韩 亚洲 欧美在线| 午夜福利18| 欧美成人免费av一区二区三区| 97人妻精品一区二区三区麻豆| 女的被弄到高潮叫床怎么办 | 夜夜夜夜夜久久久久| 国产精品福利在线免费观看| 国产精品伦人一区二区| 3wmmmm亚洲av在线观看| 欧洲精品卡2卡3卡4卡5卡区| 99久久精品热视频| 日韩欧美国产在线观看| 国产高清视频在线观看网站| 国产精品一区二区免费欧美| 国产国拍精品亚洲av在线观看| 免费人成在线观看视频色| 国产成人福利小说| 99久久精品一区二区三区| 国产亚洲91精品色在线| 国内久久婷婷六月综合欲色啪| 国产精品久久久久久精品电影| 精品人妻一区二区三区麻豆 | 三级国产精品欧美在线观看| 亚洲成人久久爱视频| 亚洲精品在线观看二区| 桃色一区二区三区在线观看| 国产一区二区三区av在线 | 天堂动漫精品| 国产在线男女| 欧美性猛交黑人性爽| 久久久久久久久久成人| 欧美激情在线99| 成人国产综合亚洲| 日韩av在线大香蕉| 国产白丝娇喘喷水9色精品| 免费搜索国产男女视频| 女同久久另类99精品国产91| 国产精华一区二区三区| 身体一侧抽搐| 国产精品美女特级片免费视频播放器| 91午夜精品亚洲一区二区三区 |