• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于深度學(xué)習(xí)的教師課堂提問分析方法研究

    2021-09-14 18:50:30馬玉慧夏雪瑩張文慧
    電化教育研究 2021年9期
    關(guān)鍵詞:深度神經(jīng)網(wǎng)絡(luò)課堂提問深度學(xué)習(xí)

    馬玉慧 夏雪瑩 張文慧

    [摘? ?要] 課堂提問是教師課堂教學(xué)行為的關(guān)鍵組成部分,是師生進(jìn)行課堂交互的主要方式。對(duì)教師課堂提問進(jìn)行分析,是提升教師課堂教學(xué)水平的關(guān)鍵。視頻分析法是目前進(jìn)行課堂提問分析的主要方法。但該方法需要花費(fèi)大量的時(shí)間和人力,導(dǎo)致無法進(jìn)行大規(guī)模應(yīng)用。近幾年,隨著人工智能技術(shù)的不斷成熟,越來越多的領(lǐng)域開始利用人工智能替代人工操作。為使課堂提問分析能夠高效、大規(guī)模地應(yīng)用,本研究提出基于深度學(xué)習(xí)的課堂提問自動(dòng)分析方法。研究采用卷積神經(jīng)網(wǎng)絡(luò)(CNN)及長(zhǎng)短時(shí)記憶網(wǎng)絡(luò)(LSTM),對(duì)80節(jié)課的9090條課堂教師提問文本進(jìn)行分類。實(shí)驗(yàn)結(jié)果表明,CNN模型具有更好的分類效果,其在提問內(nèi)容和提問類型兩個(gè)維度上的整體準(zhǔn)確率分別是85.17%和87.84%。應(yīng)用該方法訓(xùn)練的模型,可替代傳統(tǒng)的視頻分析法,能夠?qū)崿F(xiàn)大規(guī)模的教師課堂提問話語的自動(dòng)分析。

    [關(guān)鍵詞] 課堂提問; 自動(dòng)分類; 深度神經(jīng)網(wǎng)絡(luò); 深度學(xué)習(xí)

    [中圖分類號(hào)] G434? ? ? ? ? ? [文獻(xiàn)標(biāo)志碼] A

    [作者簡(jiǎn)介] 馬玉慧(1974—),女,遼寧錦州人。副教授,博士,主要從事人工智能教育應(yīng)用的研究。E-mail:799493385 @qq.com。

    一、引? ?言

    課堂提問是教師課堂教學(xué)行為的關(guān)鍵組成部分,是師生進(jìn)行課堂交互的主要方式。有效的課堂教學(xué)提問不僅能夠吸引學(xué)生的注意力,激發(fā)學(xué)習(xí)興趣,而且能夠引導(dǎo)學(xué)生深入思考,及時(shí)評(píng)價(jià)教學(xué)效果[1-2]。對(duì)教師的課堂提問進(jìn)行質(zhì)性研究,是區(qū)分新手教師與專家教師,促進(jìn)教師專業(yè)發(fā)展的有效途徑之一[3-5]。現(xiàn)有的教師課堂提問研究,多采用視頻案例分析法,即對(duì)課堂教學(xué)進(jìn)行錄像,課后反復(fù)觀看錄像,并將教師教學(xué)行為轉(zhuǎn)錄為文字,再進(jìn)行編碼統(tǒng)計(jì)分析[6-8]。這種分析方法可以較好地對(duì)教師課堂提問進(jìn)行深入的量化與剖析,確定教師課堂上的提問數(shù)量、提問方式、提問類型及提問所在教學(xué)環(huán)節(jié)等[9-11]。但該方法面臨的主要問題是需要大量的人工操作,導(dǎo)致該方法無法大規(guī)模推廣使用。

    深度學(xué)習(xí)(Deep Learning)是當(dāng)前人工智能技術(shù)發(fā)展的主流方向。近幾年人工智能技術(shù)在眾多領(lǐng)域的廣泛推廣與使用,大多歸功于深度學(xué)習(xí)技術(shù)的發(fā)展。深度學(xué)習(xí)幾乎成了人工智能的代名詞。隨著訓(xùn)練數(shù)據(jù)的不斷增多,算力大幅提升,算法的創(chuàng)新與改進(jìn),深度學(xué)習(xí)訓(xùn)練得到的智能體越來越多地應(yīng)用在不同領(lǐng)域,替代人類自動(dòng)完成各項(xiàng)耗時(shí)、耗力的繁雜工作,將人們從大量的重復(fù)性工作中解放出來,將更多精力集中于創(chuàng)造性的工作中。

    近幾年,深度學(xué)習(xí)技術(shù)已開始應(yīng)用于教育領(lǐng)域[12-14],教育研究者期望用機(jī)器自己學(xué)習(xí)得到的模型替代部分人類工作,減輕研究者和教師的工作負(fù)擔(dān),實(shí)現(xiàn)智能教育。在本研究中,針對(duì)現(xiàn)有基于視頻分析法進(jìn)行教師課堂提問研究的不足,本文提出了利用深度學(xué)習(xí)技術(shù),對(duì)教師的課堂提問進(jìn)行研究的方法,解決視頻分析無法大規(guī)模使用的問題,同時(shí)為基于深度學(xué)習(xí)的教師課堂分析提供研究思路與方法的借鑒。

    二、研究現(xiàn)狀

    (一)教師課堂提問的分類及分析方法研究

    課堂提問是教師課堂教學(xué)中最普遍的教學(xué)行為之一,是教學(xué)過程中師生進(jìn)行溝通和交流的主要方法。課堂提問是教學(xué)質(zhì)量的重要保障,但若能在課堂上進(jìn)行有效的提問絕非易事[15]。已有研究表明,新手教師在課堂提問方面,與專家型教師存在較大差異[5,16]。因此,對(duì)新手教師的課堂提問進(jìn)行研究,發(fā)現(xiàn)新手教師與專家教師在提問環(huán)節(jié)的差異,對(duì)于新手教師提高教學(xué)質(zhì)量,促進(jìn)專業(yè)發(fā)展具有重要作用[17]。

    在現(xiàn)有課堂提問的研究中,教師提問分類問題是眾多研究者關(guān)注的重點(diǎn)之一。于國(guó)文等對(duì)不同國(guó)家中學(xué)數(shù)學(xué)教師的課堂提問進(jìn)行了研究,將教師數(shù)學(xué)課堂提問分為三個(gè)維度:提問對(duì)象、提問內(nèi)容和提問水平。進(jìn)一步地,將提問對(duì)象分為個(gè)別學(xué)生、小組和全班同學(xué);提問內(nèi)容分為知識(shí)點(diǎn)類、題目信息類和管理類;提問水平分為低水平的回憶型、理解型和應(yīng)用型,高水平的分析型、綜合型和評(píng)價(jià)型[18]。顧泠沅將提問類型分為常規(guī)管理性問題、記憶性問題、推理性問題、創(chuàng)造性問題和批判性問題五類[19];涂榮豹將提問類型分為回憶性提問、理解性提問、分析綜合性提問和評(píng)價(jià)性提問[20]。葉立軍等根據(jù)教師提問的作用,回答所對(duì)應(yīng)的認(rèn)知水平,將提問分為管理型提問、識(shí)記型提問、重復(fù)型提問、提示型提問、補(bǔ)充型提問、理解型提問、評(píng)價(jià)型問題7種類型[4]。已有研究的提問分類維度為實(shí)現(xiàn)教師課堂提問的自動(dòng)分析提供了很好的研究基礎(chǔ)。

    目前常用的課堂提問分析方法是視頻分析法。張文宇等對(duì)我國(guó)首屆全日制教育碩士學(xué)科教學(xué)(數(shù)學(xué))專業(yè)教學(xué)技能決賽的33名參賽學(xué)生的視頻進(jìn)行視頻分析,由此發(fā)現(xiàn)這些職前教師在課堂提問環(huán)節(jié)的不足[10]。葉立軍等同樣采用視頻分析法,對(duì)兩位從教二十年教師的課堂視頻實(shí)錄進(jìn)行分析。除了對(duì)兩位教師的課堂提問類型進(jìn)行統(tǒng)計(jì)分析外,還對(duì)提問的總共用時(shí)、學(xué)生回答的次數(shù)、回答的總時(shí)長(zhǎng)進(jìn)行了統(tǒng)計(jì)分析[4]。于國(guó)文等采用基于NVivo對(duì)中國(guó)、澳大利亞、法國(guó)、芬蘭的專家型教師的課堂教學(xué)視頻中的課堂提問進(jìn)行了比較分析,探究不同國(guó)家教師課堂提問的各自特點(diǎn)[18]。

    通常,課堂教學(xué)的視頻分析法的具體步驟如下:(1)將課堂實(shí)錄視頻轉(zhuǎn)錄為文字,生成原始素材;(2)將素材導(dǎo)入視頻分析軟件(如NVivo軟件等);(3)構(gòu)建課堂提問分類編碼體系,并進(jìn)行信度和效度驗(yàn)證;(4)基于提問分類編碼體系,人工進(jìn)行編碼;(5)利用SPSS軟件進(jìn)行編碼的統(tǒng)計(jì)分析。

    視頻分析法能夠有效地對(duì)教師課堂提問進(jìn)行分析,但也存在顯著的不足,即整個(gè)分析過程需要投入大量的人力和時(shí)間,導(dǎo)致該方法無法大規(guī)模推廣應(yīng)用,無法對(duì)更多教師的課堂提問進(jìn)行精準(zhǔn)分析。為此,在人工智能時(shí)代,采用自動(dòng)分析法替代視頻分析法成為大規(guī)模促進(jìn)教師專業(yè)發(fā)展的切實(shí)有效途徑。

    (二)基于深度學(xué)習(xí)的文本分類在教育中的應(yīng)用

    深度學(xué)習(xí)最早由加拿大多倫多大學(xué)教授希頓(Hinton)等提出。深度學(xué)習(xí)模型的結(jié)構(gòu)模擬了人類大腦神經(jīng)系統(tǒng)的結(jié)構(gòu)原理,通過多層神經(jīng)元之間的信息傳遞,實(shí)現(xiàn)不同特征的提取,最終形成數(shù)據(jù)的分層特征表示。理解深度學(xué)習(xí),可以從“深度”和“學(xué)習(xí)”兩個(gè)方面著手?!皩W(xué)習(xí)”是指深度學(xué)習(xí)完成任務(wù)所需的“知識(shí)或技能”并非來源于人們預(yù)先編寫的程序規(guī)則,而是從大量數(shù)據(jù)中自動(dòng)學(xué)習(xí)獲得。也就是說,深度學(xué)習(xí)獲取知識(shí)的途徑來源于海量數(shù)據(jù)?!吧疃取笔窍鄬?duì)于機(jī)器學(xué)習(xí)的“淺層”而言的。機(jī)器學(xué)習(xí)中的邏輯回歸、支持向量機(jī)、最大熵方法等模型,都是基于淺層結(jié)構(gòu)來處理數(shù)據(jù)的。這些模型只有1層或2層非線性特征轉(zhuǎn)換層,而深度學(xué)習(xí)是一個(gè)具有多層隱層節(jié)點(diǎn)的神經(jīng)網(wǎng)絡(luò)。多層隱層節(jié)點(diǎn)的結(jié)構(gòu)不僅能更好地刻畫大量數(shù)據(jù)中隱含的復(fù)雜特征,而且通過逐層初始化,降低了神經(jīng)元數(shù)量和訓(xùn)練的難度。此外,相對(duì)于淺層學(xué)習(xí)而言,深度學(xué)習(xí)還有一個(gè)顯著優(yōu)勢(shì),通過多層隱層的模型結(jié)構(gòu),再加上海量的數(shù)據(jù),能夠自動(dòng)學(xué)習(xí)隱藏在數(shù)據(jù)背后的更有用的特征,無須淺層機(jī)器學(xué)習(xí)所必需的特征工程,從而能夠更精準(zhǔn)地進(jìn)行預(yù)測(cè)和分類[21-22]。

    文本分類是深度學(xué)習(xí)在自然語言理解領(lǐng)域的一個(gè)主要應(yīng)用場(chǎng)景之一?;谏疃葘W(xué)習(xí)文本分類的一般流程大致為文本預(yù)處理、文本表示、基于深度學(xué)習(xí)模型的文本分類三個(gè)部分。不同領(lǐng)域的中文文本分類的應(yīng)用和研究,其文本預(yù)處理的方法大體相同,基本包括中文分詞、去停用詞、規(guī)范化等。文本表示是將文字轉(zhuǎn)換成計(jì)算機(jī)能夠進(jìn)行處理運(yùn)算的數(shù)字或向量。深度學(xué)習(xí)中多采用詞嵌入方法,如Word2Vec、Bert等方法將文本表示成多維的向量,用于后續(xù)的基于向量的分類?;谏疃葘W(xué)習(xí)文本分類的不同應(yīng)用研究,其主要的不同在于采用了不同的深度學(xué)習(xí)模型。目前,常見的深度學(xué)習(xí)文本分類模型有卷積神經(jīng)網(wǎng)絡(luò)CNN[23]、長(zhǎng)短時(shí)記憶網(wǎng)絡(luò)LSTM[24-25]、雙向長(zhǎng)短時(shí)記憶網(wǎng)絡(luò)Bi-LSTM[26]、基于注意力機(jī)制的雙向長(zhǎng)短時(shí)記憶網(wǎng)絡(luò)BiLSTM-Attention[27]等。

    目前,基于深度學(xué)習(xí)的文本分類技術(shù)已開始應(yīng)用于教育領(lǐng)域,并取得了一定的研究成果。例如馮翔等為自動(dòng)識(shí)別在線學(xué)習(xí)過程中學(xué)生的學(xué)業(yè)情緒,構(gòu)建了基于LSTM模型的學(xué)業(yè)情緒預(yù)測(cè)系統(tǒng)。該系統(tǒng)通過爬蟲程序獲取10萬余條在線學(xué)習(xí)中學(xué)生的反饋文本數(shù)據(jù),利用LSTM模型實(shí)現(xiàn)學(xué)習(xí)者的學(xué)業(yè)情感的識(shí)別與分類,模型預(yù)測(cè)的準(zhǔn)確率達(dá)到89%[14]。甄園宜等人收集了16047條學(xué)生在線協(xié)作學(xué)習(xí)過程中的交互文本數(shù)據(jù),基于CNN、LSTM、Bi-LSTM模型,將學(xué)生在線協(xié)作學(xué)習(xí)過程中的交互文本進(jìn)行分類,再根據(jù)交互文本所屬類別有針對(duì)性地進(jìn)行在線協(xié)作學(xué)習(xí)的實(shí)時(shí)監(jiān)測(cè)和干預(yù)[12]。研究的實(shí)驗(yàn)結(jié)果表明,相對(duì)于CNN、LSTM模型而言,Bi-LSTM具有更高的準(zhǔn)確率,為77.42%。羅梟應(yīng)用Bi-LSTM結(jié)合CNN實(shí)現(xiàn)了試卷主觀題的自動(dòng)評(píng)分。采用的方法是將之前主觀題的連續(xù)評(píng)分(如滿分6分)改為分成3個(gè)分?jǐn)?shù)段,相當(dāng)于將主觀題分為3類(0~1分為第1類,2~4分為第2類,5~6分為第3類),這樣就將主觀題的評(píng)分轉(zhuǎn)換成文本分類問題,在SST-2數(shù)據(jù)集上其準(zhǔn)確率為89.7%[28]。

    綜上所述,基于深度學(xué)習(xí)的文本分類能夠幫助人類減少大量重復(fù)、繁雜工作,是實(shí)現(xiàn)教育智能化的有力抓手之一。目前該基于深度學(xué)習(xí)的文本分類在教育領(lǐng)域中的應(yīng)用尚處于起步階段。不同的應(yīng)用情境,分類的準(zhǔn)確率會(huì)受到數(shù)據(jù)集質(zhì)量、深度學(xué)習(xí)模型的選定,以及分類歧義程度等諸多因素的影響。如何挖掘教育領(lǐng)域中的文本分類的教育問題,選擇適當(dāng)?shù)纳疃葘W(xué)習(xí)模型,是目前我們進(jìn)行深度學(xué)習(xí)文本分類教育應(yīng)用的關(guān)鍵所在。

    三、基于深度學(xué)習(xí)的教師課堂提問分類方法

    教師課堂教學(xué)提問分析本質(zhì)上是文本分類問題。采用基于深度學(xué)習(xí)的文本分類方法對(duì)教師的課堂教學(xué)提問進(jìn)行分析,能夠很好地解決傳統(tǒng)視頻分析方法無法大規(guī)模應(yīng)用的問題?;谏疃葘W(xué)習(xí)對(duì)教師的課堂提問進(jìn)行分類,首先要構(gòu)建分類體系,再利用深度學(xué)習(xí)的分類方法進(jìn)行分類。下面以初中數(shù)學(xué)課堂為例,闡述基于深度學(xué)習(xí)的教師課堂提問分類方法。

    (一)數(shù)學(xué)課堂提問的分類

    本文主要在于國(guó)文等關(guān)于數(shù)學(xué)課堂提問分類研究的基礎(chǔ)上[18],將數(shù)學(xué)課堂提問分為提問內(nèi)容和提問類型兩大類。提問內(nèi)容主要是“提問什么”,提問類型則依據(jù)布魯姆的教學(xué)目標(biāo)分類,從提問認(rèn)知層級(jí)的視角進(jìn)行了進(jìn)一步劃分。具體地,將提問按提問內(nèi)容分為知識(shí)點(diǎn)類提問、題目信息類提問和管理類提問;將提問類型分為識(shí)記型提問、提示型提問、分析型提問、應(yīng)用型提問、評(píng)價(jià)性提問。具體的類別劃分及示例見表1。

    (二)基于深度學(xué)習(xí)的課堂提問分類的流程

    基于深度學(xué)習(xí)的課堂提問分類主要包括數(shù)據(jù)收集、語料標(biāo)注、數(shù)據(jù)預(yù)處理、數(shù)據(jù)表示、模型的選擇與訓(xùn)練、預(yù)測(cè)六個(gè)步驟。

    1. 數(shù)據(jù)收集與整理

    數(shù)據(jù)收集是進(jìn)行深度學(xué)習(xí)模型訓(xùn)練的第一步,也是很關(guān)鍵的一步。數(shù)據(jù)集的數(shù)量、各類別數(shù)據(jù)量的均衡程度,都會(huì)對(duì)分類效果產(chǎn)生影響。教師課堂提問的數(shù)據(jù)多來源于課堂實(shí)錄,因此要先利用語音轉(zhuǎn)換軟件,將視頻中的語音轉(zhuǎn)換成文本。

    2. 語料標(biāo)注

    將收集的數(shù)據(jù)以句子為單位進(jìn)行標(biāo)注。在本研究中將提問按其對(duì)應(yīng)的提問內(nèi)容分別標(biāo)注為0、1、2三類,按提問類型標(biāo)注為0、1、2、3、4五類。例如,將“解分式方程的步驟是什么?”按提問內(nèi)容標(biāo)注為0,按提問類型標(biāo)注為0;“為什么兩個(gè)三角形相似?說出你的理由”按提問內(nèi)容標(biāo)注為1,按提問類型標(biāo)注為2。

    3. 數(shù)據(jù)預(yù)處理

    數(shù)據(jù)預(yù)處理的目的是將收集的數(shù)據(jù)集轉(zhuǎn)換成符合深度學(xué)習(xí)模型訓(xùn)練要求的數(shù)據(jù)。本研究中的預(yù)處理包括去除過長(zhǎng)或過短語句、打亂語料順序,以及數(shù)據(jù)采樣。去除過長(zhǎng)或過短語句,用于減少課堂語料數(shù)據(jù)集的噪聲。打亂語料順序即亂序?qū)W習(xí),是在送入程序之前打亂語料的順序,使得深度學(xué)習(xí)效果更好。為避免各類別中訓(xùn)練樣本的數(shù)據(jù)不均衡,本研究采用合成少數(shù)類過采樣與下采樣相結(jié)合的混合采樣方式,以降低因各類數(shù)據(jù)不均衡而導(dǎo)致的分類誤差。

    4. 數(shù)據(jù)表示

    數(shù)據(jù)表示一般有詞向量與字向量表示。詞向量是以詞為單位的向量表示,字向量是以字為單位的向量表示。在不同應(yīng)用場(chǎng)景中,基于詞向量與字向量的深度學(xué)習(xí)會(huì)有不同的應(yīng)用效果[29]。由于本研究的數(shù)據(jù)量不大,因此采用字向量進(jìn)行數(shù)據(jù)表示。

    5. 模型的選擇與訓(xùn)練

    從常用的深度學(xué)習(xí)模型中選擇模型作為分類器進(jìn)行訓(xùn)練,本研究選取CNN模型和LSTM模型作為課堂提問文本的分類器模型。

    (1)CNN模型。CNN模型是卷積神經(jīng)網(wǎng)絡(luò)(Convolutional Neural Networks)的簡(jiǎn)稱。典型的CNN模型的結(jié)構(gòu)包括輸入層、卷積層、池化層、全連接層和輸出層。其中卷積層是CNN模型的核心。這些卷積層具有小尺寸但可以在整個(gè)矩陣上移動(dòng)的過濾器,即卷積核。卷積計(jì)算作為一種有效提取特征的方法,每一個(gè)步長(zhǎng)卷積核會(huì)與輸入矩陣出現(xiàn)重合區(qū)域,重合區(qū)域?qū)?yīng)的元素相乘、求和再加上偏置項(xiàng)得到輸出特征的一個(gè)像素點(diǎn);池化用于減少卷積神經(jīng)網(wǎng)絡(luò)中的特征數(shù)據(jù)量;全連接層中每個(gè)神經(jīng)元與前后相鄰層的每一個(gè)神經(jīng)元都有連接關(guān)系,輸入是特征,輸出為預(yù)測(cè)結(jié)果。CNN模型的基本原理:假設(shè)一個(gè)k維向量,首先將每個(gè)字的字向量拼接形成句向量送入神經(jīng)網(wǎng)絡(luò);之后使用卷積核對(duì)句子進(jìn)行卷積操作,形成新特征;然后設(shè)置卷積核步長(zhǎng),得到句子矩陣的特征集;最后對(duì)特征集作最大值池化計(jì)算,找出最大的特征值與某一特定卷積核作對(duì)應(yīng),最終得到分類結(jié)果。

    (2)LSTM模型。LSTM模型全稱長(zhǎng)短時(shí)記憶網(wǎng)絡(luò)(Long Short-Term Memory),是一種特殊的循環(huán)神經(jīng)網(wǎng)絡(luò)模型(RNN),它通過三個(gè)門結(jié)構(gòu)(遺忘門、輸入門和輸出門),較好地解決了循環(huán)神經(jīng)網(wǎng)絡(luò)的梯度消失、梯度爆炸,以及無法處理序列中長(zhǎng)距離依賴問題。目前,LSTM已廣泛應(yīng)用于不同領(lǐng)域的序列預(yù)測(cè)。LSTM模型的基本原理是通過三個(gè)門結(jié)構(gòu)控制信息的輸入、更新和輸出,也就是通過門結(jié)構(gòu),有選擇地決定應(yīng)丟棄、更新和輸出哪些信息。具體地,LSTM利用遺忘門,將前一時(shí)刻的隱藏狀態(tài)ht-1和當(dāng)前輸入xt,經(jīng)過Sigmoid函數(shù)δ,決定保留或丟棄前一時(shí)刻記憶單元Ct-1中哪些信息,計(jì)算方法為:ft=δ(Wf·[ht-1,xt]+bf),其中ft表示信息遺忘值,ft=0表示全部舍棄,ft=1表示全部保留。Wf和bf分別表示遺忘門的連接權(quán)重和偏置。輸入門決定了在當(dāng)前節(jié)點(diǎn)中應(yīng)添加哪些信息,輸入門先通過一個(gè)Sigmoid函數(shù),用于控制要更新的信息it,it=δ(Wi·[ht-1,xt]+bi),Wi和bi分別表示輸入門的連接權(quán)重和偏置,再經(jīng)過tanh函數(shù)生成候選向量■■,■■=tanh(WC·[ht-1,xt]+bC),WC和bC分別表示更新值連接權(quán)重和偏置值,則當(dāng)前記憶單元的狀態(tài)Ct=ft*Ct-1+it*■■。輸出門決定了最后輸出什么信息,確定具體的輸出信息。最后的輸出經(jīng)過了Sigmoid函數(shù)和tanh函數(shù),Ot=δ(Wo·[ht-1,xt]+bo),ht=Ot*tanh Ct,Ot表示輸出門狀態(tài),Wo和bo分別表示輸出門的權(quán)重和偏置,ht表示最終輸出值,Ct表示當(dāng)前記憶單元狀態(tài)。確定好模型后,應(yīng)用經(jīng)過預(yù)處理的數(shù)據(jù)對(duì)模型進(jìn)行訓(xùn)練,并調(diào)整模型參數(shù),直至模型在測(cè)試集上的評(píng)價(jià)指標(biāo)不再增加。

    6. 預(yù)測(cè)

    選擇具有更好分類效果的模型作為分類器,將待分析的提問句子經(jīng)過數(shù)據(jù)表示轉(zhuǎn)換后輸入到模型中進(jìn)行分類,達(dá)到最終的分類結(jié)果。

    四、實(shí)驗(yàn)及結(jié)果分析

    (一)實(shí)驗(yàn)數(shù)據(jù)集

    表2? ? ? ? ? ? ? ? ? 各提問類型語料分布表

    本研究收集80節(jié)初中數(shù)學(xué)優(yōu)秀課堂實(shí)錄,共收集到9090條課堂提問語料。為保證課堂提問數(shù)據(jù)的有效性和數(shù)據(jù)均衡性,本研究刪除了部分?jǐn)?shù)據(jù)。將調(diào)整后的教師課堂提問語料分為訓(xùn)練集、驗(yàn)證集和測(cè)試集,即分別選取每類數(shù)據(jù)中的60%作為訓(xùn)練集、20%作為驗(yàn)證集和20%作為測(cè)試集。數(shù)據(jù)集在提問內(nèi)容、提問類型維度上的分布情況見表2。

    (二)評(píng)價(jià)標(biāo)準(zhǔn)

    本研究通過繪制準(zhǔn)確率(Accuracy)和損失率(Loss)變化趨勢(shì)圖來直觀得知模型訓(xùn)練過程表現(xiàn)情況。使用精確率(Precision)、召回率(Recall)、F1值和準(zhǔn)確率(Accuracy)作為課堂教師提問分類效果的評(píng)價(jià)指標(biāo),并延伸二分類的評(píng)價(jià)標(biāo)準(zhǔn)。計(jì)算公式如下:

    Precision = ■? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? (1)

    Recall = ■? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?(2)

    F1 = ■? ? ? ? ? ? ? ? ? ? ? ? ?(3)

    Accuracy = ■? ? ? ? ? ? ? ? ? ? ?(4)

    其中,TP表示預(yù)測(cè)正確的正樣本數(shù)量,F(xiàn)P表示預(yù)測(cè)錯(cuò)誤的正樣本數(shù)量,TN表示預(yù)測(cè)正確的負(fù)樣本數(shù)量,F(xiàn)N是預(yù)測(cè)錯(cuò)誤的負(fù)樣本數(shù)量。Precision針對(duì)預(yù)測(cè)結(jié)果而言,表示在被所有預(yù)測(cè)為正樣本中實(shí)際為正樣本的概率,即精確率;Recall針對(duì)原樣本而言,表示實(shí)際為正樣本中被預(yù)測(cè)為正樣本的概率,即召回率;精確率和召回率又被叫作查準(zhǔn)率和查全率,F(xiàn)1分?jǐn)?shù)同時(shí)考慮精確率和召回率,讓兩者同時(shí)達(dá)到最高,取得平衡,即對(duì)分類器的性能進(jìn)行綜合評(píng)判。Accuracy表示預(yù)測(cè)正確的結(jié)果占總樣本的百分比,代表整體的預(yù)測(cè)準(zhǔn)確程度,包括正樣本和負(fù)樣本。

    (三)實(shí)驗(yàn)?zāi)P驮O(shè)置

    實(shí)驗(yàn)的硬件環(huán)境為Intel(R) Core(TM)i7-9700K CPU、64GB內(nèi)存,操作系統(tǒng)是64位Windows10。采用Keras框架來搭建基于深度神經(jīng)網(wǎng)絡(luò)的兩個(gè)分類模型。其中“epochs”設(shè)置為100輪、“batch_size” 設(shè)置為64、“dropout”設(shè)置為0.2、“l(fā)earning_rate”設(shè)置為1e-3。模型的其他參數(shù)的設(shè)置為:(1)CNN模型。使用256個(gè)大小尺寸為5的卷積核來提取文本特征,經(jīng)過全局最大值池化操作后,全連接層神經(jīng)元的個(gè)數(shù)是128,最后使用Softmax函數(shù)對(duì)提問文本分類。(2)LSTM模型。使用128個(gè)LSTM隱藏層的神經(jīng)單元進(jìn)行語義信息學(xué)習(xí),連接2個(gè)隱藏層層數(shù)進(jìn)入全連接層,使用Adam方法進(jìn)行優(yōu)化,最后使用Softmax函數(shù)對(duì)提問文本分類。

    (四)實(shí)驗(yàn)結(jié)果與分析

    使用訓(xùn)練集對(duì)上述兩個(gè)文本分類器模型進(jìn)行訓(xùn)練,經(jīng)由驗(yàn)證集調(diào)整參數(shù)后,獲得的分類模型在測(cè)試集上進(jìn)行分類測(cè)試的各項(xiàng)指標(biāo)見表3。

    表3? ? ? ? ? ? ? 提問內(nèi)容分類的實(shí)驗(yàn)結(jié)果

    表4? ? ? ? ? ? ? ?提問類型分類的實(shí)驗(yàn)結(jié)果

    觀察表3和表4可知,CNN模型的整體準(zhǔn)確率較LSTM模型高。其中,在提問內(nèi)容維度上相較于LSTM模型提高了5.27%;在提問類型維度上相較于LSTM模型提高了4.59%。結(jié)果表明,在課堂內(nèi)容維度及提問類型維度的分類中,CNN模型可以更好地提取短文本信息。此外,CNN模型在訓(xùn)練集和驗(yàn)證集中的準(zhǔn)確率和Loss值的變化曲線如圖1和2所示??芍?,CNN模型在訓(xùn)練數(shù)據(jù)集的過程中,模型準(zhǔn)確率逐漸升高,Loss值逐漸縮小,模型的訓(xùn)練過程表現(xiàn)良好。

    五、結(jié)? ?語

    課堂提問是教師課堂教學(xué)的重要教學(xué)技能之一,是教師專業(yè)發(fā)展中的關(guān)鍵環(huán)節(jié)?,F(xiàn)有的視頻分析法,通過人工編碼和看視頻,能夠?qū)處煹恼n堂提問進(jìn)行分析,挖掘課堂上教師提問的數(shù)量、提問的類型以及提問的內(nèi)容等。但這種方法耗時(shí)耗力,無法進(jìn)行大范圍推廣與應(yīng)用。本研究提出了基于深度學(xué)習(xí)文本分類技術(shù)的教師課堂提問分析方法。該方法先收集教師課堂提問數(shù)據(jù),經(jīng)過預(yù)處理后對(duì)深度學(xué)習(xí)模型(卷積神經(jīng)網(wǎng)絡(luò)和長(zhǎng)短時(shí)記憶網(wǎng)絡(luò))進(jìn)行訓(xùn)練,使得深度學(xué)習(xí)模型能夠自動(dòng)對(duì)課堂提問進(jìn)行預(yù)測(cè)分類。從實(shí)驗(yàn)結(jié)果的評(píng)價(jià)指標(biāo)上看,該方法可以替代基于人工的視頻分析方法,能夠?qū)處熣n堂提問分析進(jìn)行大規(guī)模應(yīng)用,有助于促進(jìn)教師專業(yè)發(fā)展。本研究的實(shí)驗(yàn)結(jié)果表明,基于深度學(xué)習(xí)的智能文本處理方法可替代,或部分替代原有的人工操作,成為助力教師專業(yè)發(fā)展,乃至整個(gè)教育領(lǐng)域發(fā)展的利器。

    [參考文獻(xiàn)]

    [1] 洪松舟,盧正芝.我國(guó)有效課堂提問研究十余年回顧與反思[J].河北師范大學(xué)學(xué)報(bào)(教育科學(xué)版),2008,10(12):34-37.

    [2] 盧正芝,洪松舟.教師有效課堂提問:價(jià)值取向與標(biāo)準(zhǔn)建構(gòu)[J].教育研究,2010,31(4):65-70.

    [3] 陳薇,沈書生.小學(xué)數(shù)學(xué)教學(xué)中深度問題的研究——基于專家教師課堂提問的案例分析[J].課程·教材·教法,2019,39(10):118-123.

    [4] 葉立軍,鄭欣.專家型數(shù)學(xué)教師代數(shù)復(fù)習(xí)課提問行為研究——以一次函數(shù)和反比例函數(shù)為例[J].數(shù)學(xué)教育學(xué)報(bào),2018,27(2):46-49.

    [5] 鄭友富.專家型教師與新手教師課堂提問的比較研究[J].教育科學(xué)研究,2009(11):57-60.

    [6] 葉立軍,斯海霞.基于錄像分析背景下的代數(shù)課堂教學(xué)提問研究[J].教育理論與實(shí)踐,2010,30(8):41-43.

    [7] 周瑩,王華.中美中學(xué)數(shù)學(xué)優(yōu)秀教師課堂提問的比較研究——以兩國(guó)同課異構(gòu)的課堂錄像為例[J].數(shù)學(xué)教育學(xué)報(bào),2013,22(4):25-29.

    [8] 胡啟宙,孫慶括.初中數(shù)學(xué)教師課堂提問的方式和反饋水平實(shí)證研究——基于三位教師課堂錄像的編碼分析[J].數(shù)學(xué)教育學(xué)報(bào),2015,24(4):72-75.

    [9] 葉立軍. 數(shù)學(xué)教師課堂教學(xué)行為比較研究[D].南京:南京師范大學(xué),2012.

    [10] 張文宇,范會(huì)勇.基于 NVivo10 分析的數(shù)學(xué)教育專業(yè)碩士課堂提問研究——以首屆全國(guó)全日制教育碩士學(xué)科教學(xué)(數(shù)學(xué))專業(yè)教學(xué)技能決賽視頻為例[J].數(shù)學(xué)教育學(xué)報(bào),2019,28(1):92-96.

    [11] 葉立軍,周芳麗.基于錄像分析背景下的教師提問方式研究[J].教育理論與實(shí)踐,2012,32(5):52-54.

    [12] 甄園宜,鄭蘭琴.基于深度神經(jīng)網(wǎng)絡(luò)的在線協(xié)作學(xué)習(xí)交互文本分類方法[J].現(xiàn)代遠(yuǎn)程教育研究,2020,32(3):104-112.

    [13] 魏艷濤,秦道影,胡佳敏,姚璜,師亞飛.基于深度學(xué)習(xí)的學(xué)生課堂行為識(shí)別[J].現(xiàn)代教育技術(shù),2019,29(7):87-91.

    [14] 馮翔,邱龍輝,郭曉然.基于LSTM模型的學(xué)生反饋文本學(xué)業(yè)情緒識(shí)別方法[J].開放教育研究,2019,25(2):114-120.

    [15] 邵懷領(lǐng).課堂提問有效性:標(biāo)準(zhǔn)、策略及觀察[J].教育科學(xué),2009,25(1):38-41.

    [16] 黃會(huì)來,王迎.數(shù)學(xué)高效與低效教師課堂提問教學(xué)行為的案例比較[J].數(shù)學(xué)教育學(xué)報(bào),2011,20(3):90-92.

    [17] 黃友初.教師課堂教學(xué)行為的四個(gè)要素[J].數(shù)學(xué)教育學(xué)報(bào),2016,25(1):72-74.

    [18] 于國(guó)文,曹一鳴.“中澳法芬”中學(xué)數(shù)學(xué)課堂教師提問的實(shí)證研究[J].數(shù)學(xué)教育學(xué)報(bào),2019,28(2):56-63.

    [19] 顧泠沅,周衛(wèi).課堂教學(xué)的觀察與研究——學(xué)會(huì)觀察[J]上海教育,1999(5):14-18.

    [20] 涂榮豹.數(shù)學(xué)建構(gòu)主義學(xué)習(xí)的實(shí)質(zhì)及其主要特征[J].數(shù)學(xué)教育學(xué)報(bào),1999(4):16-20.

    [21] 余凱,賈磊,陳雨強(qiáng),徐偉.深度學(xué)習(xí)的昨天、今天和明天[J].計(jì)算機(jī)研究與發(fā)展,2013,50(9):1799-1804.

    [22] 張建明,詹智財(cái),成科揚(yáng),詹永照.深度學(xué)習(xí)的研究與發(fā)展[J].江蘇大學(xué)學(xué)報(bào)(自然科學(xué)版),2015,36(2):191-200.

    [23] 馮帥,許童羽,周云成,趙冬雪,金寧,王郝日欽. 基于深度卷積神經(jīng)網(wǎng)絡(luò)的水稻知識(shí)文本分類方法[J]. 農(nóng)業(yè)機(jī)械學(xué)報(bào),2021(2):1-13.

    [24] 趙明,杜會(huì)芳,董翠翠,陳長(zhǎng)松.基于word2vec和LSTM的飲食健康文本分類研究[J].農(nóng)業(yè)機(jī)械學(xué)報(bào),2017,48(10):202-208.

    [25] 曾誰飛,張笑燕,杜曉峰,陸天波.基于神經(jīng)網(wǎng)絡(luò)的文本表示模型新方法[J].通信學(xué)報(bào),2017,38(4):86-98.

    [26] 翁洋,谷松原,李靜,王楓,李俊良,李鑫.面向大規(guī)模裁判文書結(jié)構(gòu)化的文本分類算法[J].天津大學(xué)學(xué)報(bào)(自然科學(xué)與工程技術(shù)版),2021,54(4):418-425.

    [27] 馮斌,張又文,唐昕,郭創(chuàng)新,王堅(jiān)俊,楊強(qiáng),王慧芳.基于BiLSTM-Attention神經(jīng)網(wǎng)絡(luò)的電力設(shè)備缺陷文本挖掘[J].中國(guó)電機(jī)工程學(xué)報(bào),2020,40(S1):1-10.

    [28] 羅梟. 基于深度學(xué)習(xí)的課程主觀題自動(dòng)判卷技術(shù)研究與實(shí)現(xiàn)[D].杭州:浙江農(nóng)林大學(xué),2019.

    [29] 劉敬學(xué),孟凡榮,周勇,劉兵.字符級(jí)卷積神經(jīng)網(wǎng)絡(luò)短文本分類算法[J].計(jì)算機(jī)工程與應(yīng)用, 2019,55(5):135-142.

    猜你喜歡
    深度神經(jīng)網(wǎng)絡(luò)課堂提問深度學(xué)習(xí)
    試論基于深度神經(jīng)網(wǎng)絡(luò)的汽車車型識(shí)別問題
    深度神經(jīng)網(wǎng)絡(luò)的發(fā)展現(xiàn)狀
    MOOC與翻轉(zhuǎn)課堂融合的深度學(xué)習(xí)場(chǎng)域建構(gòu)
    大數(shù)據(jù)技術(shù)在反恐怖主義中的應(yīng)用展望
    淺析大學(xué)英語教學(xué)中的課堂提問技巧
    深度學(xué)習(xí)算法應(yīng)用于巖石圖像處理的可行性研究
    小學(xué)語文課堂提問的教學(xué)研究策略
    基于深度神經(jīng)網(wǎng)絡(luò)的身份識(shí)別研究
    基于深度卷積網(wǎng)絡(luò)的人臉年齡分析算法與實(shí)現(xiàn)
    軟件工程(2016年8期)2016-10-25 15:47:34
    提高小學(xué)音樂課堂提問有效性的策略
    色综合亚洲欧美另类图片| 久久久久久久精品吃奶| 丝袜人妻中文字幕| 亚洲色图 男人天堂 中文字幕| 亚洲成人久久爱视频| x7x7x7水蜜桃| www.精华液| 久久国产精品人妻蜜桃| 精品欧美国产一区二区三| 热99re8久久精品国产| 国产97色在线日韩免费| 亚洲五月婷婷丁香| 成年女人毛片免费观看观看9| 中文字幕av在线有码专区| 99久久久亚洲精品蜜臀av| 久久中文看片网| 国产黄色小视频在线观看| 非洲黑人性xxxx精品又粗又长| 最近最新中文字幕大全电影3| 欧美不卡视频在线免费观看 | 精品一区二区三区四区五区乱码| 中文字幕高清在线视频| 婷婷精品国产亚洲av在线| 亚洲精品粉嫩美女一区| 午夜精品久久久久久毛片777| 国产aⅴ精品一区二区三区波| 欧美激情久久久久久爽电影| 国内揄拍国产精品人妻在线| 18禁裸乳无遮挡免费网站照片| www.精华液| 日韩精品中文字幕看吧| 黄色女人牲交| 久久性视频一级片| 欧美一级a爱片免费观看看 | 精品久久蜜臀av无| 成年版毛片免费区| 午夜免费观看网址| 日本一二三区视频观看| 久久人妻av系列| 精品少妇一区二区三区视频日本电影| 欧美黄色片欧美黄色片| 久久久国产成人免费| 精品一区二区三区av网在线观看| 老熟妇仑乱视频hdxx| 亚洲精品美女久久久久99蜜臀| 久久久久九九精品影院| 一级毛片女人18水好多| 天天躁夜夜躁狠狠躁躁| 俄罗斯特黄特色一大片| 97超级碰碰碰精品色视频在线观看| 99国产精品99久久久久| 国产爱豆传媒在线观看 | 亚洲一区二区三区不卡视频| 99re在线观看精品视频| 久久人妻福利社区极品人妻图片| 性欧美人与动物交配| 韩国av一区二区三区四区| 国产精品久久久久久亚洲av鲁大| 香蕉丝袜av| av片东京热男人的天堂| 欧美日韩瑟瑟在线播放| 草草在线视频免费看| 欧美在线一区亚洲| www.熟女人妻精品国产| 久久久久久免费高清国产稀缺| 丰满人妻一区二区三区视频av | 丰满人妻一区二区三区视频av | 99在线人妻在线中文字幕| 欧美成狂野欧美在线观看| 日韩欧美国产在线观看| 熟女电影av网| 国产欧美日韩精品亚洲av| 后天国语完整版免费观看| 91老司机精品| 18禁观看日本| 久久中文字幕人妻熟女| 非洲黑人性xxxx精品又粗又长| 黄色毛片三级朝国网站| 2021天堂中文幕一二区在线观| 久久中文字幕人妻熟女| 国产v大片淫在线免费观看| 特级一级黄色大片| 国产高清激情床上av| 亚洲五月天丁香| 国内精品久久久久精免费| 国产亚洲av高清不卡| 宅男免费午夜| 国产精品美女特级片免费视频播放器 | 校园春色视频在线观看| 久久香蕉精品热| 91麻豆精品激情在线观看国产| a在线观看视频网站| 九色国产91popny在线| 精品国产亚洲在线| 国产精品自产拍在线观看55亚洲| 老司机福利观看| 国产精品乱码一区二三区的特点| 色综合亚洲欧美另类图片| 久久精品成人免费网站| 人妻丰满熟妇av一区二区三区| 在线观看www视频免费| 免费在线观看完整版高清| 亚洲成av人片免费观看| 久久精品国产综合久久久| 国产野战对白在线观看| 1024视频免费在线观看| 欧美最黄视频在线播放免费| 无遮挡黄片免费观看| 少妇裸体淫交视频免费看高清 | 少妇粗大呻吟视频| 久久久精品欧美日韩精品| 两人在一起打扑克的视频| 久久精品亚洲精品国产色婷小说| 免费av毛片视频| 国产精华一区二区三区| 怎么达到女性高潮| 97碰自拍视频| 黄频高清免费视频| 丰满人妻熟妇乱又伦精品不卡| 一级黄色大片毛片| 国产一区二区激情短视频| 非洲黑人性xxxx精品又粗又长| 黑人操中国人逼视频| 亚洲真实伦在线观看| 久久中文字幕一级| 国产精品 欧美亚洲| 亚洲人成网站在线播放欧美日韩| 久久精品国产清高在天天线| 日本一二三区视频观看| 亚洲欧美日韩高清在线视频| 97碰自拍视频| 最近最新免费中文字幕在线| 91老司机精品| 欧美av亚洲av综合av国产av| 99riav亚洲国产免费| 精品国产乱子伦一区二区三区| 亚洲专区中文字幕在线| 欧美成人性av电影在线观看| 精品久久久久久久久久久久久| 亚洲中文字幕一区二区三区有码在线看 | 国产一区二区三区在线臀色熟女| 日韩欧美在线二视频| 一区二区三区激情视频| 香蕉丝袜av| 丰满人妻熟妇乱又伦精品不卡| 老司机靠b影院| 91成年电影在线观看| 狂野欧美激情性xxxx| 婷婷精品国产亚洲av| 岛国视频午夜一区免费看| 午夜激情福利司机影院| 777久久人妻少妇嫩草av网站| 久久久久久久久久黄片| 又爽又黄无遮挡网站| 久热爱精品视频在线9| 亚洲熟妇中文字幕五十中出| 久久久久性生活片| 精品不卡国产一区二区三区| 国产精品自产拍在线观看55亚洲| 黑人欧美特级aaaaaa片| 亚洲自拍偷在线| av超薄肉色丝袜交足视频| 久久热在线av| 国产精品久久久av美女十八| 亚洲色图 男人天堂 中文字幕| 在线观看舔阴道视频| 国产高清激情床上av| 给我免费播放毛片高清在线观看| 中文字幕av在线有码专区| 美女大奶头视频| 欧美成人一区二区免费高清观看 | 日本免费一区二区三区高清不卡| 色播亚洲综合网| xxx96com| 一a级毛片在线观看| 青草久久国产| 在线十欧美十亚洲十日本专区| 黄片小视频在线播放| 午夜老司机福利片| www日本在线高清视频| 91麻豆精品激情在线观看国产| bbb黄色大片| 岛国在线观看网站| 国产精品爽爽va在线观看网站| 国产成人欧美在线观看| 国产精品综合久久久久久久免费| 最近最新免费中文字幕在线| 一本综合久久免费| 十八禁网站免费在线| 亚洲欧美激情综合另类| 亚洲精品中文字幕在线视频| 日韩av在线大香蕉| 男男h啪啪无遮挡| 一a级毛片在线观看| 久久久国产成人免费| 又黄又粗又硬又大视频| 亚洲精品粉嫩美女一区| 日韩欧美国产在线观看| 精华霜和精华液先用哪个| 日本一二三区视频观看| 国内精品一区二区在线观看| 国产一区二区在线av高清观看| 成人亚洲精品av一区二区| 身体一侧抽搐| 免费看十八禁软件| 久久精品国产综合久久久| 精品国产美女av久久久久小说| 亚洲人成电影免费在线| 久久香蕉精品热| av在线天堂中文字幕| 久久午夜综合久久蜜桃| 亚洲欧美日韩无卡精品| 欧美乱妇无乱码| 熟妇人妻久久中文字幕3abv| 国产一区二区在线av高清观看| 国产v大片淫在线免费观看| 欧美三级亚洲精品| 久久久久久久精品吃奶| 看黄色毛片网站| 国产精品av视频在线免费观看| 热99re8久久精品国产| 午夜激情av网站| 琪琪午夜伦伦电影理论片6080| 国产激情久久老熟女| 日本免费一区二区三区高清不卡| 色精品久久人妻99蜜桃| 麻豆一二三区av精品| 国产免费av片在线观看野外av| 三级毛片av免费| 变态另类成人亚洲欧美熟女| 国产黄色小视频在线观看| 50天的宝宝边吃奶边哭怎么回事| 亚洲专区中文字幕在线| 亚洲aⅴ乱码一区二区在线播放 | 国产精品久久视频播放| 国产精品亚洲美女久久久| 99热只有精品国产| 中出人妻视频一区二区| 又粗又爽又猛毛片免费看| 欧美成人一区二区免费高清观看 | 国产精品综合久久久久久久免费| 午夜免费激情av| 老司机深夜福利视频在线观看| 亚洲av成人av| 久久热在线av| 丰满的人妻完整版| 人妻久久中文字幕网| 久久精品人妻少妇| 国产av又大| 成年版毛片免费区| 亚洲欧美一区二区三区黑人| 最近最新中文字幕大全电影3| 免费看a级黄色片| 男插女下体视频免费在线播放| 国产免费男女视频| 亚洲人成77777在线视频| 91大片在线观看| 99re在线观看精品视频| 成年免费大片在线观看| 伊人久久大香线蕉亚洲五| 日韩高清综合在线| 成年版毛片免费区| 亚洲精品中文字幕一二三四区| 日日夜夜操网爽| 久久精品aⅴ一区二区三区四区| 日本撒尿小便嘘嘘汇集6| 日韩中文字幕欧美一区二区| 国产成人精品久久二区二区91| 丁香六月欧美| 国产91精品成人一区二区三区| 91麻豆av在线| 午夜福利18| 在线观看日韩欧美| 我的老师免费观看完整版| 母亲3免费完整高清在线观看| 亚洲中文日韩欧美视频| 亚洲国产欧美人成| 国内精品久久久久精免费| 婷婷六月久久综合丁香| 色综合欧美亚洲国产小说| 欧美一区二区精品小视频在线| 免费看十八禁软件| 欧美激情久久久久久爽电影| 搡老妇女老女人老熟妇| 亚洲专区字幕在线| 19禁男女啪啪无遮挡网站| 久久午夜综合久久蜜桃| 欧美午夜高清在线| 国产久久久一区二区三区| 欧美av亚洲av综合av国产av| 夜夜夜夜夜久久久久| 亚洲成人久久性| 又大又爽又粗| av免费在线观看网站| 免费观看人在逋| 天堂av国产一区二区熟女人妻 | www.精华液| 国产野战对白在线观看| 欧美色欧美亚洲另类二区| 国产高清视频在线播放一区| 欧美人与性动交α欧美精品济南到| 久热爱精品视频在线9| 亚洲精品中文字幕一二三四区| 日韩欧美在线乱码| 一个人免费在线观看的高清视频| 天堂av国产一区二区熟女人妻 | svipshipincom国产片| 日韩成人在线观看一区二区三区| 成年免费大片在线观看| 欧美日本亚洲视频在线播放| 欧美色欧美亚洲另类二区| 日韩免费av在线播放| 男插女下体视频免费在线播放| 欧美日韩精品网址| 免费人成视频x8x8入口观看| 香蕉久久夜色| 欧美日韩乱码在线| 一本大道久久a久久精品| a级毛片a级免费在线| 国产激情欧美一区二区| 日韩三级视频一区二区三区| 精品国产乱子伦一区二区三区| 宅男免费午夜| 国产又黄又爽又无遮挡在线| 色综合亚洲欧美另类图片| 欧美另类亚洲清纯唯美| 亚洲成人中文字幕在线播放| 久久草成人影院| 国产av在哪里看| 黄色片一级片一级黄色片| 亚洲精品中文字幕在线视频| 国产熟女午夜一区二区三区| 三级国产精品欧美在线观看 | 两个人看的免费小视频| 深夜精品福利| 成人18禁高潮啪啪吃奶动态图| 久久久久久人人人人人| 99riav亚洲国产免费| 老熟妇乱子伦视频在线观看| 亚洲中文av在线| 欧洲精品卡2卡3卡4卡5卡区| 婷婷六月久久综合丁香| 中文字幕最新亚洲高清| 岛国视频午夜一区免费看| 天堂影院成人在线观看| 18禁国产床啪视频网站| 久久久久久久久免费视频了| 亚洲精品美女久久久久99蜜臀| 亚洲人成网站高清观看| 深夜精品福利| 国产激情欧美一区二区| 色综合站精品国产| 色综合婷婷激情| 色综合站精品国产| 亚洲国产日韩欧美精品在线观看 | 天堂动漫精品| 日韩大尺度精品在线看网址| 亚洲精品国产精品久久久不卡| 亚洲在线自拍视频| www.999成人在线观看| 成人18禁高潮啪啪吃奶动态图| 国产私拍福利视频在线观看| 成人18禁高潮啪啪吃奶动态图| 国产精品一及| 欧美久久黑人一区二区| 五月玫瑰六月丁香| 国产精品一区二区免费欧美| 国产精品一及| 久久久精品大字幕| 久久久久久国产a免费观看| 日日摸夜夜添夜夜添小说| 日韩三级视频一区二区三区| 成人精品一区二区免费| 听说在线观看完整版免费高清| 国产激情偷乱视频一区二区| 亚洲精品粉嫩美女一区| 麻豆一二三区av精品| 亚洲av日韩精品久久久久久密| 真人做人爱边吃奶动态| 精品久久久久久久毛片微露脸| 日韩欧美在线乱码| 国产亚洲精品久久久久5区| 99国产精品一区二区三区| 欧美成人性av电影在线观看| av福利片在线观看| 男人的好看免费观看在线视频 | e午夜精品久久久久久久| 国产亚洲精品第一综合不卡| 成人三级做爰电影| 中文字幕人成人乱码亚洲影| 国产精品 欧美亚洲| 国产一区在线观看成人免费| 精品久久久久久成人av| 国产蜜桃级精品一区二区三区| 国产av一区在线观看免费| 1024香蕉在线观看| 国内精品久久久久精免费| 亚洲精品色激情综合| 50天的宝宝边吃奶边哭怎么回事| 国产午夜精品久久久久久| 国产精品野战在线观看| 欧美日韩亚洲综合一区二区三区_| 欧美乱色亚洲激情| 老鸭窝网址在线观看| 一级黄色大片毛片| 好男人在线观看高清免费视频| 久久久久久九九精品二区国产 | 国产又色又爽无遮挡免费看| 国内久久婷婷六月综合欲色啪| 丰满的人妻完整版| 看免费av毛片| 亚洲人成77777在线视频| 国产精品亚洲美女久久久| 亚洲av第一区精品v没综合| 日韩精品中文字幕看吧| 久久久久九九精品影院| 成人高潮视频无遮挡免费网站| 性色av乱码一区二区三区2| 岛国在线观看网站| 十八禁人妻一区二区| 亚洲中文日韩欧美视频| 久久精品综合一区二区三区| 无限看片的www在线观看| 两个人视频免费观看高清| 亚洲av五月六月丁香网| 毛片女人毛片| 18禁观看日本| 狂野欧美激情性xxxx| 国内揄拍国产精品人妻在线| 亚洲人成网站高清观看| 欧美性猛交黑人性爽| 亚洲专区字幕在线| 国产精品久久视频播放| 人妻夜夜爽99麻豆av| 亚洲色图 男人天堂 中文字幕| 999久久久国产精品视频| av片东京热男人的天堂| 亚洲精品久久成人aⅴ小说| 伦理电影免费视频| 19禁男女啪啪无遮挡网站| 黑人操中国人逼视频| 日日干狠狠操夜夜爽| 亚洲欧美精品综合一区二区三区| 日韩大码丰满熟妇| 国产精品综合久久久久久久免费| 女人被狂操c到高潮| 国产不卡一卡二| 高清在线国产一区| 国产一区二区在线av高清观看| 韩国av一区二区三区四区| 成人午夜高清在线视频| 国产亚洲精品久久久久久毛片| 午夜精品久久久久久毛片777| 婷婷精品国产亚洲av在线| 欧美一级毛片孕妇| 精品乱码久久久久久99久播| 精品久久久久久久人妻蜜臀av| 欧美日韩乱码在线| 国产亚洲av高清不卡| 在线观看日韩欧美| 97人妻精品一区二区三区麻豆| svipshipincom国产片| 一二三四社区在线视频社区8| 精品久久久久久久人妻蜜臀av| 午夜亚洲福利在线播放| 久久香蕉精品热| 久99久视频精品免费| 欧美日本亚洲视频在线播放| 亚洲第一电影网av| 床上黄色一级片| 国产精品亚洲美女久久久| 国产精品 国内视频| 亚洲精品在线美女| 亚洲欧美激情综合另类| 亚洲美女视频黄频| 中文字幕久久专区| 香蕉丝袜av| av福利片在线观看| 女警被强在线播放| 男女下面进入的视频免费午夜| 观看免费一级毛片| 最近视频中文字幕2019在线8| 国产精品乱码一区二三区的特点| 久久性视频一级片| 国产三级在线视频| 在线播放国产精品三级| 亚洲av日韩精品久久久久久密| 欧美精品啪啪一区二区三区| 成年人黄色毛片网站| 欧美又色又爽又黄视频| 午夜成年电影在线免费观看| 亚洲av成人av| 日本熟妇午夜| 成人手机av| 人人妻人人澡欧美一区二区| 久久久久精品国产欧美久久久| 麻豆国产97在线/欧美 | 黄色视频,在线免费观看| 777久久人妻少妇嫩草av网站| 国产熟女午夜一区二区三区| av国产免费在线观看| 欧美大码av| 精品久久久久久久毛片微露脸| 老司机在亚洲福利影院| 在线观看免费午夜福利视频| 在线观看一区二区三区| 国产激情欧美一区二区| 亚洲一码二码三码区别大吗| 成人av一区二区三区在线看| 国产v大片淫在线免费观看| 岛国视频午夜一区免费看| 亚洲国产日韩欧美精品在线观看 | 两个人视频免费观看高清| 在线观看www视频免费| 国产亚洲欧美98| 宅男免费午夜| 亚洲一区二区三区不卡视频| 在线观看免费日韩欧美大片| 欧美日本亚洲视频在线播放| 最近最新中文字幕大全电影3| 天天添夜夜摸| 国产亚洲精品久久久久久毛片| 久久久久性生活片| 久久精品国产清高在天天线| 欧美乱码精品一区二区三区| 丝袜人妻中文字幕| 2021天堂中文幕一二区在线观| 亚洲天堂国产精品一区在线| 俄罗斯特黄特色一大片| 国产精品久久久久久久电影 | 亚洲一卡2卡3卡4卡5卡精品中文| 成人三级黄色视频| 欧美久久黑人一区二区| 午夜亚洲福利在线播放| 身体一侧抽搐| 亚洲av电影不卡..在线观看| 女生性感内裤真人,穿戴方法视频| 婷婷亚洲欧美| 黄色片一级片一级黄色片| 久久亚洲精品不卡| 麻豆一二三区av精品| 国产精品 国内视频| 伊人久久大香线蕉亚洲五| 国产久久久一区二区三区| 欧美性猛交黑人性爽| 久热爱精品视频在线9| 免费在线观看亚洲国产| 亚洲成人国产一区在线观看| 国产精品亚洲美女久久久| 91国产中文字幕| 色在线成人网| 一级毛片女人18水好多| 亚洲国产精品成人综合色| 一区二区三区高清视频在线| 法律面前人人平等表现在哪些方面| 色综合站精品国产| 在线观看免费视频日本深夜| 首页视频小说图片口味搜索| 深夜精品福利| 国产精品国产高清国产av| 一进一出抽搐动态| 久久天堂一区二区三区四区| 久久精品亚洲精品国产色婷小说| 亚洲色图 男人天堂 中文字幕| 国产一区二区在线观看日韩 | 久久久精品国产亚洲av高清涩受| 亚洲激情在线av| 亚洲专区字幕在线| 麻豆成人午夜福利视频| 在线观看一区二区三区| 午夜日韩欧美国产| 亚洲精品久久国产高清桃花| 亚洲美女黄片视频| 中文字幕久久专区| 老鸭窝网址在线观看| av天堂在线播放| 99热这里只有是精品50| 亚洲aⅴ乱码一区二区在线播放 | 欧洲精品卡2卡3卡4卡5卡区| 国产一区二区三区在线臀色熟女| 亚洲国产高清在线一区二区三| www国产在线视频色| 国产成年人精品一区二区| 中文字幕av在线有码专区| 欧美日韩乱码在线| 婷婷精品国产亚洲av| 精品欧美国产一区二区三| av天堂在线播放| √禁漫天堂资源中文www| 亚洲无线在线观看| 亚洲 欧美 日韩 在线 免费| 午夜福利成人在线免费观看| videosex国产| 亚洲国产高清在线一区二区三| 精品日产1卡2卡| 女生性感内裤真人,穿戴方法视频| 又紧又爽又黄一区二区| 欧美中文日本在线观看视频| 亚洲精品粉嫩美女一区| 小说图片视频综合网站| 老司机午夜福利在线观看视频| 亚洲中文av在线| 亚洲中文字幕日韩| 成熟少妇高潮喷水视频| 露出奶头的视频| 亚洲电影在线观看av| 校园春色视频在线观看| 听说在线观看完整版免费高清| 老汉色∧v一级毛片| √禁漫天堂资源中文www| 香蕉丝袜av| 天天躁夜夜躁狠狠躁躁| 日本一本二区三区精品| 啪啪无遮挡十八禁网站| 久久人人精品亚洲av|