資源描述:
《教育評價(jià)新視野》由會員上傳分享,免費(fèi)在線閱讀,更多相關(guān)內(nèi)容在行業(yè)資料-天天文庫。
教育評價(jià)新視野I龔春燕等:大數(shù)據(jù)評估促進(jìn)教育決策科學(xué)化中小學(xué)管理導(dǎo)讀如何讓大數(shù)據(jù)為教育管理和決策服務(wù)?2009年以來,重慶已監(jiān)測義務(wù)教育學(xué)校1955所,師生約40萬人次,獲取了數(shù)億數(shù)據(jù),構(gòu)建了系列模型;綜合素質(zhì)電子化平臺已被全市258所高中采用。重慶教育評估院龔春燕院長親自為您講述重慶大數(shù)據(jù)的來與往。大數(shù)據(jù)評估促進(jìn)教育決策科學(xué)化/龔春燕何懷金賈玲盧錦運(yùn)教育監(jiān)測評估的最終目的是為了改進(jìn)教育教學(xué),提高教育質(zhì)量,為學(xué)生提供更適合的教育。但目前多數(shù)地區(qū)和學(xué)校依然采用對考試原始分?jǐn)?shù)進(jìn)行簡單排序的方法來進(jìn)行教育評估,其評價(jià)方式單一、評價(jià)指標(biāo)和內(nèi)容窄化、評價(jià)結(jié)果被誤用和濫用,給學(xué)生身心發(fā)育和教育發(fā)展帶來了諸多不利影響.如何在理念、方法、技術(shù)上對教育質(zhì)量監(jiān)測評價(jià)進(jìn)行改革?大數(shù)據(jù)具有體量大(Volume)、類型雜(Variety)、速度快(Velocity)、價(jià)值高(Value)和真實(shí)性強(qiáng)(veracity)的"5V”特點(diǎn),必將在教育評估中扮演重要角色.重慶市自2009年首次開展基礎(chǔ)教育質(zhì)量監(jiān)測以來,已經(jīng)逐漸形成了一套較完整的大數(shù)據(jù)采集、模型處理、結(jié)果使用的技術(shù)和方法,促進(jìn)了學(xué)校管理的改進(jìn)與區(qū)域教育的科學(xué)發(fā)展.一優(yōu)化方式:建構(gòu)大數(shù)據(jù)采集平臺1.建立信息化監(jiān)測評價(jià)平臺2009年,重慶市教育評估院在教育部基礎(chǔ)教育質(zhì)量監(jiān)測中心和北京師范大學(xué)"認(rèn)知神經(jīng)科學(xué)與學(xué)習(xí)"國家重點(diǎn)實(shí)驗(yàn)室的幫助下,首次實(shí)施了重慶市基礎(chǔ)教育質(zhì)量監(jiān)測.此后,為提高監(jiān)測效率與科學(xué)化水平,我們建立了重慶市基礎(chǔ)教育質(zhì)量監(jiān)測數(shù)據(jù)庫,將日常評價(jià)與大規(guī)模監(jiān)測相結(jié)合,自主研發(fā)了信息化監(jiān)測評價(jià)平臺(見圖1).
1圖1:重慶市基礎(chǔ)教育質(zhì)量監(jiān)測信息平臺架構(gòu)圖1.研發(fā)數(shù)據(jù)分析軟件平臺我們廣泛調(diào)研了不同類型、不同層次的學(xué)校,選取了不同經(jīng)濟(jì)發(fā)展水平的三個(gè)區(qū)縣和20所學(xué)校作為測評實(shí)驗(yàn)基地。通過對這些實(shí)驗(yàn)基地的教育質(zhì)量監(jiān)測與評價(jià)的實(shí)踐和追蹤,研發(fā)了用于全市監(jiān)測評價(jià)的軟件平臺,提高了工作效率,實(shí)現(xiàn)了分析及報(bào)告生成自動(dòng)化,主要解決了以下幾方面問題:(1)采用圖像識別技術(shù),實(shí)現(xiàn)紙質(zhì)數(shù)據(jù)采集自動(dòng)化我們針對相關(guān)軟件售價(jià)太高,無法實(shí)現(xiàn)對題卡合一問卷的自動(dòng)化識別的情況,采用圖像識別技術(shù),自主研發(fā)了網(wǎng)上閱卷掃描識別系統(tǒng),實(shí)現(xiàn)了監(jiān)測所需的多題本合一、題卡合一、主觀題分段評分的特殊功能.(2)采用網(wǎng)絡(luò)問卷填答,實(shí)現(xiàn)教師數(shù)據(jù)采集有序化基于紙質(zhì)問卷填答方式受填答時(shí)空限制、后期處理復(fù)雜、使用成本高的不足,我們研發(fā)了易于操作使用并與后臺數(shù)據(jù)分析清理相結(jié)合的網(wǎng)絡(luò)問卷系統(tǒng).(3)采用人工智能技術(shù),實(shí)現(xiàn)超量數(shù)據(jù)清理精準(zhǔn)化我們通過研發(fā)監(jiān)測數(shù)據(jù)清理軟件,將原本借助于其他軟件需要由20余人一個(gè)月完成的清理工作,縮短為1人一周就能夠完成。
2(4)構(gòu)建常用分析模型,實(shí)現(xiàn)分析生成報(bào)告自動(dòng)化為了確保評價(jià)結(jié)果的針對性和準(zhǔn)確性,需要有科學(xué)的分析方法和完善的指標(biāo)體系.我們通過挖掘和提煉采集到的數(shù)據(jù),構(gòu)建了一系列分析模型,并在此基礎(chǔ)上編寫分析軟件,自動(dòng)生成近千份學(xué)校和區(qū)縣報(bào)告、數(shù)十萬份學(xué)生綜合素質(zhì)報(bào)告.這些模型包括:義務(wù)教育均衡系數(shù)測算模型、城鄉(xiāng)一體化教育資源配置模型、基于IRT項(xiàng)目反應(yīng)理論的量尺分?jǐn)?shù)合成模型、多維教學(xué)評價(jià)模型、學(xué)校辦學(xué)規(guī)模測算模型等。例如:通過構(gòu)建"學(xué)生學(xué)習(xí)進(jìn)步增值評價(jià)模型",對學(xué)?;?qū)W生的進(jìn)步程度進(jìn)行量化評價(jià)和價(jià)值判斷,促使學(xué)校關(guān)注每一個(gè)學(xué)生的進(jìn)步和發(fā)展.1.構(gòu)建科學(xué)的監(jiān)測工具庫工具是評價(jià)的基礎(chǔ),我們的工具研發(fā)專家團(tuán)隊(duì)按照國際通行的程序,召開了150余次研討會,最終研制出了八類60余套教育教學(xué)質(zhì)量評價(jià)工具.二明確方向:確定大數(shù)據(jù)采集范圍六年來,我們共監(jiān)測義務(wù)教育階段學(xué)校1955所,師生約40萬人次.2011年、2012年、2014年、2015年,我們在全市范圍內(nèi)選擇100所不同層次的學(xué)校進(jìn)行監(jiān)測,每次涉及學(xué)生約8000名,參與學(xué)校的所有校長、干部、教師全員參測,每次約6000人.2010年、2013年全市40個(gè)區(qū)縣的1400余所學(xué)校、1400余名校長、12000余名學(xué)校管理干部、23000多名教師、14.5萬名學(xué)生參加了監(jiān)測,同時(shí)還對四個(gè)區(qū)縣的所有學(xué)校約150所學(xué)校進(jìn)行監(jiān)測,獲取了數(shù)億的數(shù)據(jù).1.采集師生日常教育教學(xué)數(shù)據(jù)我們通過日常數(shù)據(jù)采集系統(tǒng),采集教師日常教育教學(xué)信息、學(xué)生日常學(xué)習(xí)與生活的關(guān)鍵信息、學(xué)生的成長記錄,了解每個(gè)學(xué)生的過程性發(fā)展情況。2.采集多元評價(jià)主體的評價(jià)數(shù)據(jù)我們通過構(gòu)建學(xué)生、家長、教師、學(xué)校管理者參與的綜合素質(zhì)評價(jià)電子平臺,形成多主體共同參與的"評價(jià)聯(lián)合體",實(shí)現(xiàn)了評價(jià)主體的多元化,建立了良好的"多方協(xié)作的互動(dòng)關(guān)系”,改變了已往由教師單一評價(jià)學(xué)生的狀況,使評價(jià)更加全面,真正起到激勵(lì)和促進(jìn)學(xué)生學(xué)習(xí)的作用.3.采集定性數(shù)據(jù)和定量數(shù)據(jù)我們通過大數(shù)據(jù)分析建立模型,發(fā)現(xiàn)教育教學(xué)中存在的普遍性規(guī)律,診斷教育中存在的問題,定量地評價(jià)教學(xué)質(zhì)量;同時(shí),學(xué)校質(zhì)量標(biāo)準(zhǔn)又提供了定性的評價(jià)手段,關(guān)注學(xué)生、教師和學(xué)校在“質(zhì)"的方面的發(fā)展。4.采集學(xué)生綜合素質(zhì)評價(jià)數(shù)據(jù)我們研發(fā)的學(xué)生綜合素質(zhì)評價(jià)平臺,以學(xué)生表現(xiàn)為評價(jià)內(nèi)容、以"增值"幅度為評價(jià)標(biāo)準(zhǔn),堅(jiān)持評價(jià)目標(biāo)統(tǒng)一性與差異性的有機(jī)結(jié)合,實(shí)時(shí)采集學(xué)生成長、教師教育教學(xué)、學(xué)校管理等信息,并用軟件對相關(guān)信息進(jìn)行自動(dòng)分析,為每位學(xué)生和教師定期或不定期地生成綜合素質(zhì)成長報(bào)告。2012年以來,綜合素質(zhì)電子平臺被全市258所高中學(xué)校采用,對所有學(xué)生的道德與公民、學(xué)業(yè)與創(chuàng)新
3、運(yùn)動(dòng)與健康、溝通與合作、審美與、身體素質(zhì)等進(jìn)行全面評價(jià),每學(xué)期為每位學(xué)生生成發(fā)展報(bào)告.目前,這一平臺已為重慶市考試院提供了60多萬份高中學(xué)生綜合素質(zhì)報(bào)告,為高校招生提供了參考.三有效使用:讓大數(shù)據(jù)助推教育發(fā)展1.形成三級監(jiān)測評價(jià)機(jī)制我們建立了全市、區(qū)縣和學(xué)校三級監(jiān)測評價(jià)機(jī)制.在市級評價(jià)中,重點(diǎn)關(guān)注統(tǒng)籌城鄉(xiāng)均衡的情況,通過抽樣采集、分析全市數(shù)據(jù),向各級教育行政部門提供政策建議,促進(jìn)城鄉(xiāng)教育資源的合理配置,統(tǒng)籌城鄉(xiāng)教育均衡發(fā)展。在區(qū)縣評價(jià)中,主要關(guān)注縣域均衡問題,組織實(shí)施針對本區(qū)縣的教育評價(jià)工作.在對學(xué)校進(jìn)行的評價(jià)中,減少傳統(tǒng)意義上的統(tǒng)考統(tǒng)測,樹立新的質(zhì)量觀,對學(xué)生進(jìn)行過程性評價(jià),逐步實(shí)現(xiàn)以特色辦學(xué)為前提的校際發(fā)展的均衡。評價(jià)結(jié)果會反饋給多個(gè)對象,如教育行政部門、學(xué)校、教師和學(xué)生。具體如圖2所示.圖2:多元反饋機(jī)制2.服務(wù)政府決策五年來,我們?yōu)橹貞c市教委提供了教育質(zhì)量監(jiān)測報(bào)告40余份、區(qū)縣基礎(chǔ)教育質(zhì)量監(jiān)測報(bào)告100余份.針對報(bào)告提出的問題和建議,市教委出臺了《重慶市教育委員會關(guān)于印發(fā)減輕義務(wù)教育階段學(xué)生過重課業(yè)負(fù)擔(dān),深入推進(jìn)素質(zhì)教育十項(xiàng)規(guī)定的通知》(簡稱"減負(fù)十條")等10余個(gè)教育行政決策文件,有效地減輕了學(xué)生學(xué)業(yè)負(fù)擔(dān),改革了課程設(shè)置,改變了教師教學(xué)行為,提升了教育質(zhì)量.2013年教育部監(jiān)測數(shù)據(jù)表
4明,在全國范圍來看,重慶是整體負(fù)擔(dān)最輕的省市之一,質(zhì)量高于同等地區(qū).我們通過對數(shù)億數(shù)據(jù)的分析、提煉,初步構(gòu)建了可測、可評的教育質(zhì)量指標(biāo)體系,制定了《重慶市義務(wù)教育階段學(xué)校質(zhì)量標(biāo)準(zhǔn)》.其中,我們確定了20個(gè)測評學(xué)校質(zhì)量的指標(biāo),含5個(gè)指數(shù)、8個(gè)滿意度百分比、7個(gè)學(xué)校常規(guī)指標(biāo),包含過程性質(zhì)量和結(jié)果性質(zhì)量兩個(gè)板塊,共10項(xiàng)內(nèi)容(見圖3).而我院也成為國家標(biāo)準(zhǔn)化試點(diǎn)中唯一個(gè)教育單位(全國共98個(gè)試點(diǎn)單位).圖3:重慶市義務(wù)教育階段學(xué)校質(zhì)量標(biāo)準(zhǔn)內(nèi)容我們構(gòu)建的一系列模型在多個(gè)區(qū)縣得到了檢驗(yàn),在提升教學(xué)質(zhì)量.教師專業(yè)能力等方面成效顯著.其中,義務(wù)教育均衡發(fā)展測算建議得到國務(wù)院有關(guān)領(lǐng)導(dǎo)的批示,相關(guān)計(jì)算模型被教育部采納,并在全國義務(wù)教育發(fā)展基本均衡縣(市、區(qū))督導(dǎo)4僉查中得到了應(yīng)用.數(shù)十個(gè)兄弟省市單位到我市就本研究進(jìn)行深度交流和學(xué)習(xí).區(qū)縣教育行政部門使用評價(jià)報(bào)告,對相關(guān)工作進(jìn)行了有針對性的改進(jìn)。如重慶市某區(qū)詳細(xì)解讀了近600頁的基礎(chǔ)教育質(zhì)量監(jiān)測報(bào)告,盡管該區(qū)多項(xiàng)評價(jià)指標(biāo)的指數(shù)排在全市前列,但區(qū)教育行政部門從報(bào)告中找到若干需要改進(jìn)的問題,如針對區(qū)教師培訓(xùn)中"39.6%的教師認(rèn)為系統(tǒng)性不夠,29.8%的教師認(rèn)為針對性不強(qiáng)”的現(xiàn)狀,區(qū)教師培訓(xùn)單位實(shí)施"先調(diào)查再設(shè)計(jì)培訓(xùn)菜單”的方式加以改進(jìn);針對教師隨年齡增長而倦怠感上升的問題,全區(qū)啟動(dòng)了教師心理健康培訓(xùn)工作;針對家庭教育中的問題,全區(qū)開展家校共育工程,社會對區(qū)教育的滿意度大增.
51.促進(jìn)學(xué)校改革大數(shù)據(jù)庫中存儲了來自教師、學(xué)生、家長的海量數(shù)據(jù),信息化分析平臺通過模型自動(dòng)分析這些數(shù)據(jù)之間的相互關(guān)系和對學(xué)生學(xué)習(xí)質(zhì)量的影響,找到有明顯影響的行為指標(biāo),總結(jié)其規(guī)律,并存儲到教育教學(xué)規(guī)律結(jié)果庫中,供校長和一線教師研究和學(xué)習(xí).重慶市教育評估院為學(xué)校做的評價(jià)報(bào)告圖文并茂,約有300頁,有效診斷了教育質(zhì)量現(xiàn)狀,既有學(xué)業(yè)質(zhì)量,也有學(xué)生的品德、體育、心理、興趣方面的情況;既有學(xué)校管理的診斷報(bào)告,也有教師教學(xué)行為的評估,為學(xué)校管理、教師教育教學(xué)、學(xué)生成長提供了科學(xué)依據(jù).許多學(xué)校根據(jù)監(jiān)測結(jié)果,改變了管理方式,有針對性地實(shí)施了一系列改進(jìn)措施.有的中小學(xué)組織教師認(rèn)真分析評估報(bào)告達(dá)一個(gè)多月時(shí)間,還有學(xué)校開展了針對家長的體驗(yàn)式培訓(xùn)I,促進(jìn)了家長觀念的改變.四直面挑戰(zhàn):正視大數(shù)據(jù)評估的推廣瓶頸基于大數(shù)據(jù)進(jìn)行教育評價(jià),其方向無疑是正確的,但推廣的難度也是客觀存在的.其一,決策者的認(rèn)識水平。一個(gè)區(qū)域是否使用和如何使用大數(shù)據(jù)的分析結(jié)果,與教育行政領(lǐng)導(dǎo)對數(shù)據(jù)的信任程度直接有關(guān).其二,與高考,中考的整合。尤其是在高中綜合素質(zhì)評價(jià)結(jié)果成為高校招生錄取的參考內(nèi)容后,如何保證評價(jià)結(jié)果的真實(shí)性、公平性,還有待進(jìn)一步研究.其三,成本問題.不少邊遠(yuǎn)學(xué)校信息化設(shè)備落后,人員信息化素養(yǎng)不高,即使通過軟件解決了大部分成本問題,但客戶端計(jì)算機(jī)、實(shí)現(xiàn)紙質(zhì)試卷數(shù)字化的掃描儀、學(xué)校上網(wǎng)費(fèi)用、校園網(wǎng)建設(shè)等成本也較高.其四,專業(yè)指導(dǎo)力量問題。對結(jié)果報(bào)告發(fā)現(xiàn)的問題和規(guī)律,如何有針對性地采取有效措施,改進(jìn)學(xué)校管理、教師教育教學(xué)、學(xué)生成長,需要有關(guān)教育教學(xué)專家指導(dǎo),建立結(jié)果運(yùn)用的指導(dǎo)改進(jìn)機(jī)制.其五,結(jié)果反饋問題。繼續(xù)研發(fā)移動(dòng)應(yīng)用平臺,加強(qiáng)評價(jià)結(jié)果的智能與及時(shí)反饋,實(shí)現(xiàn)個(gè)性化定制評價(jià),真正通過數(shù)據(jù)讀懂學(xué)生,將成為我們研究的重點(diǎn).