多層次高校試卷質(zhì)量評(píng)價(jià)研究

時(shí)間:2022-06-19 03:21:57

導(dǎo)語(yǔ):多層次高校試卷質(zhì)量評(píng)價(jià)研究一文來(lái)源于網(wǎng)友上傳,不代表本站觀點(diǎn),若需要原創(chuàng)文章可咨詢客服老師,歡迎參考。

多層次高校試卷質(zhì)量評(píng)價(jià)研究

摘要:針對(duì)現(xiàn)有試卷質(zhì)量科學(xué)性不足、分析指標(biāo)不一、評(píng)價(jià)層次單一的特點(diǎn),運(yùn)用經(jīng)典測(cè)量理論(CTT)和SPSS軟件,探索多層次高校試卷質(zhì)量評(píng)價(jià)體系。以某高?!缎睦斫y(tǒng)計(jì)學(xué)》課程為例,從宏觀的學(xué)生成績(jī)分析、整體試卷分析,到中觀層面的題型、章節(jié)模塊、能力要求分析,再到微觀層面的試題分析,全面反映學(xué)生的成績(jī)與試卷質(zhì)量情況,并能根據(jù)分析的結(jié)果給師生的教與學(xué)提供有效的反饋,也為試題庫(kù)的修改和完善提供量化的參考依據(jù)。

關(guān)鍵詞:試卷質(zhì)量分析;經(jīng)典測(cè)量理論;宏觀;中觀;微觀

對(duì)于考試的監(jiān)控與評(píng)價(jià)是教學(xué)質(zhì)量管理的重要一環(huán)。目前學(xué)者們重點(diǎn)關(guān)注基礎(chǔ)教育階段的教育質(zhì)量監(jiān)測(cè),著力建設(shè)國(guó)家教育質(zhì)量監(jiān)測(cè)體系來(lái)監(jiān)測(cè)學(xué)生的學(xué)業(yè)情況[1]。高等學(xué)校的校內(nèi)課程考試的監(jiān)控與分析是高校教育管理體制的重要組成部分,也是目前高校教學(xué)評(píng)價(jià)中心的重要工作內(nèi)容,高校教育質(zhì)量監(jiān)測(cè)和評(píng)價(jià)體系的構(gòu)建也是大勢(shì)所趨[2]。但目前高校教育質(zhì)量監(jiān)測(cè)體系中的考試質(zhì)量分析系統(tǒng)化研究比較匱乏,存在形式化和簡(jiǎn)單化特點(diǎn)。本研究擬從宏觀、中觀、微觀三個(gè)層面,構(gòu)建多層次高校試卷質(zhì)量評(píng)價(jià)體系。

一、高校課程考試試卷質(zhì)量評(píng)價(jià)現(xiàn)狀

高校課程考試是以課程考試大綱規(guī)定的合格標(biāo)準(zhǔn)為參照的水平考試,某次考試后的分?jǐn)?shù)不僅是評(píng)定學(xué)生學(xué)業(yè)成就的重要參照,也是評(píng)價(jià)教師教學(xué)效果和改進(jìn)教學(xué)工作的主要依據(jù)。筆者對(duì)搜集到的高校目前正在使用的考試試卷分析項(xiàng)目進(jìn)行對(duì)比和剖析,發(fā)現(xiàn)絕大部分高校課程考試的試卷分析的內(nèi)容都是圍繞以下三個(gè)方面的內(nèi)容進(jìn)行:一是課程教學(xué)基本情況介紹,包括課程名稱、任課教師、專業(yè)班級(jí)、考核方式等;二是考試成績(jī)總分的概況,包括總分平均數(shù)、最高分、最低分、及格率、分?jǐn)?shù)段比例、直條圖等;三是對(duì)試卷質(zhì)量的主觀分析,如整體難度、與大綱符合程度、錯(cuò)誤知識(shí)點(diǎn)分析等。少數(shù)學(xué)?;诮?jīng)典測(cè)量理論(CTT)對(duì)試卷質(zhì)量進(jìn)行了量化分析,報(bào)告了試卷的正態(tài)性、整體難度值和整體區(qū)分度等[3,4]。

二、高校課程考試試卷質(zhì)量評(píng)價(jià)存在的問(wèn)題

通過(guò)以上分析,目前高??荚囋嚲矸治龃嬖谝韵聨追矫娴膯?wèn)題:一是試卷分析的主觀化分析較多而量化信息較少;二是側(cè)重對(duì)考試結(jié)果的分析而忽略了對(duì)試卷本身命題質(zhì)量的分析;三是試卷整體情況的宏觀分析居多,題型分類、知識(shí)點(diǎn)分類和能力分類等中觀層面的分析和每一道試題的微觀分析極少?;谀壳把芯康牟蛔悖瑸樘嵘咝=處煹目荚囋u(píng)價(jià)能力和素養(yǎng),本文基于CTT進(jìn)行多層次高校課程考試試卷分析探索,為廣大高校教師進(jìn)行科學(xué)的試卷分析提供一定的參考。

三、基于CTT理論的試卷質(zhì)量評(píng)價(jià)體系構(gòu)建

(一)學(xué)生成績(jī)統(tǒng)計(jì)分析模塊和試卷整體分析模塊。主要實(shí)現(xiàn)對(duì)成績(jī)的各個(gè)統(tǒng)計(jì)值的計(jì)算,如最高分、最低分、平均分、標(biāo)準(zhǔn)差、偏度、峰度、信度和效度等指標(biāo)。旨在從宏觀層面了解學(xué)生分?jǐn)?shù)的總體分布形態(tài)和試卷整體的科學(xué)化指標(biāo)。(二)試題類型、考查內(nèi)。容及能力層級(jí)分析模塊主要實(shí)現(xiàn)從試題類型、章節(jié)內(nèi)容和能力要求三個(gè)不同視角對(duì)試卷進(jìn)行中觀層面的分析。采用難度分析和區(qū)分度分析指標(biāo),并將定量的分析結(jié)果定性化,向教師提出合理的建議。(三)試題分析模塊。主要實(shí)現(xiàn)從微觀層面對(duì)單個(gè)試題的難度和區(qū)分度的分析。旨在通過(guò)一定的標(biāo)準(zhǔn)來(lái)判斷試題質(zhì)量的好壞,從而為下次組卷和試題庫(kù)建設(shè)提供一定的參考。

四、《心理統(tǒng)計(jì)學(xué)》課程試卷分析實(shí)例

(一)宏觀層面分析。宏觀層面的分析,這里主要對(duì)考生考試總分的集中趨勢(shì)、離散趨勢(shì)、分布形態(tài)、難度、信度等進(jìn)行評(píng)估。通過(guò)表1可知,本次考試整體上較為容易,分?jǐn)?shù)分布呈負(fù)偏態(tài),題目一致性程度較高。研究還發(fā)現(xiàn)入學(xué)前是理科的考生分?jǐn)?shù)顯著高于入學(xué)前是文科的考生。(二)中觀層面的分析。中觀層面的分析是從不同的角度對(duì)試題的屬性進(jìn)行歸類,如按試題類型、章節(jié)內(nèi)容及能力要求來(lái)揭示學(xué)生對(duì)不同屬性類別題目的反應(yīng)特征[5]。從表2的結(jié)果中發(fā)現(xiàn),從題型的角度來(lái)分析,多選題的難度最大而簡(jiǎn)答題的難度最小,填空題和多選題的區(qū)分度大而計(jì)算題的區(qū)分度小;從內(nèi)容角度來(lái)分析,“方差分析”部分的難度最大而“相關(guān)關(guān)系”和“統(tǒng)計(jì)圖表”的難度最小,緒論部分的區(qū)分度大而卡方檢驗(yàn)部分區(qū)分度小;從能力角度來(lái)分析,需熟悉的題目難度小而需掌握的題目難度相對(duì)較大,區(qū)分度都較高。(三)微觀層面的分析。試卷的質(zhì)量分析,還應(yīng)包括對(duì)構(gòu)成測(cè)驗(yàn)的各個(gè)測(cè)驗(yàn)題目進(jìn)行質(zhì)量分析。進(jìn)行微觀層面的分析是考生對(duì)具體測(cè)試題反應(yīng)的量化特征進(jìn)行分析,不僅可以了解學(xué)生對(duì)每一題的掌握情況,還能對(duì)命題的質(zhì)量進(jìn)行分析。如表3所示,填空題10、單選題5和6、判斷題2和9等題目非常容易,填空題13和多選題9、10較難。區(qū)分度低于0.2的項(xiàng)目都是鑒別力低的題目,特別是單選題2、6,填空題10、判斷題3等題目是消極區(qū)分,這些題目都不能很好地區(qū)分能力高和能力低的被試,需結(jié)合考點(diǎn)考慮是否刪除。

五、結(jié)束語(yǔ)

從宏觀層面來(lái)看,整體試卷難度值為77.40,分?jǐn)?shù)分布呈負(fù)偏態(tài),綜合這兩個(gè)指標(biāo)可以得出學(xué)生對(duì)試卷的總體掌握程度較好,相對(duì)來(lái)說(shuō)高分段的學(xué)生偏多。另外內(nèi)部一致性信度較高(α=0.83),說(shuō)明題目間在功能上一致性的程度較高。關(guān)于是否要報(bào)告信度及報(bào)告哪種信度可能因需而不同。有人認(rèn)為高校期末考試還沒(méi)有像高考等考試那樣重要到計(jì)算信度的程度,但高校教師需要了解信度的知識(shí),也需要了解內(nèi)部一致性信度不代表測(cè)驗(yàn)的穩(wěn)定性和復(fù)本一致性[6]。關(guān)于效度如何報(bào)告和報(bào)告哪種效度,本研究認(rèn)為高校課程考試可將形成性評(píng)價(jià)成績(jī)作為效標(biāo)參照?qǐng)?bào)告同時(shí)性效度。宏觀層面的研究還發(fā)現(xiàn)入學(xué)前是理科的學(xué)生成績(jī)顯著優(yōu)于入學(xué)前是文科的學(xué)生,提示我們?cè)凇缎睦斫y(tǒng)計(jì)學(xué)》授課過(guò)程中應(yīng)給予文科生更多的課前和課后輔導(dǎo)。從中觀層面的題型來(lái)看,多選題的難度最大而簡(jiǎn)答題的難度最小,填空題和多選題的區(qū)分度大而計(jì)算題的區(qū)分度小。多選題是綜合能力的考察且猜測(cè)的可能性小,少答、多答、錯(cuò)答都不給分因此難度最大;簡(jiǎn)答題諸如“談?wù)勚狈綀D和直條圖的區(qū)別與聯(lián)系”是課堂中只需識(shí)記的內(nèi)容因此難度最小;填空題和多選題能較好的區(qū)分能力高和能力低的被試。從中觀層面的內(nèi)容角度來(lái)分析,“方差分析”部分的難度最大而“相關(guān)關(guān)系”和“統(tǒng)計(jì)圖表”的難度最小,“緒論”部分的區(qū)分度大而“卡方檢驗(yàn)”部分區(qū)分度小。“方差分析”部分的統(tǒng)計(jì)學(xué)原理復(fù)雜且不同的實(shí)驗(yàn)設(shè)計(jì)容易混淆因此難度較大,而“相關(guān)關(guān)系”和“統(tǒng)計(jì)圖表”掌握起來(lái)相對(duì)容易,“緒論”部分和“卡方檢驗(yàn)”部分能較好的區(qū)分能力高和能力低的被試。從中觀層面的能力角度來(lái)分析,需熟悉的題目難度小而需掌握的題目難度相對(duì)較大,是因?yàn)橐笳莆盏闹R(shí)點(diǎn)往往既是重點(diǎn)也是難點(diǎn)。從微觀角度來(lái)分析,填空題13和多選題9、10較難。需要進(jìn)一步分析是知識(shí)點(diǎn)難還是學(xué)生掌握得不夠好,如填空題13的知識(shí)點(diǎn)并不難,可能是學(xué)生還未掌握標(biāo)準(zhǔn)分?jǐn)?shù)與百分等級(jí)的對(duì)應(yīng)關(guān)系而導(dǎo)致錯(cuò)誤。區(qū)分度低甚至是消極區(qū)分的項(xiàng)目,不能很好的區(qū)分能力高和能力低的被試,根據(jù)美國(guó)測(cè)驗(yàn)專家伊貝爾的標(biāo)準(zhǔn),需考慮修改題目或予以刪除。對(duì)劣質(zhì)題目的刪除會(huì)優(yōu)化下一次組卷的質(zhì)量,對(duì)試題庫(kù)的完善也起到積極作用。

總之,本研究基于CTT從學(xué)生成績(jī)和試卷質(zhì)量?jī)蓚€(gè)角度展開宏觀、中觀和微觀三個(gè)層次的全方位分析,能夠給教師和學(xué)生提供更多的評(píng)估信息,建立通暢的考試信息反饋機(jī)制[7]。由于CTT本身也存在著測(cè)驗(yàn)及項(xiàng)目性能指標(biāo)依賴樣本等缺點(diǎn),項(xiàng)目反應(yīng)理論(IRT)等新的測(cè)量理論應(yīng)運(yùn)而生,它能根據(jù)被試在各個(gè)項(xiàng)目上的實(shí)際作答反應(yīng),經(jīng)數(shù)學(xué)模型的運(yùn)算統(tǒng)一估出被試的能力水平及項(xiàng)目的計(jì)量學(xué)參數(shù)[8],這是高校試卷質(zhì)量評(píng)價(jià)新的研究方向[9],有待我們進(jìn)一步探索。

參考文獻(xiàn):

[1]龐仙梅.高校教育質(zhì)量監(jiān)測(cè)與評(píng)價(jià)體系的構(gòu)建[J].中國(guó)成人教育,2018(22):54-56.

[2]王秀娜.大數(shù)據(jù)視角下的國(guó)家基礎(chǔ)教育質(zhì)量監(jiān)測(cè)[J].中小學(xué)信息技術(shù)教育,2018(11):9-10.

[3]王金權(quán),袁慧,丁書姝,等.衛(wèi)生統(tǒng)計(jì)學(xué)試卷分析及對(duì)教學(xué)改革的啟示[J].醫(yī)學(xué)理論與實(shí)踐,2018,31(07):1087-1088+1092.

[4]王軍,程晶晶,王加華,等.《食品生物化學(xué)》期末考試試卷分析與教改建議[J].廣東化工,2018,45(03):204-205.

[5]司俊峰.高校課程考試質(zhì)量評(píng)價(jià)統(tǒng)計(jì)分析模式研究———以《心理統(tǒng)計(jì)學(xué)》課程考試質(zhì)量評(píng)價(jià)為例[J].高師理科學(xué)刊,2007(02):113-117.

[6][美]詹姆斯•波帕姆.教師課堂教學(xué)評(píng)價(jià)指南(第五版)[M].重慶:重慶大學(xué)出版社,2015.

[7]邢維全.美國(guó)高校考試評(píng)價(jià)制度的特點(diǎn)及對(duì)我國(guó)的啟示[J].天津電大學(xué)報(bào),2009,13(03):49-51.

[8]羅照盛.項(xiàng)目反應(yīng)理論[M].北京:北京師范大學(xué)出版社,2012.

[9]楊亮.基于項(xiàng)目反映理論的試卷質(zhì)量分析[J].長(zhǎng)春大學(xué)學(xué)報(bào),2011,21(04):64-67.

作者:胡 霞 單位:安徽中醫(yī)藥大學(xué)