北京2014年5月27日電 /美通社/ -- 高品質(zhì)的題庫建設(shè)是維護(hù)考試安全、促進(jìn)考試公平、提升考試品質(zhì)和考生體驗(yàn)的根本，是開展考試測評等工作的基礎(chǔ)，也是對專業(yè)化考試機(jī)構(gòu)和主辦方的基本要求。目前，計(jì)算機(jī)化考試在科學(xué)性、公平性、權(quán)威性等方面已遠(yuǎn)遠(yuǎn)超越傳統(tǒng)紙筆考試，而且基于計(jì)算機(jī)化考試也為采集、分析考試各個(gè)環(huán)節(jié)的數(shù)據(jù)進(jìn)而開展大數(shù)據(jù)分析提供了基礎(chǔ)。如何通過數(shù)據(jù)分析，改進(jìn)試題內(nèi)容和表現(xiàn)形式，提升題庫質(zhì)量和考生體驗(yàn)，也成為諸多考試主辦方重點(diǎn)關(guān)注和研究的領(lǐng)域。近日，ATA 主辦的“2014考試?yán)碚撆c測評技術(shù)春季研討會(huì)”，邀請了多名考試行業(yè)權(quán)威專家與70多名來自政府部門、行業(yè)協(xié)會(huì)、高校研究機(jī)構(gòu)的嘉賓，圍繞著“基于數(shù)據(jù)分析的高品質(zhì)題庫建設(shè)”的主題，進(jìn)行了熱烈的討論和分享。
什么樣的題庫是高品質(zhì)題庫？
建設(shè)一個(gè)高品質(zhì)的題庫，需要綜合考慮試題的難度、區(qū)分度、信度、效度。目前，題庫建設(shè)一般采用兩種理論基礎(chǔ)作為指導(dǎo)，一種是經(jīng)典測量理論，它具有模型簡單、成本較低的優(yōu)勢，但在可靠性和拓展性上較差，無法支撐大規(guī)模的題庫。近年來，國際上較為先進(jìn)的題庫建設(shè)普遍采用了項(xiàng)目反應(yīng)理論（Item Response Theory，IRT）作為測量理論的指導(dǎo)。通過對考生答對題目的概率，分析考生的能力和題目在難度、區(qū)分度、猜測度上的特征參數(shù)，從而幫助主辦方更好的改進(jìn)試題和題庫質(zhì)量。基于 IRT 理論為指導(dǎo)的題庫建設(shè)，題目參數(shù)可以適用于各種測量情景，包括智能化組卷、計(jì)算機(jī)測試，特別適用于開發(fā)計(jì)算化自適應(yīng)測驗(yàn)，題庫具有很強(qiáng)的功能可擴(kuò)展性。
如何提升考生體驗(yàn)，保證考試公平？
考生是考試的主體和根本，一個(gè)公平的考試除了為考生創(chuàng)造相對一致的物理考試環(huán)境以外，在試題內(nèi)容和表現(xiàn)形式以及題庫的科學(xué)性上也充分考慮每個(gè)考生個(gè)體的因素。例如，如果一份試卷的試題總體的難度是由難至易，這樣就會(huì)造成考生心理緊張，影響考生的正常發(fā)揮，也會(huì)影響考生實(shí)際的結(jié)果，而通過對試題、題庫的數(shù)據(jù)分析則可以發(fā)現(xiàn)和杜絕這類問題的出現(xiàn)。
除了試題數(shù)量、試題內(nèi)容、試題難度和試題表現(xiàn)形式之外，還可以通過對考生答題樣本和考試結(jié)果，以及對考生人數(shù)、成績分布、學(xué)歷結(jié)構(gòu)、從業(yè)年限等數(shù)據(jù)的分析，發(fā)現(xiàn)不同考生對同一道試題和同一套試卷的不同結(jié)果。通過對每一道題目的數(shù)據(jù)分析，可以得出試題本身難度值、區(qū)分度、耗時(shí)、選項(xiàng)搭配、信度等參數(shù)的結(jié)論，以幫助主辦方更好的提升試題質(zhì)量；通過對考試整體結(jié)果、完成度等的數(shù)據(jù)分析，可以看出哪些試題表現(xiàn)形式、哪些卷面設(shè)計(jì)更符合考生使用習(xí)慣，多少題量和何種難度設(shè)置能起到最理想的篩選效果。
在“2014年考試?yán)碚撆c測評技術(shù)春季研討會(huì)”上，ATA 考試測評研究院院長、中國教育測量協(xié)會(huì)會(huì)員、數(shù)據(jù)分析領(lǐng)域?qū)＜覄⒎f博士和 ATA 副總裁趙曙秋先生分別發(fā)表了“題庫建設(shè)的一般方法和步驟”、“如何通過數(shù)據(jù)分析提升題庫質(zhì)量”以及“試題表現(xiàn)技術(shù)”等主題演講，并分享了ATA在數(shù)據(jù)分析、題庫建設(shè)、試題表現(xiàn)技術(shù)和大規(guī)模計(jì)算機(jī)化考試運(yùn)營等方面的成功案例和經(jīng)驗(yàn)，與到會(huì)嘉賓進(jìn)行了熱烈的互動(dòng)和討論。
ATA 大規(guī)模考試運(yùn)營領(lǐng)域豐富的成功經(jīng)驗(yàn)，以及在考試?yán)碚摵蜏y評技術(shù)等方面始終不斷的探索、研究和創(chuàng)新，已逐步形成了一套基于龐大考試和考生數(shù)據(jù)為支持的理論基礎(chǔ)和應(yīng)用模式。ATA 專業(yè)的研究成果、較佳應(yīng)用實(shí)踐和典型考試案例，也引起了與會(huì)來賓的高度關(guān)注和熱烈討論，紛紛表示本次研討會(huì)的內(nèi)容對于他們在如何提高題庫建設(shè)品質(zhì)、創(chuàng)新考試形式等方面，均得到了啟發(fā)和幫助。
為了推動(dòng)考試?yán)碚撆c測評技術(shù)的不斷創(chuàng)新和發(fā)展，ATA 作為國內(nèi)領(lǐng)先的第三方計(jì)算機(jī)化考試與測評服務(wù)供應(yīng)商，也將通過不定期組織專題研討會(huì)等各種形式，為考試與測評行業(yè)的主辦方、服務(wù)商和各界專家學(xué)者搭建一個(gè)學(xué)習(xí)交流、溝通分享的平臺(tái)。
