試論高等教育自學考試題庫建設

試論高等教育自學考試題庫建設

郭光明

摘 要 題庫建設是對傳統命題方式的變革,它以技術先進性、質量可控性和安全保密性等諸多優勢代表了自學考試命題方式的未來發展方向。本文對自學考試題庫建設的意義、指導思想、原則、目標以及組織實施等問題進行了初步的探討和構想,以期對相關實踐有所參考。

關鍵詞 高等教育 自學考試 命題方式 題庫建設

自學考試作為一種國家教育考試,其最初的命題方式是入闈命題,即每次考試前臨時組織命題教師到相對封閉的闈點進行命題,所命試題僅供當次考試使用,所有命題相關人員直到考試結束後才能出闈。這種命題方式的優點是保密性強,但缺點是開支大、入闈人員多、封閉時間長、各次考試的試卷難以保持平行。隨著自學考試開考課程的日益增多,入闈命題方式逐漸不能適應自學考試實際需要,在此情況下,命題管理者探索出一種卷庫命題方式,即一次命制多套試卷,組成卷庫,每次考試時從中隨機抽取一套試卷。該命題方式費用低、入闈時間短、操作簡單、試卷間的平行性較好,適應了當時自學考試迅速發展的形勢,實現了自學考試命題方式的一次重大轉變。但卷庫命題方式在後來的實踐中逐漸暴露出保密性較差、試卷質量難以控制的缺點。近年來,隨著教育測量學、統計學和計算機應用技術等突飛猛進的發展,又一種嶄新的命題方式在自學考試命題中應運而生,這就是題庫建設(亦稱題庫式命題)。這種命題方式以其技術先進性、質量可控性和安全保密性等諸多優勢代表了自學考試命題方式的未來發展方向。

一、題庫的概念

所謂題庫,是指以一定的教育測量理論為基礎,編製、收集的具有一定質量要求,附有代表試題特性的參數,經過分類編碼便於檢索的大量試題的集合,其功能在於組成各種試卷。由此分析,題庫具有以下特點:

1.題庫的建立有它的教育測量理論基礎,主要包括學科體系與教育目標層次分類理論、題型功能與命題技術理論、題目分析理論、參數等值理論以及試題與試卷統計關係的理論。目前國際上比較常用的教育測量理論有兩種,一種是「經典測量理論」,另一種是「項目反應理論」。

2.題庫的基本構成單位是單個試題,而不是試卷。也可能有少數的試題,由於共用某一資料(如同一段文章,同一張圖表),從而結合成了小題組,以小題組構成題庫的一個基本單位。但從普遍的全局的角度看,題庫的基本單位仍然是單個試題,它是許多單個試題的集合體,這有別於傳統的卷庫,後者由成套的試卷組成,其基本單位是試卷。

3.題庫中的試題有一定質量要求,並附有代表試題特性的參數。進入題庫的試題通常需要經過專家評審和試測分析,以保證試題結構完整、題意清晰、內容有效、性能良好。此外,每道試題還應當具有考核點、題型、認知層次、知識點的重要性等級、難度、區分度、所需答題時間、試題來源、修改審查記錄、參數評估方式、使用情況等體現試題特性的定性、定量數據,這些數據連同試題、答案和評分標準記入題卡,以便為編製試卷提供信息。

4.題庫中的試題有一定數量要求,而且結構分布合理。一個內容較為單純的學科,其題庫試題總量也要達到2000~3000題,不能過少。此外,題庫中的試題數量從內容類別、能力層次、難度水平及題型等主要維度看,還要求分布合理,在這些維度相互結合的每一「交叉點」上,都應有足夠數量試題而絕非「空集」。只有這樣,以保證能根據需要組配出儘可能多的不同試卷。

5.題庫中的試題必須分類編碼,以便於編製試卷時檢索和抽取試題。題庫並不是一批試題的簡單堆集,正如大量的圖書堆放在一起並不能成為一個圖書館那樣,大量的試題堆放在一起也不成其為題庫。每個試題都應在全庫統一的分類系統上標定位置,按題目的定性、定量指標作出編碼及索引,從而使全庫試題都能有序地存貯起來,就像圖書館的書籍已然分類編目上架一樣,可以按需準確方便地調取。

6.題庫應具有試卷生成方案。建立題庫是為組成試卷服務的,因此建立題庫時,必須同時研究試卷的生成方案。為使題庫充分發揮效益,一個題庫還可以通過不同的試卷生成方案,編製出不同要求的試卷,用於不同的考試。

二、題庫建設的意義

自學考試是個人自學、社會助學和國家考試相結合的高等教育形式,其中,國家考試對個人自學和社會助學具有重要的指導作用,而國家考試的命題質量則直接關係到自學考試的人才選拔標準和培養質量。因此,進一步加強自學考試命題的科學性、安全性,建立相應的命題工作機制是自學考試深化改革的必然要求,題庫建設正是實現這一目標的核心環節。

1.有利於實現命題的標準化。題庫建設的意義首先在於改變憑經驗編題、組卷的傳統命題方式,實現標準化命題。傳統命題方式中,試題的取捨完全取決於少數命題者對課程內容和考試大綱的理解,對試題難度的把握多半取決於他們對考生水平的估計,命題的整個操作過程以少數命題者的教學經驗為參照系,因此主觀認識上的局限性、隨意性難以避免,命題質量難以達到標準化的要求,標準掌握上往往出現忽高忽低的現象。在題庫式命題中,入庫試題都要經過嚴格篩選、試測分析並附有標準統一的測量參數,試卷生成方案是在教育測量理論指導下建立的,生成試卷的信度及效度有一定的保證。所以,這種命題方式能夠根據標準參照性考試的要求準確把握自學考試的課程標準、合格標準與評價標準,並把考試的一致性與可靠性建立在科學分析的基礎上。

2.有利於貫徹「輔導與命題分離」原則。為了保證自學考試的公平、公正和客觀有效性,長期以來,自學考試一直堅持「輔導與命題分離」的原則,即命題者不輔導,輔導者不命題。但在傳統命題方式下,自學考試一般都是由主考學校命題,命題教師來源集中,每門課程的命題人員很少(省級命題中通常只有1-2人,全國命題通常為4-6人),加上每次命題的數量有限,這就給貫徹「輔導與命題分離」原則帶來了很大的壓力。少數命題教師出於經濟利益的考慮很可能置這一原則於不顧。題庫建設可以有效地解決這一矛盾,因為在題庫式命題中,試題來源廣泛且數量眾多,每位命題人員提供的試題只是題庫中極小的一部分,且考前可由題庫系統隨機抽取試題組配試卷,這樣就很難產生猜題、押題現象,故而可從根本上預防輔導與命題不分的現象。

3.有利於提高命題的效益和靈活性

題庫中的試題都是獨立並能靈活組配的,因而這些試題在一定的條件限制下可以被反覆使用,而不像傳統命題方式中的試題使用一次後就隨試卷被廢棄,所以,儘管題庫建設初期投入較多,成本較高,但題庫建成並完善後,只要考試大綱和教材保持相對穩定,就可以減少命題次數,省去大量不必要的重複勞動。更為重要的是,傳統命題方式需要高校教師經常入闈或集中,這往往影響主考院校的正常教學工作,導致命題工作與主考院校教學工作的矛盾。而建立題庫,採用靈活的征題方式,可以有效解決這一矛盾。題庫建成後,其使用也比較靈活,它既可以按統一要求提供試卷,也可以根據特殊要求提供試卷,還可以在需要試卷的任何時間裡組配試卷。

4.有利於構建適應高科技環境的命題工作機制

題庫命題方式是對傳統命題方式的發展與革新,它建立在更為堅實的教育與心理測量理論和以計算機為代表的信息技術的基礎之上,能夠充分吸納國內外教育測量學、統計學、計算機和網路工程等現代科技成果和智力資源,有利於構建適應高科技環境的命題工作機制。與此同時,題庫命題方式改變了傳統命題方式的封閉性、階段性等缺點,使命題工作走向開放化、日常化。專業考試機構可以通過日常工作,開發積聚大量優質試題,在需要時能高效而有針對性地生成所需試卷。題庫建設已經成為專業考試機構在業務技術領域的一項重要基礎性工程。可以說,題庫命題方式是現代大規模社會化考試命題領域的制高點,代表了自學考試命題方式的未來發展方向。

總之,建設題庫既是命題內容和方式的改革,也是命題工作機制的變革,必將對自學考試的教育質量產生深遠影響。要充分認識題庫建設在大規模社會化考試中的重要作用,將其放在自學考試改革與發展中的重要地位,予以高度重視,儘快規劃實施。

三、題庫建設的指導思想和原則

對自學考試知識與能力體系和合格標準的認識與操作,是題庫建設的核心,因此,自學考試題庫建設的指導思想應該是根據自學考試培養目標,應用現代教育測量理論和技術,合理制定課程考試標準,科學把握考試的合格標準,引導學生按照專業、課程要求,全面、準確地理解、掌握和應用所學知識。現階段,自學考試主要是培養在生產、管理、服務等第一線工作的應用型人才,所以應認真研究課程自學考試大綱的知識體系和能力內涵,正確認識應用型人才培養的知識與能力結構,並據此研究組織考試內容。一般來說,本科層次應系統考查學科、專業的基礎理論、基本知識、基本技能方法以及實際工作能力和初步研究能力;專科層次應注重考查專業必備的基本理論、專門知識和實際工作的基本技能。自學考試題庫建設要以標準參照性考試的理論為指導,科學界定和準確把握理論以夠用為度,知識、技能和方法以理解、掌握、初步運用為度的自學考試合格標準,並據此組織題庫考試內容的試測,取得科學合理的、等值的參數,指導命題、成卷、統計和評價工作,確保自學考試的科學性與標準性。

根據題庫的性質和特點,要確保自學考試題庫建設取得預期的效果,在題庫建設中應當遵循以下三個原則:

科學性原則。科學性是題庫的基本要求,題庫建設應以科學的教育測量理論為指導,遵循題庫建設的規律和內在要求,充分吸收和利用國內外題庫建設的先進經驗,注重研究論證,切忌主觀隨意性。

安全性原則。安全保密是自學考試命題的底線,也是進行題庫建設的出發點之一,因此,在題庫建設、管理與使用的各個環節都應該嚴格執行有關命題保密規定,認真做好安全保密工作,確保題庫安全萬無一失。

實用性原則。實用性是發揮題庫效益的必然要求,題庫建設應在保持科學性的前提下,儘可能考慮其實用性,根據現有條件和實際情況,精簡一些次要的程序步驟和指標,確保題庫能根據需要順利地生成試卷,提高組捲成功的概率。

四、題庫建設的目標

自學考試作為一種大規模的國家教育考試,其專業和課程門類眾多,各專業和課程的情況也不盡一致,而題庫建設又是一項投資大、環節多、技術要求高的工程,因此,不能貪大求全,急於求成,而應在廣泛調研和嚴格論證的基礎上,制定分期目標,並分步實施,逐步推進題庫建設和題庫式命題體制的建立。總體而言,題庫建設目標可分為短期目標和長期目標兩類。

題庫建設的短期目標包括:(1)對試題的設計和題庫的運行機理進行研究,構建通用性強,又具有自學考試特色的標準參照性考試題庫設計與運行模式;(2)完成題庫系統軟體設計與開發;(3)完成一定數量課程的題庫建設。

題庫建設的長期目標包括:(1)在短期目標完成的基礎上,逐步推廣題庫建設範圍,增加建庫課程;(2)改變命題組織方式,建立適應題庫運作的命題工作機制和管理模式;(3)建立包括征題、培訓、試題評價、題庫管理等題庫運作的綜合評估制度,作為調整和完善命題工作機制的手段;(4)向社會提供多層次、多品種、多頻次的標準參照性考試命題服務。

五、題庫建設的組織實施

縱觀自學考試題庫建設,其組織實施過程大致包括以下環節:

1.成立題庫建設機構

作為自學考試的領導機構,全國高等教育自學考試委員會及各省高等教育自學考試委員會應負責題庫建設的規劃、論證和評估。在此條件下,國家考試中心、各省教育考試院或自學考試辦公室應成立題庫建設小組,負責具體日常工作。其主要職責是制訂工作計劃和有關規章制度,召集會議,組織必要的人員培訓,安排成員的工作分工,組織軟體開發、征題、試測與統計分析,作出時間安排及經費預算安排,指導與協調全體人員的工作等。

2.建立專業人員隊伍

建設題庫不僅需要學科專家命題,而且需要教育測量理論的指導和計算機技術的支撐,同時還有大量的管理工作。所以,有必要建立一支由學科專家、教育測量專家、計算機技術人員與命題管理人員組成的隊伍。

3.制定題庫建設規章制度

為保證題庫建設工作規範有序地開展,應按照由粗到細,由點到面,逐步完善,不斷提高的原則進行制度構建,重點是題庫建設的組織管理辦法、題庫建設技術規程和考試結果分析制度等。

4.確定建庫課程

根據自學考試的實際情況,確定建庫課程應著重考慮以下幾點:

課程的穩定性。應選擇穩定性較強的課程進行題庫建設,課程本身不穩定,隨時有合併、取消的可能,或課程內容不穩定,考綱要求和教材更新速度較快的課程不宜建立題庫。

課程涉及的專業數或報考人數。在穩定性較強的課程中,應優先選擇涉及專業多或報考人數多的課程建立題庫,涉及專業單一且報考人數低於一定數量的課程可暫緩建立題庫。

課程的考試頻率或命題級別。在以上條件同等的情況下,考試頻率高的課程或全國命題課程優先建設題庫。

5.題庫的設計

自學考試題庫設計要實現實用性與科學性相統一,並具有開放性、安全性和動態發展性等特性。要在課程考核標準的把握、命題質量的控制、參數估計和試卷生成模型上形成自己的特色。題庫結構應體現生成試卷所需的各項條件或試題指標,具體包括課程代號與名稱、試題編碼、知識單元、知識點、知識點的重要性等級、題型、題分、能力層次、難度、區分度、試題正文、答案、評分參考、考試用時、命題人、命題日期、審定人、審訂日期、入庫日期以及使用記錄等。

6.題庫軟體的開發

題庫軟體的開發一般委託資信可靠的軟體公司來完成,題庫建設小組負責有關組織、協調和溝通工作。只有高水平的題庫軟體才能靈活、高效、及時地生成有指定性能的試卷,實現題庫的預期功能。因此,對於題庫軟體的開發,在性能方面,應強調軟體的通用性、兼容性、穩定性、易用性、保密性和拓展性;在功能方面,軟體必須具備試題管理(包括錄入、修改、刪除、查詢)功能、試題分析等值功能、試卷生成功能、排版輸出功能、成績分析報告功能、模板管理功能、安全管理功能和幫助功能等。

7.人員培訓

自學考試題庫建設必須遵循教育測量學的理論和標準化考試的要求,以提高考試的信度和效度,能否達到這些要求,命題教師是關鍵。目前,參加自學考試命題工作的教師雖然都是來自各學科領域的專家、學者,但不一定都具備教育測量學的知識,有的甚至對什麼是信度、效度、難度和區分度都不夠清楚,這就很難保證試題編製的科學性。同時,題庫建設是對傳統命題方式的改革和創新,部分命題管理人員也存在著題庫知識的欠缺問題,因此,要保證題庫建設的順利進行,提高命題質量,就必須對相關人員進行培訓。

8.分析考試大綱,分解考核知識點

考試大綱是自學考試命題的法定依據,但由於多方面的原因,現行的考試大綱還不能滿足題庫建設的需要,最主要的表現是考核知識點不夠細化,考核要求不夠具體,可操作性不強。因此,考試大綱制定以後,還要組織有關學科專家分析考綱,統一對考試標準的認識,把考綱的考試內容分解為明確的考核知識點,並用操作性的語言對考核知識點提出具體的考核要求。

9.制定題庫構造藍圖和征題細目表

在分解考核知識點,細化考核要求的基礎上,接下來的工作是制定題庫構造藍圖,為其後的征題打好基礎。題庫構造藍圖主要設計各知識單元、各認知層次、各難度層次、各類題型的題量比重。

為使徵集的試題匯總後總體結構合理,符合組配試卷時的各種比例要求,提高組捲成功率,在確定題庫總題量的基礎上,還應根據題庫構造藍圖,事先確定好各類試題的具體征題數量,制定出征題細目表。

10.試題徵集

自學考試的試題徵集主要有三種渠道:其一是定向徵集試題,即向特定的學科專家或有經驗的教師徵集試題;其二是向社會徵集試題;其三是從習題集、往年已考試卷等有關資料中選題。

11.試題評審和修改

試題評審是指試題徵集以後,組織有關專家或命題教師對試題的科學性、規範性進行審查和評判,以保證試題質量。試題評審可採用個人或小組集體討論的形式,評審後應將需要改進的建議反饋給試題編製者,供修改參考。

12.試測與分析

試測是指正式考試之前進行的試驗性測試,旨在收集數據,利用統計手段協助分析試題或試卷,以準確地估計試題或試卷各項質量指標。這些指標將連同試題保存在題庫中為配置試卷時所用,同時也可作為對相關試題進行取捨或修改的依據。

試測結果的統計分析是指,藉助計算機,採取定性與定量相結合的方法,對經過試測的試題作全面系統的分析,了解每道試題的難度,檢查試題的適宜性、可靠性和有效性,以此作為篩選入庫試題,確定或調整正式考試試卷的難度、題量、題型等的依據。

13.試題編碼

試題經過審定、修改、試測和分析後,確認質量合格者,即可進行編碼。試題的編碼系統通常把號碼定位與試題的各個指標相對應,例如知識單元、知識點、知識點的重要性等級、題型、題分、認知層次、難度值、答題需時估計值等。一個編碼只能代表一個試題,一個試題也只能具有一個編碼。

14.試題錄入與校對

在試題錄入之前,應按要求及時配置計算機等題庫硬體設備,並安裝調試題庫軟體,為試題錄入作好準備。然後,按一定程序組織試題錄入和校對。在定向征題方式中,也可以考慮將題庫軟體的試題管理模塊單獨為一個小軟體,直接提供給征題對象,讓其直接將試題輸入進去,所征試題經審查合格後再導入題庫軟體中。在計算機題庫系統中可分別建立題文庫、題圖庫、答案與評分標準庫、計量學指標參數庫、有關信息資料庫等,而它們都要用試題編碼有機聯繫起來。

15.試卷生成

運用題庫生成試卷,通常分三個步驟:第一步,一般組卷。即從經典測量理論意義上,給定測驗總分、各知識單元分數比例、各能力層次分數比例、各題型的分數比例以及重點、次重點、一般考核點的分數比例等指標以後,由計算機自動檢索,從題庫中調用合適試題進行組卷。第二步,優化組卷。在保持第一步組卷形成的內容結構與題型結構總體不變的前提下,進一步運用項目反應理論從難度與區分度相結合的角度出發,對試題進行優化組合。第三步,排版輸出。對生成的試卷認可以後,啟動編輯、排版程序,將試卷輸出為激光照排清樣,供直接印卷使用。

按上述步驟生成試卷的同時,應保證系統自動生成對應的答案。

16.題庫維護

題庫建設是一項動態發展的工程,題庫建成後,還必須進行動態監控和日常維護,以確保題庫能正常使用並不斷完善。

第一,每次考試結束後,要對試卷進行抽樣分析,項目包括單個題目的難度、區分度、試卷的總體難度、試卷的信度和效度以及考試成績的分布情況等。根據考試分析的結果,對題庫作相應的修改和調整。

第二,應根據需要,定期或不定期地組織征題,不斷補充題庫。如果發生考試大綱及教材的局部調整和變化,應對題庫中陳舊過時的試題進行及時修改、刪除。

第三,隨著學科內容與考核目標的變化,原本較為合理的題庫結構應根據需要進行調整。如果應試群體實有水平發生大的變化,題庫試題的計量學參數也需要進行修訂。

第四,應建立有效的溝通渠道,使命題管理部門在考試結束後能徵求、傾聽社會助學單位和考生對試題的意見和合理化建議,以便及時發現和改進現有題庫的不足。

六、結語

自學考試題庫建設是一項複雜的系統工程,技術要求高,工作難度大。作為命題方式和命題工作體制的創新,題庫建設在其試行之初不可能盡善盡美,甚至會碰到各種各樣的問題和困難。因此,一方面要正確認識題庫建設的重大意義,堅定題庫建設的信心,另一方面又要做到認真規劃,精心組織,穩步實施。只有這樣,才能保證題庫建設的成功。

參 考 文 獻

[1]漆書青,《現代測量理論在考試中的應用》,華中師範大學出版社,2003年。

[2]楊學為,《中國考試大詞典》,上海辭書出版社,2006年

[3]廖平勝等,《考試學》,華中師範大學出版社,2004年

推薦閱讀:

在考註冊消防工程師的你應該關注的問題!
ACCA F4怎麼學?需要準備多長時間?
考試作弊神技get√
考教師編製普通話必須二級甲等嗎?
馬來亞醫學BMAT生物醫學入學考試

TAG:教育 | 自學 | 高等教育 | 考試 | 題庫 | 建設 | 試題庫 |