維基

WikiTeamWork

MTT:有關施測、評分和分數報告的標準

870個條目
在本站
增加新頁面
談話0 分享
  • 標準 5.1

除非有特別情況,或是有殘障人士需要作例外處理,測驗主持者應認真遵循由測驗編製單位所制定的施測和評分的標準化程序。

說明:給受測者的指示、測驗時間限制、試題的表現形式、答題方式、以及測驗材料和設備的具體要求應嚴格執行。一般而言,在為測驗分數制定量尺和建立常模而收集數據資料時,也應遵循同樣的程序。

殘障的受測者可能需要有特殊的調整措施以方便其作答。其他一些特殊狀況可能要求測驗主持人員的靈活應對。而在判斷調整措施的合適性時,應該以偏離標準化程序可能危害到測驗分數解釋的效度的程度有多大做為尺度。


  • 標準 5.2

若修改或中斷標準化的施測或評分程序,應記錄備案。

說明:有關修改施測程序的的性質的材料要保存在機密檔案裡,這樣做的目的是,當將來根據測驗記錄做研究或做個案審查時能將這部分考慮進去。這不僅要包括對個別受測者的特殊調整措施,還應該包括整個考場環境因被干擾所造成的對全體受測者的影響。

研究人員通常只使用基於標準化施測程序的測驗記錄。在其他情形下,研究者可能依賴這些材料組成多類受測者次群體。測驗使用者或主辦者應制定政策,規定誰保存文件,誰有權力接觸文件。 至於有關修改是否向測驗數據資料的使用者(如錄取官員)通報,則根據不同的考慮而定(見第八章和第十章)。如果提出這樣的報告的話,可能要採取相應的謹慎措施。


  • 標準 5.3

一旦申請和接受調整措施的正式程序規定後,應在測驗前就通知受測者這些規定的存在。

說明:當大型測驗計畫巳建立了須嚴格遵守的程序時,測驗主持人不應偏離這些規定。


  • 標準 5.4

考場環境應該具備合理的舒適條件,將干擾程度降至最低。

說明:測驗地點應該是交通方便,而且噪音、中途干擾、極端氣溫(太熱或太冷)、光線不足、座位太擠、試卷不易辨讀等等,都是應該避免的測驗條件。

每堂測驗都要有監考人員,以便受測者有事時能夠及時提供幫助,並同時維持正常的施測程序。 一般而言,測驗時的條件,應該和那些建立常模及其解釋方法時,用以收集數據資料的條件相等。


  • 標準 5.5

應向受測者清楚說明如何答題,如果受測者需使用他們不熟悉的儀器設備時,更應該供指示。除非要使用儀器設備本身就是要評量的內容,否則應該給受測者練習儀器設備的機會。

說明:如果測驗時提供電子計算器給受測者使用,那麼受測者需要事先練習一下所用的電子計算器;受測者可能需要練習回答不熟悉的事情(如使用數字填字格),填字格有時用來解答數學上的文字題。在用電腦測驗時,答題方法可能對某些受測者而言很陌生。只要可能,監考人員應檢查練習題的答案,以保証受測者的回答是可接受的。

有些操作測驗要用到工具或設備。除非學會操作不熟悉的設備是測驗目的的一部分,否則應對陌生的工具使用方法做出說明;如果一個受測者不能使用設備或做出答案,可能需要考慮使用其他的施測方法。


  • 標準 5.6

為確保測驗分數的真實性,應該採取對應措施,以杜絕作弊的可能性。

說明:只要是測驗結果可能被認為是有重要後果的大型測驗計畫,在實際可行和合理的情形下,維護分數真實性的措施可包括:防止考卷泄露、要求身份証明、製作座位圖、隨機分派受測者的座位、座位之間有適當間隔,及測驗過程中全程監考。

測驗編製單位在設計測驗材料和程序時應將作弊的可能性降至最低限度。主考入員要注意並報告任何重要的異常現象。大規模測驗時,一個考試地點改變測驗日期或時間就有可能給想作弊的人以可乘之機。

評價任何工作成果時(如學習歷程檔案)應採取步驟確保該成果是候選人自己的工作,其所受到的幫助應和評量的初衷一致,諸如工作完成的日期等輔助文件記錄也可能有用。


  • 標準 5.7

測驗使用者在任何時候都要負起維護測驗材料保密性的責任。

說明:掌握測驗材料的人員,基於道德和法律的要求應採取一切必要的措施,確保只有有正當理由接觸測驗材料的人才可以在測驗舉行前或結束後獲得許可去接觸測驗材料。測驗使用者必須平衡測驗材料的保密性和所有受測者以及測驗使用者的權益。

當敏感的測驗文件受到質疑時,最好延攬一位獨立的第三方人員,或在嚴格的保密措施監督下審查有關的材料。這些保密措施通常比把測驗、測驗手冊以及受測者的答案放在公開的記錄中的辦法更合適。


  • 標準 5.8

測驗評分機構應該以書面說明應遵循的計分程序,以確保計分的正確。評分錯誤的頻率要應隨時監督,並在被要求時提出報告。任何系統性的評分誤差來源都應該加以更正。

說明:要注意檢查評分時的筆誤和機械性的錯誤,應將評分誤差降低到最小程度。一旦發現錯誤,應及時採取適當步驟以避免同樣的錯誤再度發生。


  • 標準 5.9

當測驗計分涉及到人工判斷時,評分規程(scoring rubrics)要具體注明評分的規準(criteria),應定期地監督和檢查現有的評分規準。監督的步驟應該用作成書面說明。

說明:應提供給評分人員列有可接受的各類答案的評分規程,以及一般的評分標準。評分的一致性常通過隨機選擇試卷重新評分和通過重新評判前幾次的試卷來檢查。

在評分過程中周期性地檢查評分人員的閱卷分數統計屬性(如平均數、標準差)可以給他們及時回饋,以幫助他們維持評分的標準。評分若不能維持一致可能導致評分人員重新訓練或被解聘,或是重新檢討評分規程。


  • 標準 5.10

向學生、家長、法律上的代表、老師、客戶,或大眾媒體公布測驗分數的消息時,測驗計畫的負貴人員應提供適當的分數解釋。應該使用簡明的語言描述測驗所涵蓋的內容、分數的意義、分數的精確性、一般人對分數常見的誤解,以及將會如何使用分數。

說明:測驗使用者應參照測驗編製者或出版單位準備的解釋性材料,並在必要時修正或補充材料,以求清楚而正確地呈現地區和個人分數。分數的精確度可用誤差帶(error bands)或是大概分數範圍(likely score ranges)表示測量標準誤(standard error of measurement)。


  • 標準 5.11

當報告是由電腦產生的測驗答題特性的解釋時,應該備有這些解釋的來源、理論根據和實証基礎,並應說明這些解釋的限制。

說明:鑒於電腦產生的解釋可能是建立在專家判斷的基礎上,解釋通常是建立在過去所積累的經驗上,而不可能考慮當前個別受測者的具體情形。

在診斷的情境中,使用電腦產生的解釋更要特別小心,因為它可能沒有考慮到個別受測者的其他訊息(如年齡、性別、教育程度、就業履歷以及病歷),這些訊息都能為測驗結果提供解釋的脈絡。


  • 標準 5.12

當團體層次的分數是經由個人的部分測驗結果整合而成時,應報告該整合層次的分數的信度和效度。除非是受測者層次的分數的信度、效度和可比較性已經建立,否則不應該報告受測者的個人分數。

說明:大規模的評量通常需要讓不同受測者回答不同題目,意即對測驗內容領域進行矩陣抽樣(matrix sampling),以達到提高效率的目的。這樣對每個受測者來講施測時間較短,但將受測者分數整合起來的結果,可就內容領域的涵蓋面在諸如學校或年級的團體層次或教育計畫層次上在某個地區或學科方面做出恰當的有意義的解釋。

但因為每個受測者接受的只是一個不完整的測驗,所以個人分數的意義就非常有限。如果報告個人的分數,那麼不同學生間的分數比較就可能建立在不同內容的測驗題目的作答基礎上。有些情況下在這些不完整測驗之間可以作一定程度的校準(calibration),這種校準在個人分數的比較上至關重要。


  • 標準 5.13

在將能夠瓣認受測者身份的測驗分數送交給已被授權的個人或機構時,應該採取保護分數機密性的作法。

說明:無論何種形式的溝通,在談到可辨認受測者身份的分數時一定要特別小心。面對面、電話以及書面溝通所產生的問題早已為人所知。經由電子媒體,包括電腦綱路和傳真方法,來傳遞受測者分數對於現代的保密工作提出了挑戰。


  • 標準 5.14

如果在分數中或在施測單位或其他機構公布的重要訊息中發現有實質性錯誤時,應該盡快地將更正的分數報告分發給所有的分數報告接收人,不然他們會用錯誤的分數作為決策的基礎。更正後的分數報告上要標明是修正過的。

說明:實質性的錯誤是指可能改變分數解釋的錯誤,那些無關痛癢的印刷錯誤則不算在內。對於收到分數後就需很快做出的決定而言,及時通知有關人員是至關重要。


  • 標準 5.15

當某個受測者的測驗資料被保留下來時,測驗的施測記錄(test protocol)和任何其他的書面報告都應以某種形式保存下來,測驗使用者應按照他們的專業組織的規定和記錄保存方法執行。

說明:在回應受測者可能有的質疑時,可能需要用到測驗的施測記錄,它通常包括測驗材料和測驗分數。是否要保存更詳細的答題記錄則將視情況而定,且應將這一點包括在資料保存的規定裡(見下一標準)。記錄的保存也容易受法律和專業要求的影響。


  • 標準 5.16

以資料檔案或個人記錄形式來保存測驗分數的組織應該建立一清楚的使用辦法,以說明個人記錄的保存期限,以及在這期間內使用這些分數的條件與限制。

說明:有些情形下,分數早已過時,再也不能反映受測者現在的水準;因此除了研究目的外,過時的分數不應再使用,也不應再隨便披露。但在另一種情形下,早年所獲得的分數會特別有用,例如長期評量(longitudinal assessment)的研究,問題的關鍵是這些資料要用對的地方。分數的保存和公布可能會受法律和專業本身要求的影響。

您使用了廣告過濾軟體!


Wikia通過廣告運營為使用者提供免費的服務。我們對通過嵌入廣告過濾軟體訪問網站的使用者進行調整。

如果您使用了廣告過濾軟體,將無法使用我們的服務。請您移除廣告過濾軟體,以確保頁面正常載入。

更多Wikia社區

隨機維基