2009年1月28日

97上第3次段考試題分析

在教師的養成教育裡,我們學過教育測驗與評量,也都知道試題分析的重要性,包括了教師的教學成效,也有學生的學習成果。不過在教學現場裡,往往我們還是用一般性的指標,例如班級平均、多少人及格..等,去衡量試題及班級的表現。

只用班平均來看,事實上是有缺陷的。我有個班級,他們的每次段考的班級平均比別的班級少了10分左右,乍看之下似乎這個班級很差,不過再以標準差來看,他們班的標準差很大,這代表他們的分數和平均分數的差異很大,並不是集中在那個平均分數附近。接著我再用分數分配直方圖來看,就發現他們班呈現了嚴重的M型社會啊!

白話一點來說,他們班上成績好的不比別班少,但是因為成績差的人比別班還多,所以就讓平均分數下降。可是這種現象是光用平均成績這項看不出來的,所以我們要做成績分析。

在分析的方式裡,一般都是著重在試題上,少有針對學生的個別表現去做分析。還好有「學生問題分析表」這個試題分析的工具,所以這次段考,我就向學校要求要用讀卡做答的方式,用來收集學生的作答反應(也就是哪一題答什麼答案)。因為學校經費的關係,所以我們生物科的考試都是人工閱卷,不過後來向主任說明目的之後,主任也欣然同意,讓我們採畫卡方式。

雖然之前我有用Excel VBA去做了個分析的程式,不過那只是玩玩而已,不太成熟,很多功能沒有做出來,所以後來還是用余民寧教授的《教育測驗與評量-成就測驗與教學評量》所附的程式來做分析。

從教務處拿來的學生做答反應資料,要經過一些轉換編輯才能用程式去跑。不算太難,只要注意一些小部份就行了。

  • 學生的答案是ABCD,可是程式需要的是1234,這個用「取代」就可以替換了。
  • 學生的答案裡還會有一些其他的答案像是K、M、J這些奇怪的答案,那是因為學生答案卡沒畫好所造成。要把那些替換變成0或是N,才能做分析。替換從E到Z的答案只要用RegExp正規表示法就可以了,方法就是用[E-Z]代替E到Z的各個字母就好了。
  • 直接把資料從EXCEL存成文字檔的時候,會有一些tab變成的空格,這要確實用空白去替換掉,不然程式也會有問題。
  • 沒考試的學生會有一筆完全空白的資料,那要刪掉,不然也會跑不出來。


試題總評

這份試題主要由唐誼真老師出題,我做部份的修訂。試題分析的結果,難度的範圍在0.55~0.85,大多屬於中難度的題目;鑑別度自0.28~0.75,有高的鑑別度。絕大多數屬於優良型試題,有幾題屬於異質型試題。

在分析試題的異質成份之後,可以得知數個學生容易出現的問題,包括
  • 第8題的正片後像與負片後像為學生較不容易記憶及理解的部份,教師應特別注意此現象的解釋及說明。
  • 第11題,光合作用和呼吸作用,普遍有迷思概念,認為植物只有在夜晚才會行呼吸作用。
  • 第15題,肺部氣體交換部份,此概念不易理解,低分組的學生在此題的答對率不高,雖此部份在循環部份已經提及。
  • 第16題,動物防止水分散失的構造上,此處出現的外骨骼或骨板等名詞,其實對多數學生而言,極為陌生,因此往往會將昆蟲的外骨骼視作骨板。
  • 第46題,何種血管的尿素濃度較高,因非課文所直接述及,此概念需要較高層次的分析才能解答。


試題分析解釋


A:優良型試題
正常教學下,教師根據雙向細目表及各種命題原則所命出的題目,多半落入此區域。是典型的正常且良好的優良試題,適合該批學生測量。

A' :異質型試題
含有異質成份,值得教師與研究者注意,但因答對率尚高,試題無太大嚴重問題存在,只需稍作局部修改。

B:困難型試題
屬於答對人數百分比相對較低,但注意係數值亦小的試題,對於基本學力不足的學生而言,可能很難作答,但由於不含異質成份或題意不清等現象,故不必修改,僅只是屬於較困難的題目。

B' :拙劣型試題
該 試題相當拙劣。答對率偏低,注意係數也過大,表示含有相當多的異質成份。所測量到的特質很可能與其他試題不同,或是試題題意不清,或是違反試題編製原則, 造成試題題意含糊不清,應該特別注意,並配合其他客觀指標或觀察事項來加以檢討或大幅度修改,甚至整道試題予以刪除不用或重新編制。

落入A'或B'的試題,多半與下列常見因素有關。
教學法與教材欠當
教師的教學態度欠佳
命題技巧欠佳
  • 命題條件不清楚,以至於沒有正確答案可選
  • 命題目標與教學目標不一致,試題不具有教材的代表性
  • 評量的觀點與教學目標不一致,教學內容和命題內容欠整合
  • 試題的提示欠當,有誤導作答之虞
  • 出乎意料之外,出現各種答案的試題
  • 試題前後不獨立,有暗示答案的線索,或前後試題有連鎖反應的關係
  • 違反試題類型的命題原則

學生表現的分析



有不少學生落在C,只要能夠讓他們願意讀書,考試不要亂猜,我想,對班級整體表現應該會有不少影響。

開學之後,我在拿分析表跟班導討論一下學生的學習狀況吧,有些狀況真的不是靠學校就能夠做到的,家庭真的很重要!



學生表現分析解釋

A:學習穩定型學生
多半是班上成績較好、學習成就較高、考試表現穩定的學生。
教師只要持續給予鼓勵或勉勵,可維持他們持續的穩定學習狀態。

A' :粗心大意型學生
學習狀況稍欠穩定,雖然他們仍然是班上程度較好的學生,但考試卻常常粗心大意,而造成許多不經意的錯誤,值得注意。這類型學生有搶先交卷的衝動和習慣,粗心是主要特徵,在簡單的試題上容易粗心而大錯。
教師只要提醒他們有如此的毛病,並且叮嚀他們作答後仔細檢查後才交卷,用以矯正其不細心的習慣,促使他們學習趨向穩定。

B:努力不足型學生
學生的學習狀況尚稱良好、穩定,只是不像A區學生表現那麼好,努力程度比較不足,需要再多用功一點。他們多半屬於中上程度的學生,由於學習尚稱穩定,但可能因為努力不足,以至於考試不理想。
教師只要提示方向,鼓勵其勤奮努力,可激勵其學習成果有所日益進展。

B':欠缺充分型學生
學生學習準備不夠充分,偶而也會粗心犯錯,學習漸趨不穩定,努力也不夠。這類型學生兼具偶而粗心大意與努力不足的特性,作答反應組型也逐漸呈現不尋常現象。
教師需要提醒他們仔細留意作答結果,仔細檢查後交卷,避免不必要的犯錯。同時鼓勵他們多加努力,多花一點時間準備考試,這些學生也可以逐漸達到穩定的學習狀況。

C:學力不足型學生
學生的基本學力不足,學習不夠充分,努力用功程度亦不足,以至於根部上其他同學而造成學習成就偏低,這類型學生的基本問題,是存在於他們過去沒有良好的基礎或學習背景,因此在後續較高深學問的學習上,倍感吃力,需要加倍努力才趕得上同學。
教師要給更充分的時間去學習或準備,甚至需要花費更多時間去輔導其不足的基礎學識,或給予一些補充教材的練習機會,則這些學生的學習狀況才有改善的可能,否則在一般趕進度的教學情境下,這類學生的學習機會多半會被犧牲,永遠成為學習成就偏低的一群。

C';學習異常型學生
學習極不穩定,具有隨興的讀書習慣,對考試內容沒有充分準備,考試成績時好時壞,作答的反應組型奇特(作弊、猜題、隨意作答)。這類型學生有隨興的讀書習慣,完全看心情唸書,。對考試也不在意,沒有充分準備,更有可能作弊、猜題或亂答。
教師應該針對他們個別補救教學、讓他們再學習、甚至進行個別心理與學業輔導診斷後,再決定是否需要重新教學,補救不足的基本學力、或接受更專業的輔導治療。這類學生的學習問題,多半是由其他因素所伴隨造成的,例如家庭經濟問題、沒有讀書環境、父母感情不睦、單親家庭、隔代教養、異性交友問題,或是生理遺傳或先天性缺陷的問題。



相關閱讀

用Excel VBA製作學生問題分析表(S-P Table)