113 原住民特考三等 教育行政 教育測驗與統計 考古題詳解

核心觀念

本題考量表編製的效度、信度，以及提升信度的方法。效度是測驗分數能否支持預定解釋與用途；信度是測量結果的一致性與穩定性。陳老師依五大人格特質理論編製量表，欲了解高中生人格特質現況，因此應檢視量表是否確實測得理論所指的人格構念。

（一）最應報告的效度

應報告建構效度（construct validity）。

建構效度在檢驗測驗是否能有效測量抽象的心理構念，以及測驗結果是否符合該構念的理論預期。人格特質屬於無法直接觀察的心理構念；五大人格特質理論則提供量表應測量哪些特質、各分量表彼此如何區分的理論架構。因此，陳老師需要蒐集證據，確認各題目與分量表能否反映理論所界定的人格特質。

建構效度可透過多種證據檢驗，例如：

• 因素分析：確認題目是否依理論預期聚合成五個因素，並檢查題目在所屬因素上的負荷是否適切。
• 聚斂與區辨證據：與測量相近構念的量表呈現適度相關；與不同構念的量表則不應呈現過高相關。
• 理論關係證據：檢驗各人格特質分數與其他變項的關係是否符合既有理論預測。

內容效度也有必要考量，例如檢視題目是否涵蓋五大人格的內涵；不過，題目依理論編製，最核心要報告的是能否由資料支持其測量人格構念的建構效度。

（二）除內部一致性外應報告的信度

應報告再測信度（test–retest reliability）。

人格特質通常被視為相對穩定的個人特徵。若量表測量的是高中生人格特質，受試者在短期間內未經重大改變時，兩次施測所得分數應具有一定穩定性。陳老師可在適當間隔後對同一批學生再次施測，計算兩次分數的相關，以評估量表分數的時間穩定性。

再測間隔須適當：間隔太短，學生可能記得前次答案，造成練習或記憶效應；間隔太長，真實的人格變化或生活事件則可能影響分數，使相關降低。選擇適當間隔後，再測相關越高，代表分數的時間穩定性越佳。

核心觀念

本題比較三種題型在相同雙向細目表下的測量特性：是非題、四選一選擇題與申論題。雙向細目表用來規劃教材內容與認知層次的命題比重；題型不同，即使依同一份細目表命題，在作答時間、猜測機率、取樣廣度、評分客觀性與高層次思考測量等方面，仍有不同優缺點。

題目要求每位教師的試卷「相較於另外二位」列出優缺點各二項，因此應以三種題型相互比較，並從不同測驗特性提出理由。

解題方法

先掌握題數與作答形式：

• A：50 題是非題，題目多、作答快速，但每題有 $1/2$ 的猜中機率。
• B：25 題四選一選擇題，題數與作答時間居中，每題猜中機率為 $1/4$，且可設計誘答選項。
• C：5 題申論題，作答與閱卷所需時間較長，但能呈現完整論述與較高層次的思考。

再依序比較內容取樣廣度、猜測影響、測量的認知層次、評分客觀性及閱卷成本，選出各試卷相對於其他兩種題型的優點與缺點。

A 教師：50 題是非題

優點

1. 取樣範圍較廣、內容效度較容易兼顧：50 題可涵蓋較多教材概念與雙向細目表中的內容，降低只考少數單元而造成代表性不足的情形。
2. 作答與評分快速、評分客觀：考生只需判斷敘述正誤，作答負擔較低；答案明確，閱卷一致性高，適合大量施測。

缺點

1. 猜測機率高：每題只有是、非兩種答案，隨機猜中的機率為 $1/2$，分數容易受到猜測影響。
2. 不易測量複雜或高層次能力：是非題通常著重單一概念的辨認或判斷，難以充分呈現分析、整合、評鑑與論證能力；命題時也容易因語句細節而變成文字陷阱。

B 教師：25 題四選一選擇題

優點

1. 猜測機率低於是非題，且可分析迷思：隨機猜中機率為 $1/4$，低於是非題的 $1/2$；設計良好的誘答選項可反映常見錯誤概念，提供較豐富的診斷資訊。
2. 兼具客觀評分與一定的測量彈性：答案標準明確、評分一致性高；相較於是非題，可藉由題幹與選項情境測量較多樣的理解、應用與判斷。

缺點

核心觀念

本題考查三種評量的目的與功能：

• 學習結果的評量（Assessment of learning）：在教學或學習階段結束後，評定學生已達成的學習成果，常用於成績認定、能力檢定、資格判定或頒發證書。
• 促進學習的評量（Assessment for learning）：教師蒐集學習證據，據以調整教學、提供回饋，協助學生改善學習。
• 評量即學習（Assessment as learning）：學生透過自我評量、同儕評量、反思與監控，理解自己的學習狀況並調整學習策略。

判斷時應以評量的主要目的和結果用途為準，而非只看評量形式。

解題方法

題幹指出，活動要「了解學生母語口說能力」，並依學生表現「頒發及格證書」。後者顯示評量結果將用來判定學生是否達到標準，具有能力認定及資格證明功能，因此屬於學習結果的評量。

評分項目則應從「母語口說能力」出發，挑選能直接呈現口說表現、彼此有所區別且可觀察評分的指標；可採分析式評分，分別評定不同面向。

（一）評量類型與理由

本活動屬於學習結果的評量（Assessment of learning）。活動依學生母語演講的表現判定其是否及格，並頒發證書，表示評量用來總結並認定學生已展現的能力，而非主要用來調整教學，或引導學生進行自我監控與反思。

核心觀念

本題考查「成對樣本 $t$ 檢定」。同一批 25 名學生在分組合作學習前、後各接受一次測量，前測與後測分數具有配對關係，因此應以每位學生的前、後測差異進行檢定，而非使用獨立樣本 $t$ 檢定。

令差異分數為：

成對樣本 $t$ 檢定公式為：

其中：

• $\bar{D}$：前、後測平均差
• $\mu_D$：母體平均差，虛無假設下通常為 $0$
• $S_D$：差異分數的標準差
• $n$：配對樣本數

（一）虛無假設與對立假設

研究目的為探討分組合作學習是否能「提升」學習動機，因此具有方向性。

令 $\mu_D$ 代表後測與前測的母體平均差：

• 虛無假設：

表示分組合作學習無法提升學習動機。

• 對立假設：

表示分組合作學習能提升學習動機。

在計算 $t$ 值時，通常以 $\mu_D=0$ 作為虛無假設的檢定值。

（二）計算 A、B、C

1. 計算平均差

因此：

2. 計算 $t$ 值

題目提供差異分數的標準差為 $1.04$，樣本數 $n=25$：

因為：

所以：