108 高普考高考三級 教育行政 教育測驗與統計 考古題詳解
第 一 題25 分
某次定期考試王老師班上 25 名學生的國語科成績分布如下表。請計算表中之累積百分比,於申論試卷上作答,並製作該班成績的莖葉圖。
| 分數 | 65 | 68 | 73 | 74 | 79 | 80 | 81 | 83 | 85 | 86 | 87 | 88 | 90 | 93 | 95 | 97 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 人數 | 1 | 1 | 2 | 1 | 1 | 3 | 1 | 2 | 2 | 1 | 2 | 2 | 1 | 3 | 1 | 1 |
| 累積百分比 | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ | ____ |
登入後即可作答並保存紀錄。
核心觀念
本題考查累積百分比與莖葉圖。累積百分比是分數不高於某一分數的累積人數,占全班總人數的百分比:
解題方法
先將各分數的人數累加,再除以全班 25 人。因為 ,每累加 1 人,累積百分比就增加 4 個百分點。
| 分數 | 65 | 68 | 73 | 74 | 79 | 80 | 81 | 83 | 85 | 86 | 87 | 88 | 90 | 93 | 95 | 97 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 人數 | 1 | 1 | 2 | 1 | 1 | 3 | 1 | 2 | 2 | 1 | 2 | 2 | 1 | 3 | 1 | 1 |
第 二 題25 分
一項促進國際閱讀素養研究中,六個國家學生閱讀素養表現之平均值及平均值的標準誤如表 2-1,每個國家抽樣至少是 2,000 名學生。那兩個國家的學習成就表現之差異達顯著水準()?請寫出檢驗步驟並將達顯著水準的比較,以「」標示於表 2-2 之灰色細格中。本題不矯正因為多重比較造成的第一類型錯誤膨脹的問題。
表 2-1:
| 國家 | 平均值 | 平均值標準誤 |
|---|---|---|
| A | 581 | 2.2 |
| B | 576 | 3.2 |
| C | 569 | 2.7 |
| D | 565 | 2.2 |
| E | 559 | 2.3 |
| F | 555 | 2.4 |
表 2-2:
請在下表灰色細格中,將達顯著水準的國家間比較以「」標示。
| A | B | C | D | E | |
|---|---|---|---|---|---|
| B | 灰色 | ||||
| C | 灰色 | 灰色 | |||
| D | 灰色 | 灰色 | 灰色 | ||
| E | 灰色 | 灰色 | 灰色 | 灰色 | |
| F | 灰色 | 灰色 | 灰色 | 灰色 | 灰色 |
登入後即可作答並保存紀錄。
核心觀念
本題考比較兩個獨立國家的平均數是否有顯著差異。已知各國平均值的標準誤,且每國抽樣至少 2,000 人,可用常態近似檢定平均數差異。
對任一國家配對,虛無假設為 ,對立假設為 。因為題目問「是否有差異」,採雙尾檢定; 時,臨界值為 。
解題方法
兩國平均數差的標準誤為:
檢定統計量為:
若 ,該兩國平均數差異達顯著水準。依題意,不進行多重比較的錯誤率校正。
| 國家比較 | 平均數差絕對值 | 差異標準誤 | | 結果 | |---|---:|---:|---:|---| | A–B | 5 | | 1.29 | 未達顯著 | | A–C | 12 | | 3.45 | 達顯著 | | A–D | 16 | | 5.14 | 達顯著 | | A–E | 22 | | 6.91 | 達顯著 | | A–F | 26 | | 7.98 | 達顯著 | | B–C | 7 | | 1.67 | 未達顯著 | | B–D | 11 | | 2.83 | 達顯著 |
第 三 題25 分
王校長想知道學生的學習投入情形,編製學習投入量表共有 11 個題項。預試 580 名學生,計算該量表的 Cronbach’s Alpha 所得數值為 0.813。下表為量表信度之統計報表。請說明什麼是 Cronbach’s Alpha,指出其關心誤差類型?並解釋下表中「矯正的項目-總分之相關」(Corrected Item-Total Correlation)及平方複相關(squared multiple correlation)的意義。根據下表,若王校長想將題目縮短為 10 題,你會建議他刪除那道題目?為什麼?你刪除該題後的量表信度會是多少?請分別說明之。
| 項目 | 矯正的項目-總分之相關 | 平方複相關 | Cronbach’s Alpha(如果項目刪除) |
|---|---|---|---|
| A | .522 | .335 | .793 |
| B | .452 | .231 | .800 |
| C | .488 | .291 | .796 |
| D | .355 | .155 | .809 |
| E | .449 | .448 | .800 |
| F | .449 | .449 | .801 |
| G | .467 | .366 | .798 |
| H | .591 | .405 | .785 |
| I | .517 | .332 | .793 |
| J | .485 | .279 | .797 |
| K | .477 | .245 | .798 |
登入後即可作答並保存紀錄。
核心觀念
Cronbach’s Alpha()是衡量量表內部一致性信度的指標,反映同一量表中的題目是否共同測量相近的特質。它主要關心的是題目抽樣誤差:若從同一領域抽取不同題目,量表分數會有多少變動。它不直接衡量重測穩定性或評分者一致性,也不能單憑 Alpha 值證明量表只有一個構念或具有效度。
常用公式為:
其中 是題目數, 是第 題的變異數, 是總分的變異數。本題 11 題的 Alpha 為 。
表格欄位的意義
- 矯正的項目-總分之相關:某題分數與「扣除該題後的其餘題目總分」之相關。扣除該題是為避免該題同時出現在題目分數及總分中,造成相關被高估。數值越高,通常表示該題與量表整體的一致性越好。
- 平方複相關(SMC):以其餘題目共同預測某一題時所得的決定係數 。例如,A 題的 SMC 為 ,表示其餘題目的線性組合可解釋 A 題約 的變異。數值越低,表示該題較難由其他題目預測,與其他題目的共同性較弱。
- Cronbach’s Alpha(如果項目刪除):刪除該題後,以剩餘題目重新計算的 Alpha,可用來比較刪題前後的內部一致性。
解題方法與判斷
第 四 題25 分
學校的定期考試主要在瞭解學生一段期間內的學習成效。此種測驗最主要的效度證據為何?教師要如何確保這類成就測驗的效度?學生接受測驗後該如何分析學生的測驗表現與檢驗試題的品質?
登入後即可作答並保存紀錄。
核心觀念
本題聚焦於教育測驗與評量的核心範疇,涵蓋三大考點:
- 成就測驗之效度類型:學校定期考試(段考、期中/期末考)屬於「標準參照」或「常模參照」之教師自編成就測驗(Achievement Test),主要功能在於檢驗教學目標與學習內容的達成度。依據測驗評量標準,其最核心的效度證據為內容效度(Content Validity),亦即現代效度整合架構中所指「基於測驗內容之證據(Evidence Based on Test Content)」。
- 效度的確保歷程:包含測驗編製前的「雙向細目表(Two-way Specification Table)」規劃、題目的編寫規範、專家/同行審查,以及課綱教學目標(如 Bloom 認知歷程向度)之對應。
- 測驗結果與試題品質檢驗(試題分析):
- 學生表現分析:包含描述統計量數(平均數、標準差、偏態態樣)、分數轉換(百分等級 PR、 分數、 分數)與作答迷思概念/錯誤分析。
- 試題品質檢驗(古典測驗理論 CTT):
- 難度(Item Difficulty, ):整體通過率或極端組通過率。
- 鑑別度(Item Discrimination, ):高分組與低分組之通過率差異,或點二系列相關()。
- 誘答力分析(Distractor Analysis):選擇題選項之功能運作與吸引力。
解題方法
本題為標準的「三段式論述申論題」,解答策略應直接扣合題幹的三個提問,層次分明、條列回答:
- 第一問切入點:直指「內容效度(基於測驗內容之效度證據)」,並說明為何定期考試以此效度為首要關鍵(定期考試目的在於測量課程範圍內之學習成效,並非預測未來表現或推估抽象心理構念)。
- 第二問切入點:按「測驗編製標準化歷程」由前往後推展,說明教師如何透過編製雙向細目表、嚴謹命題、同行審查及試題修訂來確保效度。
- 第三問切入點:將問題拆解為「分析學生的測驗表現」與「檢驗試題的品質」兩層面。學生表現著重於團體與個別的分數分配、統計量及錯誤診斷;試題品質則精確呈現古典測驗理論中難度()、鑑別度()的計算公式、判斷指標與誘答選項分析。
選項分析
本題為申論題型,無選項設計。考生在應試時,須針對題幹之三個子問題逐一深入作答,不可偏廢任一問,各子題配分通常平均分布於作答架構中。
解題技巧
- 名詞新舊並陳:作答「效度證據」時,寫出傳統名詞「內容效度(Content Validity)」之餘,務必補充美國教育研究學會等(AERA, APA, NCME)《教育與心理測驗標準》之現代用語「基於測驗內容之效度證據」,能展現高度專業度。
- 呈現數學公式:檢驗試題品質時,不要只寫文字描述,應列出極端組法之難度指數 與鑑別度指數 ,並具體寫出 Ebel 的鑑別度評估標準,分數即能脫穎而出。
- 避免常見陷阱:
- 勿誤答為「效標關聯效度」或「構念效度」。定期考試並非性向測驗(不需強調預測效度),亦非人格量表。
- 分析「學生表現」與「試題品質」是兩件事,不可混為一談只寫難度與鑑別度。
【答案】
一、學校定期考試最主要的效度證據
學校定期考試屬於總結性評量(Summative Assessment)與學科成就測驗(Achievement Test),主要目的在於檢驗學生在特定教學單元或學期內,是否達成教學目標與掌握教材內容。因此:
- 最主要的效度證據為內容效度(Content Validity),在當代測驗標準中統稱為基於測驗內容之證據(Evidence Based on Test Content)。
- 核心意涵:指測驗試題內容對其所欲測量之教學目標、課程範圍與認知領域之代表性與適切性程度。