112 地方特考三等 統計類科 迴歸分析 考古題詳解

112 年・地方特考・三等・統計類科
試題代碼 迴歸分析

第 一 題25 分

若以樣本 yy 對 xx 做線性迴歸,可得到迴歸估計式:

y^i=β^0+β^1xi。\hat{y}_i=\hat{\beta}_0+\hat{\beta}_1x_i。

假設 x、yx、y 之樣本平均及標準差分別為 xˉ、yˉ、sx、sy\bar{x}、\bar{y}、s_x、s_y,樣本相關係數為 rr。今先將 x、yx、y 標準化,即:

xi∗=xi−xˉsx,yi∗=yi−yˉsy。x_i^*=\frac{x_i-\bar{x}}{s_x},\qquad y_i^*=\frac{y_i-\bar{y}}{s_y}。

然後以 yi∗y_i^* 對 xi∗x_i^* 做線性迴歸,得到:

y^i∗=β~0+β~1xi∗。\hat{y}_i^*=\tilde{\beta}_0+\tilde{\beta}_1x_i^*。

試求:

(ㄧ)β~0=?\tilde{\beta}_0=?(10 分)

(二)β~1\tilde{\beta}_1 和 β^1\hat{\beta}_1 的關係。(10 分)

(三)rr 和 β~1\tilde{\beta}_1 之關係。(5 分)

登入後即可作答並保存紀錄。

這一題的完整詳解

核心觀念

一元線性迴歸含截距時,斜率估計量為

β^1=SxySxx,\hat{\beta}_1=\frac{S_{xy}}{S_{xx}},

其中 Sxy=∑i=1n(xi−xˉ)(yi−yˉ)S_{xy}=\sum_{i=1}^n(x_i-\bar{x})(y_i-\bar{y}),Sxx=∑i=1n(xi−xˉ)2S_{xx}=\sum_{i=1}^n(x_i-\bar{x})^2。迴歸線通過樣本平均點 (xˉ,yˉ)(\bar{x},\bar{y}),所以截距估計量為 β^0=yˉ−β^1xˉ\hat{\beta}_0=\bar{y}-\hat{\beta}_1\bar{x}。

標準化後的變數平均數為 00、標準差為 11;這會讓標準化迴歸的截距與斜率有直接且簡潔的表示。

解題方法與推導

由

xi∗=xi−xˉsx,yi∗=yi−yˉsy,x_i^*=\frac{x_i-\bar{x}}{s_x},\qquad y_i^*=\frac{y_i-\bar{y}}{s_y},

可知 xˉ∗=yˉ∗=0\bar{x}^*=\bar{y}^*=0,且 x∗x^* 與 y∗y^* 的標準差均為 11。

含截距的一元迴歸線通過兩變數的平均點,因此標準化迴歸線通過 (xˉ∗,yˉ∗)=(0,0)(\bar{x}^*,\bar{y}^*)=(0,0)。代入

y^i∗=β~0+β~1xi∗\hat{y}_i^*=\tilde{\beta}_0+\tilde{\beta}_1x_i^*

得 β~0=0\tilde{\beta}_0=0。

再將原始迴歸式改寫成標準化尺度:

y^i∗=y^i−yˉsy=β^0+β^1xi−yˉsy.\hat{y}_i^* =\frac{\hat{y}_i-\bar{y}}{s_y} =\frac{\hat{\beta}_0+\hat{\beta}_1x_i-\bar{y}}{s_y}.

利用 β^0=yˉ−β^1xˉ\hat{\beta}_0=\bar{y}-\hat{\beta}_1\bar{x},可得

🔒

後續完整解題步驟與【答案】

免費註冊,享 3 天全站完整詳解閱覽。

免費註冊

第 二 題25 分

XX 為前測成績,YY 為後測成績。假設甲、乙兩班的前、後測成績關係分別為:

甲:Y=β01+β11X+ε。Y=\beta_{01}+\beta_{11}X+\varepsilon。

乙:Y=β02+β12X+ε。Y=\beta_{02}+\beta_{12}X+\varepsilon。

下表資料中,GG 代表班別(G=1G=1 為甲班,G=0G=0 為乙班),令 XGXG 為 XX 和 GG 乘積。

YYXXGGYYXXGG
5.341330
10.4911580
9.2819.450
10.19113.160
7.3619.130
4.33117.7110
9.7917.370
6.36110.2100
6.65119.4120
99113.690

我們以上表資料分別配適以下四組迴歸:

  • M1:YY 對 XX 迴歸。
  • M2:YY 對 GG 迴歸。
  • M3:YY 對 XX 和 GG 複迴歸。
  • M4:YY 對 X、GX、G 和 XGXG 複迴歸。

變異數分析結果如下:

M1:Y^=1.26+1.203X\hat{Y}=1.26+1.203X

SourceDFAdj SSF-ValueP-Val
Regression1202.2426.480.00
XX1202.2426.480.00
Error18137.49
Total19339.73

M2:Y^=11.78−3.94G\hat{Y}=11.78-3.94G

SourceDFAdj SSF-ValueP-Val
Regression177.725.340.033
GG177.725.340.033
Error18262.0114.56

M3:Y^=3.39+1.133X−3.26G\hat{Y}=3.39+1.133X-3.26G

SourceDFAdj SSF-ValueP-Val
Regression2254.7925.500.000
XX1177.0735.440.000
GG152.5510.520.005
Error1784.944.997

M4:Y^=2.52+1.251X−0.86G−0.343XG\hat{Y}=2.52+1.251X-0.86G-0.343XG

SourceDFAdj SSF-ValueP-Val
Regression3258.45116.960.00
XX1141.44927.840.00
GG10.4190.080.778
XGXG13.6580.720.409
Error1681.2845.080

在顯著水準 0.050.05 下,試求:

(一)檢定「兩班的 YY 對 XX 關係是否平行(斜率相同)」;即

H0:β11=β12 and β01≠β02H_0:\beta_{11}=\beta_{12}\ \text{and}\ \beta_{01}\ne\beta_{02}

vs.

$$H_1:\beta_{11}\ne\beta_{12}\ \text{and}\ \beta_{01}\ne\beta_{02}。$$$$

(10 分)

(二)檢定「兩班是否有相同的 YY 對 XX 線性關係(相同的斜率及截距)」;即

H0:β11=β12 and β01=β02H_0:\beta_{11}=\beta_{12}\ \text{and}\ \beta_{01}=\beta_{02}

vs.

H1:H0 為非。H_1:H_0\text{ 為非}。

(15 分)

F-分布臨界值表:

P(F>Fα,v1,v2)=α=0.05。P(F>F_{\alpha,v_1,v_2})=\alpha=0.05。

v2\v1v_2\backslash v_112345678910
1161.4476199.5000215.7073224.5832230.1619233.9860236.7684238.8827240.5433241.8817
218.512819.000019.164319.246819.296419.329519.353219.371019.384819.3959
310.12809.55219.27669.11729.01358.94068.88678.84528.81238.7855
47.70866.94436.59146.38826.25616.16316.09426.04105.99885.9644
56.60795.78615.40955.19225.05034.95034.87594.81834.77254.7351
65.98745.14334.75714.53374.38744.28394.20674.14684.09904.0600
75.59144.73744.34684.12033.97153.86603.78703.72573.67673.6365
85.31744.45904.06623.83793.68753.58063.50053.43813.38813.3472
95.11744.25653.86253.63313.48173.37383.29273.22963.17893.1373
104.96464.10283.70833.47803.32583.21723.13553.07173.02042.9782
114.84433.98233.58743.35673.20393.09463.01232.94802.89622.8536
124.74723.88533.49033.25923.10592.99612.91342.84862.79642.7534
134.66723.80563.41053.17913.02542.91532.83212.76692.71442.6710
144.60013.73893.34393.11222.95822.84772.76422.69872.64582.6022
154.54313.68233.28743.05562.90132.79052.70662.64082.58762.5437
164.49403.63373.23893.00692.85242.74132.65722.59112.53772.4935
174.45133.59153.19682.96472.81002.69872.61432.54802.49432.4499
184.41393.55463.15992.92772.77292.66132.57672.51022.45632.4117
194.38073.52193.12742.89512.74012.62832.54352.47682.42272.3779
204.35123.49283.09842.86612.71092.59902.51402.44712.39282.3479
🖼️ 本題原卷含圖表。基於試題來源之版權考量,本站不轉載原卷影像; 題目文字已完整轉錄,圖表請自行參閱考選部公告之試題原檔。

登入後即可作答並保存紀錄。

這一題的完整詳解

核心觀念

本題利用虛擬變數 GG 與交乘項 XGXG,將兩班迴歸線統一表示為

Y=β0+β1X+β2G+β3XG+ε。Y=\beta_0+\beta_1X+\beta_2G+\beta_3XG+\varepsilon。

當 G=0G=0(乙班)時:

Y=β0+β1X+ε。Y=\beta_0+\beta_1X+\varepsilon。

當 G=1G=1(甲班)時:

Y=(β0+β2)+(β1+β3)X+ε。Y=(\beta_0+\beta_2)+(\beta_1+\beta_3)X+\varepsilon。

因此:

  • 乙班截距為 β0\beta_0,斜率為 β1\beta_1。
  • 甲班截距為 β0+β2\beta_0+\beta_2,斜率為 β1+β3\beta_1+\beta_3。
  • 兩班斜率相同 ⟺β3=0\Longleftrightarrow \beta_3=0。
  • 兩班截距相同 ⟺β2=0\Longleftrightarrow \beta_2=0。

所以:

  • M4 是完整模型:兩班截距、斜率皆可不同。
  • M3 是平行線模型:斜率相同,但截距可不同。
  • M1 是共同迴歸線模型:截距、斜率皆相同。

檢定時使用巢狀模型的部分 FF 檢定:

F=(SSER−SSEF)/qMSEF,F= \frac{(SSE_R-SSE_F)/q}{MSE_F},

其中 RR 為限制模型,FF 為完整模型,qq 為限制條件個數。


(一)檢定兩班的 YY 對 XX 關係是否平行

解題方法

平行線表示兩班斜率相同,但截距可以不同,因此先比較:

  • 限制模型:M3,YY 對 X,GX,G 迴歸
  • 完整模型:M4,YY 對 X,G,XGX,G,XG 迴歸

M3:

Y^=3.39+1.133X−3.26G\hat Y=3.39+1.133X-3.26G

M4:

Y^=2.52+1.251X−0.86G−0.343XG\hat Y=2.52+1.251X-0.86G-0.343XG

在 M4 中,XGXG 的係數就是斜率差異:

β3=β11−β12.\beta_3=\beta_{11}-\beta_{12}.

因此檢定:

H0:β3=0H_0:\beta_3=0

對抗

H1:β3≠0。H_1:\beta_3\ne 0。

由 M3 與 M4 的誤差平方和:

SSEM3=84.94,SSEM4=81.284。SSE_{M3}=84.94,\qquad SSE_{M4}=81.284。

限制條件數為 q=1q=1,完整模型誤差均方為

MSEM4=5.080。MSE_{M4}=5.080。

故

F=(84.94−81.284)/15.080=3.6565.080≈0.72。F= \frac{(84.94-81.284)/1}{5.080} = \frac{3.656}{5.080} \approx 0.72。

臨界值為

F0.05,1,16=4.4940。F_{0.05,1,16}=4.4940。

因為

0.72<4.4940,0.72<4.4940,

所以不拒絕 H0H_0,兩班斜率沒有顯著差異。

檢查截距是否不同

在平行線模型 M3 中,GG 的檢定結果為:

🔒

後續完整解題步驟與【答案】

免費註冊,享 3 天全站完整詳解閱覽。

免費註冊

第 三 題20 分

某資料有 40 個觀察值,因變數為 y1,…,y40y_1,\ldots,y_{40},自變數為 x1,…,x40x_1,\ldots,x_{40},迴歸模式為:

yi=β0+β1xi+εi。y_i=\beta_0+\beta_1x_i+\varepsilon_i。

(一)其檢定之有效性是建立在對 εi\varepsilon_i 的哪些假設下?(10 分)

(二)若 (x1,…,x20)(x_1,\ldots,x_{20}) 為男性體重,(x21,…,x40)(x_{21},\ldots,x_{40}) 為女性體重,yy 為其運動後心跳頻率。已知男性體重的變異量一般較女性大。今以 yy 對 xx 做簡單線性迴歸,可能會違反(一)中那些假設?(5 分)

(三)若 x1,…,x10x_1,\ldots,x_{10} 是 10 個人第 1 年之測量值,x11,…,x20x_{11},\ldots,x_{20} 為其第 2 年測量值,x21,…,x30x_{21},\ldots,x_{30} 為其第 3 年測量值,x31,…,x40x_{31},\ldots,x_{40} 為其第 4 年測量值。以 yy 對 xx 做簡單線性迴歸的話,會違反(一)中那些假設?(5 分)

登入後即可作答並保存紀錄。

這一題的完整詳解

核心觀念

本題考查簡單線性迴歸中,對迴歸係數進行 tt 檢定、對迴歸式進行 FF 檢定等推論所依據的誤差項假設,以及資料分組或重複測量時可能造成的違反情形。模型為

yi=β0+β1xi+εi,i=1,…,40。y_i=\beta_0+\beta_1x_i+\varepsilon_i,\qquad i=1,\ldots,40。

在固定設計的迴歸推論中,常用的誤差項假設包括:

  1. 零平均數:E(εi∣X)=0E(\varepsilon_i\mid X)=0。
  2. 等變異數:Var⁡(εi∣X)=σ2\operatorname{Var}(\varepsilon_i\mid X)=\sigma^2,各觀察值的誤差變異相同。
  3. 誤差互不相關:Cov⁡(εi,εj∣X)=0\operatorname{Cov}(\varepsilon_i,\varepsilon_j\mid X)=0,i≠ji\ne j。
  4. 常態性:εi∣X∼N(0,σ2)\varepsilon_i\mid X\sim N(0,\sigma^2),用以建立小樣本下精確的 tt 與 FF 檢定分配。

其中,零條件平均數、等變異數及互不相關是經典迴歸推論的重要條件;常態性則使小樣本檢定具有精確的有限樣本分配。題目所稱的「檢定」若指傳統迴歸的 tt、FF 檢定,應列出上述完整假設。

解題方法

判斷各小題時,先看資料的安排是否會使誤差的變異數隨觀察值改變,或使不同觀察值的誤差彼此相關。題目只說明 xx 的分組或同一人的重複測量,不代表誤差的平均數或常態性必然違反;因此應聚焦在有根據可判斷的變異數與相關性假設。

(一)檢定有效性的誤差項假設

傳統小樣本線性迴歸檢定的誤差項假設可寫為:

E(εi∣X)=0,E(\varepsilon_i\mid X)=0, Var⁡(εi∣X)=σ2對所有 i,\operatorname{Var}(\varepsilon_i\mid X)=\sigma^2 \quad\text{對所有 }i, Cov⁡(εi,εj∣X)=0(i≠j),\operatorname{Cov}(\varepsilon_i,\varepsilon_j\mid X)=0 \quad (i\ne j),

以及

εi∣X∼N(0,σ2)。\varepsilon_i\mid X\sim N(0,\sigma^2)。

也就是誤差項條件平均為零、等變異、互不相關,且服從常態分配。若不具常態性,tt 與 FF 檢定在大樣本下仍可能有近似依據;但本題有 40 筆觀察值,傳統精確小樣本檢定的假設列答時應包含常態性。

(二)男性與女性體重變異不同

🔒

後續完整解題步驟與【答案】

免費註冊,享 3 天全站完整詳解閱覽。

免費註冊

第 四 題30 分

連續變數 YY 代表因變數藥效(越大代表成效越佳),自變數 XX 為類別變數,代表 A、B、CA、B、C 三種藥物處方,三組人樣本數相同,各只接受其中一種處方。

(一)某軟體將 XX 轉成以下虛擬變數(dummy variable)X1X_1 及 X2X_2:

X1={1,當 X=A0,當 X=B0,當 X=C,X2={0,當 X=A1,當 X=B0,當 X=C。X_1= \begin{cases} 1,&\text{當 }X=A\\ 0,&\text{當 }X=B\\ 0,&\text{當 }X=C \end{cases} ,\qquad X_2= \begin{cases} 0,&\text{當 }X=A\\ 1,&\text{當 }X=B\\ 0,&\text{當 }X=C \end{cases} 。

然後以 YY 對 X1X_1 及 X2X_2 配適迴歸模式:

Y=β0+β1X1+β2X2+ε。Y=\beta_0+\beta_1X_1+\beta_2X_2+\varepsilon。

請就以下檢定結果比較三種藥物之藥效(如:何者顯著較佳、何者間無顯著差別)。(15 分)

TermCoefSE Coeft-ValueP-Value
Constant8.2000.73211.200.000
X1X_1-2.102.10-10.32
X2X_24.501.034.350.000

(二)另一種軟體轉虛擬變數的方式如下:

X1∗={1,當 X=A0,當 X=B−1,當 X=C,X2∗={0,當 X=A1,當 X=B−1,當 X=C。X_1^*= \begin{cases} 1,&\text{當 }X=A\\ 0,&\text{當 }X=B\\ -1,&\text{當 }X=C \end{cases} ,\qquad X_2^*= \begin{cases} 0,&\text{當 }X=A\\ 1,&\text{當 }X=B\\ -1,&\text{當 }X=C \end{cases} 。

然後以 YY 對 X1∗X_1^* 及 X2∗X_2^* 配適迴歸模式:

Y=β1X1∗+β2X2∗+ε。Y=\beta_1X_1^*+\beta_2X_2^*+\varepsilon。

請就以下檢定結果比較三種藥物之藥效。(15 分)

TermCoefSE Coeft-ValueP-Value
Constant8.2000.73211.200.000
X1∗X_1^*-2.641.01-2.610.009
X2∗X_2^*3.501.013.460.000
🖼️ 本題原卷含圖表。基於試題來源之版權考量,本站不轉載原卷影像; 題目文字已完整轉錄,圖表請自行參閱考選部公告之試題原檔。

登入後即可作答並保存紀錄。

這一題的完整詳解

核心觀念

本題考「類別變數的虛擬變數迴歸」及「迴歸係數與組間平均數差異的對應關係」。

判斷藥效時,應先由迴歸式求出三組的預測平均數,再依各組間的對比檢定判斷是否具有顯著差異。個別係數的 pp 值,只能直接解釋該係數所代表的特定對比,不能任意推論所有組間差異。


(一)以 CC 組為基準組

模型為

Y=β0+β1X1+β2X2+ε。Y=\beta_0+\beta_1X_1+\beta_2X_2+\varepsilon。

虛擬變數設定為:

  • CC 組:X1=0, X2=0X_1=0,\ X_2=0
  • AA 組:X1=1, X2=0X_1=1,\ X_2=0
  • BB 組:X1=0, X2=1X_1=0,\ X_2=1

因此:

三種藥物的估計藥效

CC 組:

Y^C=β0=8.200。\widehat{Y}_C=\beta_0=8.200。

AA 組:

Y^A=β0+β1=8.200−2.10=6.100。\widehat{Y}_A=\beta_0+\beta_1 =8.200-2.10=6.100。

BB 組:

Y^B=β0+β2=8.200+4.50=12.700。\widehat{Y}_B=\beta_0+\beta_2 =8.200+4.50=12.700。

所以估計藥效排序為

B>A>CB>A>C

但「估計值排序」與「統計上顯著差異」必須分開判斷。

組間差異的解釋

AA 組與 CC 組

β1=−2.10\beta_1=-2.10 代表

μA−μC=−2.10。\mu_A-\mu_C=-2.10。

其 pp 值為 0.32>0.050.32>0.05,故不能拒絕

H0:μA−μC=0。H_0:\mu_A-\mu_C=0。

因此,AA 組雖然估計藥效低於 CC 組,但兩者沒有顯著差異。

BB 組與 CC 組

β2=4.50\beta_2=4.50 代表

μB−μC=4.50。\mu_B-\mu_C=4.50。

其 pp 值為 0.000<0.050.000<0.05,故拒絕

H0:μB−μC=0。H_0:\mu_B-\mu_C=0。

因此,BB 組的藥效顯著高於 CC 組。

AA 組與 BB 組

兩組差異為

μA−μB=(β0+β1)−(β0+β2)=β1−β2=−2.10−4.50=−6.60。\mu_A-\mu_B =(\beta_0+\beta_1)-(\beta_0+\beta_2) =\beta_1-\beta_2 =-2.10-4.50=-6.60。

雖然估計上 BB 組高於 AA 組,但表中沒有直接提供 β1−β2\beta_1-\beta_2 的標準誤與 pp 值,因此不能僅由 β1\beta_1 與 β2\beta_2 各自的 pp 值,嚴格判定 AA、BB 兩組是否顯著不同。應另作線性對比檢定:

H0:β1−β2=0。H_0:\beta_1-\beta_2=0。

小結

由表中可直接確定:

  • BB 組顯著優於 CC 組。
  • AA 組與 CC 組無顯著差異。
  • AA 組與 BB 組的估計差異為 6.606.60,但須另作對比檢定才能判定顯著性。

(二)以總平均為中心的虛擬變數

題目所列 X1∗,X2∗X_1^*,X_2^* 為效果編碼(effect coding):

藥物X1∗X_1^*X2∗X_2^*
AA1100
BB0011
CC−1-1−1-1

題目文字中的迴歸式未列常數項,但輸出表出現 Constant,因此依照實際輸出,應解讀為含常數項的模型:

Y=β0+β1X1∗+β2X2∗+ε。Y=\beta_0+\beta_1X_1^*+\beta_2X_2^*+\varepsilon。

三組樣本數相同,所以 β0\beta_0 可解釋為三組藥效的總平均。

🔒

後續完整解題步驟與【答案】

免費註冊,享 3 天全站完整詳解閱覽。

免費註冊

其他考古題