首頁 / 學習筆記 / 中級科目二 / 假設檢定與統計推論

iPAS AI中級中級科目二📊 統計與資料分析
📖 學習筆記・中級科目二

CH3.3 假設檢定與統計推論

假設檢定與統計推論

🧭 本節架構

統計推論二大分支:參數估計(點估計/區間估計)與假設檢定(設 H0/H1 → 選檢定方法 → 定顯著水準 α → 算檢定統計量與 p 值 → 依 p 值與 α 比較作結論)→ 型一/型二錯誤的取捨 → 依資料型態與研究設計挑選對應檢定方法(t 檢定/ANOVA/比例檢定/卡方檢定/相關性分析/非參數檢定)。

1. 統計推論總覽

統計推論(Statistical Inference)是以樣本資料為基礎,對整體母體特徵進行科學性推估的程序,是機器學習與大數據分析背後的邏輯支柱。可概略分為兩大核心分支:

分支目的重點問題輸出結果
參數估計(Parameter Estimation)推測母體參數的「值」或「區間」這個母體參數大約是多少?點估計值(如平均數)與信賴區間(如 95% CI)
假設檢定(Hypothesis Testing)驗證某個關於母體參數的「主張」是否成立是否有足夠證據拒絕一個假設?p 值、檢定統計量,並依顯著水準決定是否拒絕虛無假設

(1) 參數估計:點估計與區間估計

  • 點估計(Point Estimation):以樣本資料計算出一個單一數值,作為對母體參數的最佳估計(如樣本平均數估計母體平均數),但無法反映估計的不確定性。
  • 區間估計(Interval Estimation):提供一個數值範圍表示信心程度,稱為信賴區間(Confidence Interval)。
⚠️ 易錯點

95% 信賴區間的正確解讀是:若以相同方式重複抽樣並對每個樣本建立信賴區間,則預期這些區間中約有 95% 會包含母體的真實參數值——而非「母體參數有 95% 機率落在這個特定區間內」,這是常見的誤解陷阱。

2. 假設檢定的完整流程

假設檢定(Hypothesis Testing)用於檢視樣本資料是否提供足夠證據,足以拒絕原先的假設。強調的是「證據是否足夠」,而非直接斷定假設真偽。完整流程:

`` A. 設定虛無假設 H0 與對立假設 H1 ↓ B. 選擇適當的檢定方法與檢定統計量 ↓ C. 決定顯著水準 α ↓ D. 計算檢定統計量與 p 值 ↓ E. 比較 p 值與 α,作出結論 ``

(1) 虛無假設與對立假設

H0(虛無假設)H1(對立假設)
定義反映現狀、無差異、無效果的主張反映研究者欲驗證的新主張(有差異、有改變、有效果)
功能作為檢定的基準起點若 H0 被拒絕,則支持 H1
評估方式資料是否足以拒絕 H0?若拒絕 H0,則間接支持 H1
結論邏輯無法拒絕不代表接受,僅表示證據不足拒絕 H0 代表支持 H1,有統計上的意義

(2) 顯著水準(α)

事前設定的可接受錯誤機率上限,代表 H0 為真時仍可能因樣本隨機波動而錯誤拒絕該假設的機率,也就是型一錯誤發生的上限。

α 水準意涵適用情境
0.05最多容許 5% 錯誤拒絕的情形應用最普遍的標準
0.01更嚴格,僅容許 1% 錯誤藥物療效、安全風險、高金額決策
0.10較寬鬆,容忍較高不確定性初步探索、假說生成階段
⚠️ 易錯點

顯著水準(α)不等於 p 值!α 是事前設定的判斷門檻,p 值是觀察樣本後計算出的機率。檢定結論是根據「p 值是否小於 α」而定,而非兩者互換。

在多重比較或大數據情境下,若重複進行多次統計檢定而未調整,會大幅提升整體犯型一錯誤的風險,常見做法是採用 Bonferroni 校正法控制整體錯誤率。

(3) 檢定統計量與 p 值

檢定統計量衡量觀察結果與虛無假設預期結果之間的差異程度(t 檢定用 t 值、卡方檢定用卡方值、ANOVA 用 F 值)。p值 是指在虛無假設為真的情況下,觀察到與實際樣本結果相同或更極端的資料出現的機率——p 值越小,越支持拒絕虛無假設。

(4) 作出結論

\[p \le \alpha \Rightarrow \text{拒絕 } H_0 \text{(有足夠證據支持 } H_1\text{)}\]
\[p > \alpha \Rightarrow \text{無法拒絕 } H_0 \text{(證據不足,但不代表 } H_0\text{ 為真)}\]

3. 型一錯誤與型二錯誤

H0 為真H0 為假
保留 H0正確判斷(機率 = 1−α)型二錯誤(漏判,機率 = β)
拒絕 H0型一錯誤(誤判,機率 = α)正確判斷(檢定力,機率 = 1−β)
  • 型一錯誤(Type I Error):H0 實際為真卻錯誤拒絕,即「把沒有差異誤判為有差異」,機率由 α 控制。
  • 型二錯誤(Type II Error):H1 實際為真卻未能拒絕 H0,即「有差異卻誤以為沒差異」,機率為 β,與檢定力(Power = 1−β)有關;樣本數不足、變異數過大或效應太小,都會使檢定力降低、型二錯誤風險上升。
🎯 核心觀念

型一與型二錯誤通常無法同時降到極低:降低 α 可減少型一錯誤,卻會提高型二錯誤風險。研究設計需依應用風險權衡——若通過無效藥品的後果嚴重,應嚴格控制型一錯誤(α 設低);若錯過有效創新的代價高,則應提高檢定力、降低型二錯誤。可透過事前的檢定力分析(Power Analysis)合理配置 α、β 與樣本數。

4. 檢定方法總表

依「資料型態、研究設計、分析目的」選擇合適的統計檢定方法:

研究問題資料型態檢定方法前提假設
一組數值是否與某理論值不同?一組連續變數單樣本 t 檢定假設母體為常態分佈
兩組不同人的平均數是否不同?兩組獨立樣本獨立樣本 t 檢定需檢查變異數是否相等
同一批人前後變化是否顯著?配對樣本配對樣本 t 檢定比較「差值」是否為 0
兩組比例是否有差異?類別資料比例 Z 檢定或卡方檢定樣本夠大時可用 Z 檢定
三組以上的平均是否不同?三組以上獨立樣本單因子 ANOVA需滿足常態與變異數齊一性
類別變數間是否有關聯?交叉表資料卡方獨立性檢定每格期望次數應足夠(>5)
兩個連續變數是否有線性關係?連續變數皮爾森相關係數檢定需符合雙變數常態

(1) 平均數的差異檢定

單樣本 t 檢定(One-sample t-test):檢驗「樣本平均數是否與某已知值 μ₀ 存在顯著差異」,適用於母體標準差未知、樣本數較小(n<30)時。H0:μ=μ₀。

獨立樣本 t 檢定(Independent-samples t-test):比較兩組互相獨立樣本的平均數是否有顯著差異,前提需檢查母體變異數是否相等(可用 Levene's test,若不等應採 Welch's t 檢定)。H0:μ₁=μ₂。

配對樣本 t 檢定(Paired-samples t-test):比較同一個體在兩種情況下的平均差異,核心在於「差值」μd 的統計推論。H0:μd=0。

單因子變異數分析(One-way ANOVA):比較三組以上獨立樣本平均數是否有顯著差異,延伸自 t 檢定。H0:μ1=μ2=…=μk(所有群組平均數相同)。

🎯 核心觀念

ANOVA 顯著只代表「至少有一組平均數與其他組不同」,並不指出哪一組不同,也不等於「所有群組都不同」——若顯著,仍需進一步進行事後檢定(Post-hoc test,如 Tukey HSD)才能找出具體差異的組別。

三種 t 檢定的方向性判斷(以單樣本為例,獨立樣本與配對樣本邏輯相同):

檢定方向H1用途
雙尾檢定μ ≠ μ₀想知道是否有「差異」(不論方向)
左尾檢定μ < μ₀想確認是否「變小」或「變差」
右尾檢定μ > μ₀想確認是否「變大」或「改善」
⚠️ 易錯點
  • 若只有兩組資料要比較,應使用 t 檢定,誤用 ANOVA 屬常見錯誤。
  • 同一組人測前後結果,應使用配對樣本 t 檢定而非獨立樣本 t 檢定,混淆兩者是最常見的誤用。
  • 檢定方向(單尾或雙尾)須事先設定,不能依結果事後選擇。

(2) 比例或類別變數的比較

單樣本比例檢定:檢驗樣本中事件發生比例是否與預期比例 p₀ 有顯著差異,常態近似需滿足 \(n\times p_0 \ge 5\) 且 \(n\times(1-p_0)\ge 5\),否則應改用精確二項檢定。H0:p=p₀。

雙樣本比例檢定:比較兩獨立樣本間事件發生比例是否有顯著差異,如 A/B 測試比較點擊率。H0:p1=p2。

卡方檢定(Chi-square test):用於分析類別資料是否呈現某種統計關係,分兩種主要形式:

類型用途虛無假設 H0
獨立性檢定(Test of Independence)判斷兩個類別變數是否彼此相關(如性別 vs 投票傾向)兩變數彼此獨立,無關聯
適合度檢定(Goodness-of-Fit Test)檢驗觀察資料是否與預期分佈吻合觀察分佈與預期分佈相同
⚠️ 易錯點

卡方檢定要求預期頻數(expected frequency)應盡可能 ≥5,若期望值太小應合併類別或改用 Fisher's exact test;卡方統計量依賴原始計數資料(frequency),不宜直接用比例或百分比資料進行分析。

(3) 相關性分析

檢定方法適用資料是否要求線性關係是否要求常態分佈
皮爾森相關係數檢定(Pearson)兩連續變數是(僅偵測線性關係)是
斯皮爾曼等級相關檢定(Spearman)順序資料或偏態/含離群值的連續變數否(僅要求單調關係)否

皮爾森相關係數 r 介於 −1 與 +1 之間:正相關(r>0)、負相關(r<0)、無相關(r≈0)。H0:ρ=0(無線性相關)。

⚠️ 易錯點

相關係數顯著(r 值顯著不為 0)不代表因果關係,僅表示關聯性;Pearson 檢定僅偵測線性關係,若資料呈曲線趨勢(如拋物線),r 值可能低估實際相關性,此時應改用 Spearman 等級相關。

(4) 非參數檢定

當資料不符合常態分佈、含極端值或為順序資料時,可用非參數方法取代 t 檢定/ANOVA:

非參數方法對應的參數方法比較對象虛無假設 H0
Mann-Whitney U 檢定獨立樣本 t 檢定兩組獨立樣本的中位數/分佈兩組資料來自相同分佈
Kruskal-Wallis 檢定單因子 ANOVA三組以上獨立樣本的中位數/分佈所有群組資料來自同一分佈
⚠️ 易錯點

Mann-Whitney U 與 Kruskal-Wallis 檢定是基於中位數與排名的檢定,不能解釋為「平均數有差異」;兩者皆為獨立樣本方法,若資料具配對性應改用 Friedman 檢定。

📝 章節考題自測(先作答,再點開解答)

Q1. 某研究者宣稱其 95% 信賴區間為 [66, 70] 公斤,下列解讀何者正確?

(A) 母體平均體重有 95% 的機率落在 66 到 70 公斤之間 (B) 若重複抽樣多次並各自建立信賴區間,約有 95% 的區間會涵蓋母體真實平均值 (C) 95% 的樣本個體體重落在此區間內 (D) 此區間必定包含母體真實平均值

解答與解析

參考 Ans: (B) 信賴區間的正確解讀是針對「重複抽樣的過程」而非單一區間本身的機率:若以相同方式重複抽樣並建立信賴區間,預期約 95% 的區間會包含母體真實參數值。(A)(D) 是常見誤解,(C) 與個體分布無關。

Q2. 某公司想確認新舊兩種教學法對「同一批」學生前後成績的影響,應使用下列何種檢定?

(A) 獨立樣本 t 檢定 (B) 配對樣本 t 檢定 (C) 單因子 ANOVA (D) 卡方獨立性檢定

解答與解析

參考 Ans: (B) 題目描述「同一批人」前後測量,屬於配對設計,核心是比較「差值」是否為 0,應使用配對樣本 t 檢定而非獨立樣本 t 檢定,混用兩者是常見誤用。

Q3. 某藥廠檢驗新藥療效,設定 α = 0.01,檢定後得 p = 0.03,應如何解讀?

(A) p < α,拒絕虛無假設 (B) p > α,無法拒絕虛無假設,證據不足以支持新藥有效 (C) p = α,結果不確定 (D) 應直接接受虛無假設為真

解答與解析

參考 Ans: (B) \(p = 0.03 > \alpha = 0.01\),因此無法拒絕虛無假設,代表目前證據不足以支持新藥有效;但這不代表虛無假設「新藥無效」為真,只是證據不足,(D) 為錯誤敘述。

Q4. 關於型一錯誤與型二錯誤的敘述,下列何者正確?

(A) 降低顯著水準 α 可以同時降低型一與型二錯誤 (B) 型一錯誤是指「H0 為真卻拒絕 H0」,型二錯誤是指「H1 為真卻未拒絕 H0」 (C) 檢定力等於 α (D) 型二錯誤機率以 α 表示

解答與解析

參考 Ans: (B) 型一錯誤=誤判(H0為真卻拒絕)、機率=α;型二錯誤=漏判(H1為真卻未拒絕)、機率=β,檢定力=1−β。(A) 降低 α 通常會提高型二錯誤風險,兩者難以同時降低,(C)(D) 混淆了 α 與 β 的定義。

Q5. 某研究者想比較四種不同肥料(分為四組獨立田地)對稻米產量的影響,應使用下列何種統計方法?

(A) 獨立樣本 t 檢定 (B) 配對樣本 t 檢定 (C) 單因子變異數分析(ANOVA) (D) 皮爾森相關係數

解答與解析

參考 Ans: (C) 四組(三組以上)獨立樣本平均數的比較,應使用單因子 ANOVA;若誤用多次 t 檢定兩兩比較,會提高整體型一錯誤風險(多重比較問題)。

Q6. ANOVA 檢定結果顯示 p < 0.05,下列敘述何者正確?

(A) 代表所有組別的平均數兩兩都不同 (B) 代表至少有一組平均數與其他組不同,須進一步事後檢定找出差異組別 (C) 代表資料不服從常態分佈 (D) 代表變異數不齊一

解答與解析

參考 Ans: (B) ANOVA 顯著只能說明「至少有一組」平均數不同,不能斷定所有組別兩兩都不同,需搭配事後檢定(如 Tukey HSD)進一步比較,才能確認具體是哪些組別存在差異。

Q7. 某研究者想分析「學生的班級排名」與「參與社團活動的等第(低/中/高)」之間的關聯性,且資料為順序型、不符合常態假設,應優先使用下列何種方法?

(A) 皮爾森相關係數 (B) 斯皮爾曼等級相關檢定 (C) 獨立樣本 t 檢定 (D) 卡方適合度檢定

解答與解析

參考 Ans: (B) 資料為順序型且不符合常態假設,應使用斯皮爾曼等級相關檢定,它不要求變數間為線性關係,也不需常態分佈,適合順序資料或含離群值的連續變數。

Q8. 某零售商想檢驗「性別」與「是否購買促銷商品」兩個類別變數之間是否有關聯,交叉表中各格期望次數皆大於 5,應使用下列何種檢定?

(A) 獨立樣本 t 檢定 (B) 卡方獨立性檢定 (C) 皮爾森相關係數 (D) 單因子 ANOVA

解答與解析

參考 Ans: (B) 兩個類別變數的關聯性檢定應使用卡方獨立性檢定,且題目條件(各格期望次數皆 >5)恰好符合卡方檢定的前提假設,適合直接套用。

Q9. 某電商想比較兩組(不符合常態分佈)獨立樣本消費者對產品的滿意度評分中位數是否不同,應使用下列何種方法?

(A) 獨立樣本 t 檢定 (B) Mann-Whitney U 檢定 (C) 皮爾森相關係數 (D) 卡方適合度檢定

解答與解析

參考 Ans: (B) 資料不符合常態分佈時,應以 Mann-Whitney U 檢定取代獨立樣本 t 檢定,作為比較兩組獨立樣本中位數/分佈差異的非參數方法。

Q10. 某研究者同時對 500 個特徵各做一次獨立的統計檢定(α=0.05),若所有特徵實際上皆無效果,下列敘述何者正確?

(A) 不會有任何一個檢定結果顯著 (B) 因為多重檢定,仍可能因隨機誤差出現約 25 個「看似顯著」的偽陽性結果,應搭配 Bonferroni 校正等方法調整 α (C) 只要 α 設為 0.05 就不會有偽陽性問題 (D) 偽陽性只會發生在小樣本情境

解答與解析

參考 Ans: (B) 每次檢定的型一錯誤率為 5%,同時進行 500 次獨立檢定時,即使所有特徵實際無效果,仍預期約 500×0.05=25 次會被誤判為顯著(偽陽性),這就是多重檢定問題,常見對策為 Bonferroni 校正或 FDR 控制法(如 Benjamini-Hochberg 程序)。