社會工作研究方法怎麼判斷方案有效?單組前後測、內在效度與信效度考點整理

104學習
2026.10.24
1823次觀看

「社會工作研究方法」是社工師考試五科之一,方案評估、單組前後測、內在效度與信效度都是常見考點。本文用一組原創教學數據,帶你分清楚觀察結果與因果判斷,把結論寫得和證據相稱。

本文目錄

方案結束後,壓力分數下降,就能直接說方案有效嗎?本文用一組原創教學數據,分清楚觀察結果與因果判斷。

搭配本課程5分鐘影片,先看重點,再用下面的整理與練習確認理解。

影片/五分鐘讀懂社會工作師考試重點第5堂:社會工作研究方法,如何判斷服務是否有效

先看清楚教學數據

原創教學算例:假設一個照顧者支持方案有20人參加,其中12人完成前後測。

使用相同的零到十分自評壓力項目,分數越高表示主觀壓力越大,這12人的平均從8分降到6分。另外8人缺少可配對資料,現有安排只有這一組。

先看清楚參與人數、資料範圍與測量工具,才知道結果可以回答哪些問題。

目標與指標:信度與效度怎麼分

要談有效,先把方案目標和指標分開:

  • 參加人次:說明接觸情況
  • 滿意度:反映部分使用感受
  • 壓力測量:要了解壓力改善,就選擇適合的壓力測量

工具品質可以從信度與效度理解:信度看一致與穩定,效度看是否測到目標概念。

術語意思
建構效度測量是否適切反映欲研究的理論概念;活動滿意度不能直接代替照顧壓力
內容效度題項是否充分涵蓋目標概念的內容範圍
再測信度在適當間隔與狀態相近的條件下,重複測量的結果是否一致、穩定
評分者間信度不同觀察或評分者,對同一對象或資料的判斷有多一致

穩定仍不足以證明測到目標概念。本例的單一自評項目,用來練習把目標連到資料;完整評估還需要適合對象與目的的工具。

描述結果:先限定範圍

這份資料可以說:有配對資料的12位參與者,平均壓力下降2分。描述範圍是這12人,個別變化則可能不同。

要談統計顯著,需要適合的分析和資料;要談實務或臨床意義,還要看效應大小、適用判準及生活變化。本例未提供這些完整資訊,所以先報告人數、指標與平均差,再列出需要補充的資料。

也要分清楚比例的分母:12人有配對資料,占原本20人的六成,回答的是配對資料完成比例;改善比例則需要逐人的變化資料。同樣是六成,放在不同問題中就有不同意義。

原創教學算例圖解:20人參加、12人平均8分降到6分、12除以20等於60%是配對資料完成比例
圖解|原創教學算例:先限定結果範圍,60%是配對資料完成比例,不是成效比例

單組前後測設計與內在效度

這種安排稱為單組前後測設計:同一組在方案前後測量,沒有比較組,台灣社工師備考常將它列為前實驗設計。重點是檢視內在效度:變化能否歸因於方案,還有哪些解釋?

替代解釋意思本例線索
歷史因素前後測之間發生的外部事件方案進行時,家庭另外取得喘息服務
成熟因素參與者隨時間自然發生的身心或適應變化參與者隨時間逐漸適應照顧生活
測驗效應前測經驗本身影響後測反應做過前測後更留意壓力,影響後測作答

這三種都是要查證的可能解釋。作答時,先用術語命名,再接上案例線索與待確認資料,就能把概念寫成分析。若題目另給比較組,也要檢查兩組是否遇到相同事件,以及起點條件是否接近。

研究判讀三步驟圖解:目標與測量、設計與資料、結果與保護
圖解|讓結論與證據相稱:目標與測量、設計與資料、結果與保護

資料缺漏與樣本流失

另外8人缺少配對資料,要先了解發生在哪個環節。若原受試者退出或未再受測,就需要檢視樣本流失及可能的系統差異;缺一題或未取得前測,不直接等同退出。

  • 比較已知的背景
  • 追查未完成原因
  • 在報告交代資料範圍

若條件允許,也能考慮適當比較組,以及倫理和實務可行的隨機分派。也可以結合訪談,了解哪些安排有幫助、哪些地方難以使用;例如服務時段不合是一個可追查的退出原因,經確認後才寫成事實。

研究方法申論四段架構

  • 目標與測量
  • 設計與資料
  • 結果與限制
  • 倫理和保護

資料蒐集要說明目的和用途,尊重自願參與,維持既有服務與問卷選擇的界線。前後測需配對時,就安排適當編碼與存取權限。

對本例,答案要交代12位完成者、平均下降2分、單組前後測與8人資料缺漏,讓結論、方法和參與者保護一起呈現。

動手做3個練習:結果判讀與測量

  • 練習:12位有配對資料者的平均自評壓力由8分降至6分;另8位資料缺漏。現有數據最直接支持哪個敘述?(A)20位參與者平均壓力下降2分(B)12位完成者的個別壓力各下降2分(C)方案使20位參與者平均壓力下降2分(D)12位完成者的平均自評壓力下降2分
  • 解析:答案是D。D正確限定人數與平均的描述。A把觀察範圍擴及缺漏者;B把平均改變當成個別改變;C再加入資料不足以支持的方案因果主張。

  • 練習:某工具在狀態相近者身上重測,分數穩定;題目卻大多詢問活動滿意度,團隊想用它推論照顧壓力。最需補強哪項證據?(A)再測信度(B)評分者間信度(C)建構效度(D)統計檢定力
  • 解析:答案是C。建構效度關注測量是否適切反映照顧壓力這個理論概念。A關注不同時間的一致性;B關注不同評分者的一致性;D關注在特定條件下偵測效果的機率。題項大多詢問滿意度,也提示內容效度問題;本題未列內容效度選項,因此建構效度是現有選項中的最佳答案。

  • 練習:團隊準備報告另外8位缺少配對資料的情況。哪個處理最有助判斷結果範圍及可能偏差?(A)以原參與20人為分母,將12人的平均差列為全體改善程度(B)了解缺漏環節與原因,比較可得的背景資料,交代分析範圍並維持自願參與(C)先將8位歸為未改善者,再比較方案前後的平均壓力(D)以12位完成者平均值補齊8位,再把完整資料數列為20位
  • 解析:答案是B。B先了解資料缺漏及可能系統差異,並維護參與者選擇。A混用分母與分析範圍;C把未知結果當成未改善;D未具適當方法與依據便填入推定值。

資料來源與教學說明

本文數據為原創教學算例,使用練習用自評項目,未設比較組,不能用來宣傳真實方案成效;練習題與申論架構皆為原創,不代表官方標準答案或配分。

資訊查核日期:2026-10-19。

社工師考試入門系列|接著讀下一堂

更多104【社工】工作機會

沒看到有興趣的職缺嗎?

致力於職場學習成長,我們將提供在職場相關學習趨勢、課程推薦、證照排行榜等相關資訊,協助你打造職涯成長的藍圖。