More Related Content Similar to 0831 npo的方案撰寫(王嘉蕙老師) Similar to 0831 npo的方案撰寫(王嘉蕙老師) (20) 0831 npo的方案撰寫(王嘉蕙老師) 5. 為何要做成效評量?
成效評量是為了:
•發現服務對象是否達到預期效益
•改進方案
•對外說明方案的效益
•獲取有助於決策與計畫的相關知識
•探討非預期的正面成效
Measuring Program Outcomes. United Way of America. 1996.
2012/8/31
5
6. 成效評量發現的結果
在組織內部運用
•改善方案品質
•改善方案管理
•支持計畫
•爭取合理經費預算
•探討訓練需要
Measuring Program Outcomes. United Way of America. 1996.
2012/8/31
6
7. 成效評量發現的結果
在組織外部運用
•推廣方案給潛在案主
•召募職員,董理監事會和志工
•尋找合作夥伴
•提昇共公共形象
•維持及增加經費來源
Measuring Program Outcomes. United Way of America. 1996.
2012/8/31
7
11. 邏輯模式的問題
• 邏輯模式可以回答三個關鍵問題嗎?(方案服務對象是誰?
要處理什麼問題與情況?方案能解決與改變什麼問題?)
• 成效是否連結方案活動?
• 成效是否對服務對象有助益?
• 這個方案能夠產生初期成效嗎?
• 長期成效對服務對象來說,是否在長期成效中獲得有效的幫助
? ?
• 這個方案能夠有長期的成效改善服務對象的地位、狀況、生
活品質嗎?
? ?
• 這一系列的成效有合理嗎?
• 這一系列的成效是否充分描述方案的信念? ?
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
2012/8/31
11
12. 讓邏輯貫通方案
釐清方案理論 以案主為核心,認識外部環境與
1. 問題與議題說明 問題需求等探討與分析能力
2. 社區需求
3. 預期效益 理論基礎的運用
4. 影響因素 與
5. 策略 問題干預策略的發展
6. 假設
呈現方案的進展
1. Outputs 成果
2. Outcomes 成效 邏輯性地
3. Impact 影響 規劃與執行方案計畫
4. Activities 活動/服務
5. Resources 資源
方案評量問題與指標
1. Focus Area 服務焦點 善用資料蒐集工具
2. Audience 方案相關人士
3. Questions 問題
評估與分析能力
4. Information Use 資訊使用
5. Indicators 指標
2012/8/31 12
6. Technical Assistance 技術支援 溝通與公共關係的策略 12
13. 經費申請書 開始
預期成效 因為 你想做的事
我
根據這個理論基礎 的假設基礎和
們
應該產生的結果 影響因素成立的話
想
規劃與設計 要
做
的
我們目前為止做的 理論型式
Theory type
Program
成果報告 Logic
評估 執行 管理機制
或 model
溝通與行銷
其他媒介媒體
如何呈現
機構說要做的事情
預計要做的事 Planned work –
所以 預計要做的事情是根據理論基礎規劃的…
2012/8/31
13 13
14. 邏輯模式發展—方案計畫
假設/前提
策 略 6
5
列出認為可以協助達成 說明為何這些策略在社區中會發揮
方案目標的各項策略 功效及如何發揮功效
影響因素 問題或議題 希望得到的結果
4 1 (output,outcome,
描述方案欲解決的問題 and impact) 3
或欲提出的議題
描述出如果方案
列出認為可能
開始執行,所希
影響方案 社區需求 2 望得到的結果、
的個項因素
或對未來的願景
具體說明社區需求— (短、中、長程)
為何要發展此方案
2012/8/31
14
17. 邏輯模式各單元
問題界定 服務設計
目標及目的
與 服務方案
的
需求評估 資源 運作 服務 成效評量
設定 投入 過程 產出
2012/8/31
17 17
18. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
問題界定
•現有的社會問題中,機構所關注的議題
為何?
•是誰來判定這個情境為問題?
•能否用資料或具體的現象來界定問題?
2012/8/31 18
19. 問題界定
是誰面臨什麼樣的問題情境?(目標人口群)
有多少人處於這樣的問題情境中?
針對這個問題情境我們可以處理那個範圍?
這個範圍的問題現況為何?(釐清方案的理論基礎
與假設)
問題的本質及成因是什麼?
曾有過那些解決方案?其成效各為如何?
■ 找尋有關此問題情境的數據資料作為依據
全國性的數據資料
地方性的數據資料
不見得可以找到精確的數據,有時需要用推估
的方式來獲得
2012/8/31 19
20. 看待問題的觀點
所關懷的 問題 看待問題 期待
對象 的觀點
請說明你或你 請以一段話描 請以一段話說 請以一段話說
的組織所觀察 述這個群體正 明你或你的組 明你或你的組
到需要協助的 在經歷甚麼問 織以甚麼觀點 織認為如何處
群體 題 看待這個群體 理這樣的問題
所面臨的問題
社區中新移民 語言/識字能 主要照顧者無 增加新移民家
家庭的學齡前 力較同年齡的 法提供適當的 庭主要照顧者
兒童 兒童來的低落 中文化學習資 中文化的學習
源 資源
2012/8/31 20
21. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
需求評估
方案預期服務的範圍(地理區域、人口群)為何?
該服務範圍的社區或族群有何特性?
方案服務的執行所希望解決的是哪些具體問題?
其中受到上述問題影響所及的是哪些人?
在哪些方面受到影響?
該項問題與需求迫切性的具體實證為何?
2012/8/31 21
22. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
需求評估的方法
運用次級資料推估
運用現有機構服務的統計資料
透過相關文獻資料的分析與整理
社區需求調查
現有資源盤點
舉辦公聽會蒐集資料
2012/8/31
22
24. 尋找資料的相關資源
• 政府網站
– 內政部社會司、兒童局
– 內政部統計處
– 勞委會職業訓練局
– 行政院主計處統計專區
– 國家圖書館政府資訊網
• 相關文獻
– 圖書:國家圖書館館藏目錄查詢系統、全國文獻傳遞
服務系統
– 博碩士論文:台灣博碩士論文知識加值系統
– 政府委託研究報告:內政部研考資訊系統
– 期刊論文:台灣期刊論文索引系統
2012/8/31 24
25. 工作表單一:問題界定與需求評估
試將方案中「問題的界定與需求評估」
轉化成文字敘述填寫於下面各欄位中
問題界定 需求評估 資料蒐集
2012/8/31 25
26. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
目標樹
使命(Mission)
方案A 方案B(Program) 方案C
目標(Goal) 目標2
目的1(Objective) 目的2
26
2012/8/31
27. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
目標(Goal)
定義:機構主要關心的社會議題,希望對
某一特定族群所造成的最終影響。
進行目標設定時,要注意:
機構所關心的社會議題
主要被服務的目標人口群
方案最終希望達到的影響或理想
達成目標所使用的策略
2012/8/31
短、中、長期目標間須有邏輯的關係 27
28. <長期目標>
青少年順利從學校畢業
範 <中期目標>
青少年學業成績獲得改善
例 <中期目標>
青少年能按時完成家庭作業
<中期目標>
青少年能夠運用學到的好習慣讀書
<短期目標>
2012/8/31
青少年學到良好的讀書習慣
28
29. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
目的(Objective)
定義:在特定的時間內,預期達到的明確
成果,進行目的設定時,要注意:
完成時間、期限
欲達成可測量的具體成果
達成目標的測量方式
2012/8/31 29
30. 目的設定時的思考面向
• 時間架構
– 方案時間表
• 方案的服務對象
– 應明確指出方案希望服務對象所產生的改變
• 欲達成明確、可測量的具體成果
• 測量目的是否達成的方法
– 測量的方法
2012/8/31 30
33. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
資源投入(Input)
定義:方案計劃當中藉以產生或持服務
的資源,用於支持方案內容所進
行的相關活動。
2012/8/31 33
34. 資源投入面向
• 服務對象
– 服務對象的資格
– 服務對象人數
• 人力資源
– 專業工作人員的資格與人數
– 兼職工作人員的資格與人數
– 志工的資格與人數
– 工作loading
• 知識與技術
2012/8/31 34
38. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
運作過程(Process)
定義: 服務提供的過程。包括:
1.服務的定義
2.服務策略
3.服務工作項目
4.服務流程
5.服務時間規劃
2012/8/31 38
44. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
產出(Output)
•定義:方案活動的產物、服務使用者
所接受的服務。
2012/8/31 44
46. 工作表單五﹕產出
試將方案中「產出」轉化成文
字敘述
2012/8/31 46
47. 問題界定 目標及目的 服務設計
服務方案
與 的 資源 運作 服務 成效評量
需求評估 設定 投入 過程 產出
何謂成效(Outcome)?
一個方案預期目標的具體達成程度,以
及展現在具體事實上的各種可觀察與可
測量的改變或參與者的受益情形。
2012/8/31 47
48. 成效評量
outcome measurement
• 焦點放在處遇的結果上,特別是處遇是否
會產生預期的成效,並且去確認方案的成
果目標被達成的程度。
• 成果評量須依賴清楚和明確的目標,這些
目標是基於期望的效果,焦點擺在服務使
用者狀況的改變上,例如:知識、技巧、
態度、行為或能力。
2012/8/31 48
49. 成效評量: 三個階段
第一階段:
第三階段:
規劃成效評量;
發展邏輯模式
蒐集資料,改善方案
1
3
2 第二階段:
選擇成效: 確認指標與影響因素
2012/8/31 49
50. 成效評量的步驟
確 蒐
規 發 選 認 集
劃 展 指 資
擇 標 料
成 邏 與 ,
效 輯 成 影 改
評 模 響 善
量 式 效 因 方
素 案
2012/8/31 50
51. 規劃成效評量
• 決策者的支持:方案評量因為會動用到組織的資源,
是以必須獲得決策者的支持。
• 確認方案:成效評量所要評量的方案到底為何
• 形成工作團隊:成效評量是由一個團隊執行評量工
作。
• 確定工作時限:成效評估不可能無限期評量下去,
必須有所規劃,限定出明確的時間執行並完成效評
量。
• 釐清參與者的職責:針對團隊成員的職責一一釐清,
以提昇工作效率。
2012/8/31 51
52. 成效類別
服務成效
短期 中期 長期
知識 學習 能力
態度 行為 狀況
技巧 地位
2012/8/31 52
53. 發展成效邏輯模式
為本方案投入的資源 運用投入資源,以
方案宗旨為目標所 方案直接成果 方案進行中與進行後案
例如: 進行的相關活動 主或參與者的受益情形
經費 例如: 例如: 例如:
專職人力與時間 提供遊民食宿 授課班數與時數 獲取新知識
志工人數與時數 提供就業訓練 提供諮商服務時數 增進新技能
設備設施 教育社會大眾有關 提供教材份數
器材及工具 兒童保護的觀念: 服務提供的總時數
方案規範與限制 如何辨認受虐兒童 方案服務人數 態度價值觀改變
例如: 的傷痕
法律 為青少年少女安排 行為的改善
辦法與規定 大哥大姊陪伴成長
經費贊助者要求 狀況的改善
社經地位的提昇
2012/8/31 53
54. Long-term outcomes
長期成效
Intermediate
Outcomes 中期成效
Initial Outcomes
初期成效
Outputs 服務產出
Activities 方案活動
Input 投入資源
2012/8/31 54
55. 邏
輯
模
式
圖
範
例
2012/8/31 55
57. 選擇要測量的成效
選擇具有以下條件的成效:
該成效與方案服務的結果有
邏輯關係
與特定的方案活動有關
能回應方案關切的問題
代表有意義的幫助或改變
能夠有效地傳達方案的效益
2012/8/31 57
58. 成效選擇表
成效 意義性 責信 可測性 可行性
評估此成 評估此成 評估此成 考量每一
效對此方 效對於此 效能被測 個成效評
案的意義 方案責信 量的程度 量所需的
列出四個 總
(從1-3 展現的程 (從1-3 時間、資
在這方案 計
分,3分 度(從1-3 分,3分 源和互利
邏輯模式
代表最具 分,3分代 代表最容 (從1-3
中的成效。
意義性) 表最具可 易被測量) 分,3分
說明性) 代表最具
可行性)
2012/8/31 58
59. 確認指標
指標是:
可觀察也可測量的
能夠導出方案的成功
描述成效發生時的情形
夠明確,能使不同的人
看到時得到相同結論
能夠以合理的成本、
時間、人力來測量
2012/8/31 59
2-7
60. 指標的類型 :課輔家教
成效類型 成效 指標
知識 學生知道好的學習 **%的學生,可以指出至少五
習慣 種有效學習的讀書方法
行為 學生準時完成家庭 **%的學生,在老師指派作業
作業 後能準時繳交
改善的情況 學生有好的學習成 **%的學生,能得到A或B的
就 成績並繼續保持。
**%得到C或更差成績的學生,
可以在完成方案後,改善他們
的成績
2012/8/31 60
2-9
61. 步驟三:確認影響因素
變數:
服務對象
環境
方案
2012/8/31 61
2-10
62. 成效評量 : 第三階段
第一階段:規劃
「成效評量」,發
展邏輯模式
第三階段:
蒐集資料,改善方案
第二階段:選擇成效:
確認指標與影響因素
2012/8/31 62
3-1
63. 第三階段 : 蒐集資料 ; 改善方案
第一步驟-設計資料蒐集方法
Use
Analyze
第二步驟-資料蒐集 Organi
ze
Collect
第三步驟-組織並彙整資料 Design
第四步驟-分析和呈現資料
第五步驟-運用資料改進方案,你的行動計畫
2012/8/31 63
3-3
64. 成效評量規劃表
成效:
HOW WHO WHEN WHERE
(方法和工
指標/影響因素 程序(Procedures)
具)
你如何得 什麼時候要 在什麼地方
方案預期達 到資料? 誰負責提供 收集資料— 收集資料—
到成效,你 你所使用 資料?誰負 在方案中的 是在服務對
所要觀察或 的方法和 責收集資料 那個時機點 象的家中、
測量的指標?工具是什 ? 以及頻率、 透過電話等
麼? 次數? ?
2012/8/31 64
65. 成效導向邏輯模式的計畫書架構
– 計畫名稱、計畫書摘要、邏輯模式
– 計畫書的前言、緣起
– 處境分析、問題界定、需求評估
– 計畫的目標與目的
– 活動或服務、投入資源
– 評估計畫
– 預算表、進度表與分工表
– 附件
2012/8/31 65
66. 謝謝聆聽
敬請指教
2012/8/31 66