成效導向邏輯模式
            之方案設計與管理

              王嘉蕙


2012/8/31              1
參考資料
•中華社會福利聯合勸募協會、鄭怡世(2010),
 成效導向的方案規劃與評估,巨流圖書公司。
•趙佳音、中華社會福利聯合勸募協會合譯
 (2010),邏輯模式發展指南,巨流圖書公司。
•高迪理譯(2009),服務方案之設計與管理,揚
 智文化。
•趙善如譯(1999),社會服務方案績效的評量方
 法與技術,亞太圖書。
•羅國英、張紉譯(2007),方案評估-方法及案例
 討論,雙葉書廊。
•中華社會福利聯合勸募協會成效評量講師群講義。

2012/8/31
11/30/2011              2
成效評量的重要性




2012/8/31              3
責信時代來臨了!
•經費補助緊縮
•績效責任,如何服務方案成效不彰,
 為什麼要持續給予資助?
      –對經費贊助者負責
•服務對象的滿意度
      – 對服務的對象負責
• 對服務提供者專業的責信

2012/8/31
                       4
為何要做成效評量?
   成效評量是為了:
•發現服務對象是否達到預期效益
•改進方案
•對外說明方案的效益
•獲取有助於決策與計畫的相關知識
•探討非預期的正面成效

Measuring Program Outcomes. United Way of America. 1996.


2012/8/31
                                                           5
成效評量發現的結果
                在組織內部運用
            •改善方案品質
            •改善方案管理
            •支持計畫
            •爭取合理經費預算
            •探討訓練需要
     Measuring Program Outcomes. United Way of America. 1996.



2012/8/31
                                                                6
成效評量發現的結果
                在組織外部運用
            •推廣方案給潛在案主
            •召募職員,董理監事會和志工
            •尋找合作夥伴
            •提昇共公共形象
            •維持及增加經費來源
     Measuring Program Outcomes. United Way of America. 1996.



2012/8/31
                                                                7
何謂成效導向邏輯模式




2012/8/31
                         8
邏輯模式的定義
• 是一種系統化與視覺化的方法
• 表達經營方案所持有的資源、計畫的活動
  與希望達成的改變或成效之間關係的認知
               策    略           假設/前提             6
                        5


                                      希望得到的結果
            影響因素4       問題或議題    1   (output,outcome,
                                        and impact) 3

                        社區需求     2


2012/8/31
                                                        9
為何使用邏輯模式
• 邏輯模式有助於方案成功﹙設計、實施、
  、評估﹚
• 邏輯模式強化方案實施
• 發展方案邏輯模式需要簡單的圖像及直接
  的方法
• 邏輯模式可反映團體的程序及共識
• 和方案一樣,邏輯模式也可能隨時間而改
  變
2012/8/31              10
邏輯模式的問題
• 邏輯模式可以回答三個關鍵問題嗎?(方案服務對象是誰?
  要處理什麼問題與情況?方案能解決與改變什麼問題?)
• 成效是否連結方案活動?
• 成效是否對服務對象有助益?
• 這個方案能夠產生初期成效嗎?
• 長期成效對服務對象來說,是否在長期成效中獲得有效的幫助
                                    ?                ?
• 這個方案能夠有長期的成效改善服務對象的地位、狀況、生
 活品質嗎?
                             ?        ?
• 這一系列的成效有合理嗎?
• 這一系列的成效是否充分描述方案的信念?                     ?
            ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?
2012/8/31
                                                11
讓邏輯貫通方案
            釐清方案理論                           以案主為核心,認識外部環境與
            1.   問題與議題說明                      問題需求等探討與分析能力
            2.   社區需求
            3.   預期效益                           理論基礎的運用
            4.   影響因素                              與
            5.   策略                            問題干預策略的發展
            6.   假設

            呈現方案的進展
            1.   Outputs 成果
            2.   Outcomes 成效                     邏輯性地
            3.   Impact 影響                     規劃與執行方案計畫
            4.   Activities 活動/服務
            5.   Resources 資源


            方案評量問題與指標
            1.   Focus Area 服務焦點               善用資料蒐集工具
            2.   Audience 方案相關人士
            3.   Questions 問題
                                               評估與分析能力
            4.   Information Use 資訊使用
            5.   Indicators 指標
2012/8/31                                                     12
            6.   Technical Assistance 技術支援   溝通與公共關係的策略       12
經費申請書                   開始
            預期成效                                因為 你想做的事
                                         我
     根據這個理論基礎                                    的假設基礎和
                                         們
     應該產生的結果                                    影響因素成立的話
                                         想
                            規劃與設計        要
                                         做
                                         的
              我們目前為止做的     理論型式
                           Theory type
                            Program
   成果報告                      Logic
                評估                           執行     管理機制
     或                       model
               溝通與行銷
  其他媒介媒體




                             如何呈現
                           機構說要做的事情

                        預計要做的事 Planned work –
                    所以 預計要做的事情是根據理論基礎規劃的…
2012/8/31
                                                   13 13
邏輯模式發展—方案計畫
                                   假設/前提
             策   略                                      6
                       5
  列出認為可以協助達成                  說明為何這些策略在社區中會發揮
  方案目標的各項策略                      功效及如何發揮功效


影響因素                   問題或議題            希望得到的結果
             4                      1   (output,outcome,
                     描述方案欲解決的問題            and impact)   3
                      或欲提出的議題
                                        描述出如果方案
列出認為可能
                                        開始執行,所希
 影響方案                      社區需求    2    望得到的結果、
的個項因素
                                        或對未來的願景
                     具體說明社區需求—          (短、中、長程)
                      為何要發展此方案


 2012/8/31
                                                   14
方案理論基礎與假設
• 先釐清誰在經歷甚麼問題
• 我們是以甚麼觀點與角度來看待這個群體
  所面臨的問題
• 理論基礎與假設是構思方案後續一系列行
  動的基礎




2012/8/31
                        15 15
邏輯模式單元介紹




2012/8/31
                       16 16
邏輯模式各單元


問題界定                      服務設計
             目標及目的
 與                                    服務方案
               的
需求評估                 資源    運作    服務   成效評量
              設定     投入    過程    產出




 2012/8/31
                                       17 17
問題界定         目標及目的        服務設計
                                      服務方案
 與             的     資源    運作    服務   成效評量
需求評估          設定     投入    過程    產出




   問題界定
  •現有的社會問題中,機構所關注的議題
   為何?
  •是誰來判定這個情境為問題?
  •能否用資料或具體的現象來界定問題?
 2012/8/31                              18
問題界定
  是誰面臨什麼樣的問題情境?(目標人口群)
  有多少人處於這樣的問題情境中?
  針對這個問題情境我們可以處理那個範圍?
  這個範圍的問題現況為何?(釐清方案的理論基礎
  與假設)
  問題的本質及成因是什麼?
  曾有過那些解決方案?其成效各為如何?
   ■   找尋有關此問題情境的數據資料作為依據
        全國性的數據資料
        地方性的數據資料
        不見得可以找到精確的數據,有時需要用推估
         的方式來獲得
2012/8/31                       19
看待問題的觀點
所關懷的         問題      看待問題      期待
 對象                   的觀點
請說明你或你      請以一段話描   請以一段話說   請以一段話說
的組織所觀察      述這個群體正   明你或你的組   明你或你的組
到需要協助的      在經歷甚麼問   織以甚麼觀點   織認為如何處
群體          題        看待這個群體   理這樣的問題
                     所面臨的問題
社區中新移民 語言/識字能 主要照顧者無          增加新移民家
家庭的學齡前 力較同年齡的 法提供適當的          庭主要照顧者
兒童     兒童來的低落 中文化學習資          中文化的學習
              源               資源
2012/8/31                           20
問題界定         目標及目的        服務設計
                                      服務方案
 與             的     資源    運作    服務   成效評量
需求評估          設定     投入    過程    產出




         需求評估
      方案預期服務的範圍(地理區域、人口群)為何?
      該服務範圍的社區或族群有何特性?
      方案服務的執行所希望解決的是哪些具體問題?
      其中受到上述問題影響所及的是哪些人?
       在哪些方面受到影響?
      該項問題與需求迫切性的具體實證為何?

 2012/8/31                              21
問題界定          目標及目的        服務設計
                                       服務方案
 與              的     資源    運作    服務   成效評量
需求評估           設定     投入    過程    產出



        需求評估的方法
             運用次級資料推估
             運用現有機構服務的統計資料
             透過相關文獻資料的分析與整理
             社區需求調查
             現有資源盤點
             舉辦公聽會蒐集資料
 2012/8/31
                                         22
需求評估的重點
•了解受問題困擾的目標群體及其特性
•將這些目標群體的問題轉化為需求
•將這些資訊轉化為服務內容
•目標人口群需要什麼 ?需求量為何 ?
•現有的供需比例為何 ?
•現有資源的運用情形為何 ?
•考量組織的使命、專長與優勢


2012/8/31             23
尋找資料的相關資源
• 政府網站
     –   內政部社會司、兒童局
     –   內政部統計處
     –   勞委會職業訓練局
     –   行政院主計處統計專區
     –   國家圖書館政府資訊網
• 相關文獻
     – 圖書:國家圖書館館藏目錄查詢系統、全國文獻傳遞
       服務系統
     – 博碩士論文:台灣博碩士論文知識加值系統
     – 政府委託研究報告:內政部研考資訊系統
     – 期刊論文:台灣期刊論文索引系統

2012/8/31                        24
工作表單一:問題界定與需求評估
            試將方案中「問題的界定與需求評估」
             轉化成文字敘述填寫於下面各欄位中

   問題界定        需求評估     資料蒐集




2012/8/31                       25
問題界定         目標及目的                服務設計
                                                服務方案
 與             的            資源     運作    服務     成效評量
需求評估          設定            投入     過程    產出


                          目標樹
                          使命(Mission)


         方案A         方案B(Program)             方案C


               目標(Goal)                  目標2


目的1(Objective)              目的2
                                                    26
 2012/8/31
問題界定         目標及目的        服務設計
                                       服務方案
  與             的     資源    運作    服務   成效評量
 需求評估          設定     投入    過程    產出


       目標(Goal)
            定義:機構主要關心的社會議題,希望對
               某一特定族群所造成的最終影響。
            進行目標設定時,要注意:
            機構所關心的社會議題
            主要被服務的目標人口群
            方案最終希望達到的影響或理想
            達成目標所使用的策略
2012/8/31
            短、中、長期目標間須有邏輯的關係            27
<長期目標>
              青少年順利從學校畢業

 範              <中期目標>
             青少年學業成績獲得改善


 例              <中期目標>
             青少年能按時完成家庭作業

                <中期目標>
            青少年能夠運用學到的好習慣讀書

                <短期目標>
2012/8/31
             青少年學到良好的讀書習慣
                              28
問題界定        目標及目的        服務設計
                                     服務方案
 與            的     資源    運作    服務   成效評量
需求評估         設定     投入    過程    產出



  目的(Objective)
  定義:在特定的時間內,預期達到的明確
     成果,進行目的設定時,要注意:
  完成時間、期限
  欲達成可測量的具體成果
  達成目標的測量方式

2012/8/31                             29
目的設定時的思考面向
• 時間架構
     – 方案時間表
• 方案的服務對象
     – 應明確指出方案希望服務對象所產生的改變
• 欲達成明確、可測量的具體成果
• 測量目的是否達成的方法
     – 測量的方法


2012/8/31                    30
檢視目標與目的的設計
•目標是否明確陳述預期改變的是哪些人口群?
•目標是否明確陳述預期改變這些人口群的哪些具體
 問題?
•目的陳述中是否有表明欲達成目的的特定日期或是
 什麼期限內完成?
•目的是否明確表達測量方式?以及測量的標準為何
 ?
•我們所設定的目的是否有回應到方案所呈現的問題
 以及需求評估?
•我們所設定的目標是否有回應到機構所關心的社會
 議題?                  31
2012/8/31
工作表單二:目標與目的的設定
            試將方案中「目標及目的的設定」
                轉化成文字敘述
            目標     目的




2012/8/31                     32
問題界定         目標及目的        服務設計
                                      服務方案
 與             的     資源    運作    服務   成效評量
需求評估          設定     投入    過程    產出



    資源投入(Input)
      定義:方案計劃當中藉以產生或持服務
             的資源,用於支持方案內容所進
             行的相關活動。

 2012/8/31                              33
資源投入面向
• 服務對象
     – 服務對象的資格
     – 服務對象人數
• 人力資源
     – 專業工作人員的資格與人數
     – 兼職工作人員的資格與人數
     – 志工的資格與人數
     – 工作loading
• 知識與技術
2012/8/31             34
資源投入面向
• 物質資源
• 硬體設施
     – 法定設施標準
     – 可近性
• 設備
• 合作夥伴
• 經費

2012/8/31            35
預算編列
• 編列預算的目的:控制、管理與規劃
• 預算編列的注意事項
     – 呼應服務內容
     – 詳讀補助/招標單位的經費補助標準表
     – 經費標列要合理,切勿浮編與誇大
     – 收支平衡
     – 預算科目需以一般會計原則為準
     – 區分經常門與資本門
2012/8/31                  36
工作表單三:資源投入

  試將方案中「資源投入」轉化成文字敘述填寫於
          下面各欄位中
    服務對象   人力資源    物質資源
  (優勢或特性)
                 1.經費

                    2.設施

                    3.設備


2012/8/31                  37
問題界定         目標及目的        服務設計
                                      服務方案
 與             的     資源    運作    服務   成效評量
需求評估          設定     投入    過程    產出



  運作過程(Process)
   定義: 服務提供的過程。包括:
     1.服務的定義
     2.服務策略
     3.服務工作項目
     4.服務流程
     5.服務時間規劃
 2012/8/31                              38
服務定義
• 以簡單扼要的一兩句話,對所欲提供的服
  務加以描述界定
• 將解決服務對象問題與需求所需的一系列
  服務活動,從一個較大的範圍簡化成一個
  較小且特定的重點
• 使各界對提供的服務有共同的了解



2012/8/31              39
服務項目
• 服務的各項活動
• 活動內容須扣緊與解決服務對象的問題與
  需求
• 各項活動的執行者、時間、怎麼作與如何
  進行
• 與社區網絡的關係



2012/8/31              40
服務流程圖與表單
• 流程圖可讓我們了解服務運作內容與過程
• 服務表單可協助我們紀錄服務內容、過程
• 服務表單可依服務流程的步驟來設計
• 服務表單可依方案規畫者預蒐集的資料來
  設計
• 切勿將服務表單作為服務流水帳,為了評
  鑑而寫、為了寫而寫

2012/8/31              41
檢視運作過程的設計
•「服務的定義」陳述清楚明確
•明確描述運作過程「服務工作項目」如何進行
•具體陳述服務所提供之「處遇方法」
•運作過程之規劃與問題陳述及目的一致
•設計的理由充分且合理
•活動時間適當合宜且資源的運用在可行的範圍
•綜觀運作過程,是否有銜接以及邏輯關係


2012/8/31               42
工作表單四:設計運作過程

             試將方案中「運作過程」
               轉化成文字敘述




2012/8/31                  43
問題界定         目標及目的        服務設計
                                      服務方案
 與             的     資源    運作    服務   成效評量
需求評估          設定     投入    過程    產出



 產出(Output)
 •定義:方案活動的產物、服務使用者
  所接受的服務。



 2012/8/31                              44
檢視產出的設計
•基於方案設定之目的,透過何種服務活動的組合
 提供,才能代表完成整個服務過程?
•服務活動的組合最低數量及品質應各為何?才能
 達到預期目標產生可測量的結果?
•測量服務數量前,明確界定測量指標之服務單位?
•規劃資料蒐集的系統,包括表單與電腦資訊系統




2012/8/31             45
工作表單五﹕產出
            試將方案中「產出」轉化成文
                 字敘述




2012/8/31                   46
問題界定          目標及目的        服務設計
                                       服務方案
 與              的     資源    運作    服務   成效評量
需求評估           設定     投入    過程    產出




             何謂成效(Outcome)?
     一個方案預期目標的具體達成程度,以
     及展現在具體事實上的各種可觀察與可
     測量的改變或參與者的受益情形。


 2012/8/31                               47
成效評量
            outcome measurement
• 焦點放在處遇的結果上,特別是處遇是否
  會產生預期的成效,並且去確認方案的成
  果目標被達成的程度。
• 成果評量須依賴清楚和明確的目標,這些
  目標是基於期望的效果,焦點擺在服務使
  用者狀況的改變上,例如:知識、技巧、
  態度、行為或能力。

2012/8/31                         48
成效評量: 三個階段
                               第一階段:

       第三階段:
                           規劃成效評量;
                           發展邏輯模式
蒐集資料,改善方案
                           1
               3

                       2   第二階段:
                   選擇成效: 確認指標與影響因素

2012/8/31                              49
成效評量的步驟

                        確   蒐
            規   發   選   認   集
            劃   展       指   資
                    擇   標   料
            成   邏       與   ,
            效   輯   成   影   改
            評   模       響   善
            量   式   效   因   方
                        素   案



2012/8/31                       50
規劃成效評量
 • 決策者的支持:方案評量因為會動用到組織的資源,
   是以必須獲得決策者的支持。
 • 確認方案:成效評量所要評量的方案到底為何
 • 形成工作團隊:成效評量是由一個團隊執行評量工
   作。
 • 確定工作時限:成效評估不可能無限期評量下去,
   必須有所規劃,限定出明確的時間執行並完成效評
   量。
 • 釐清參與者的職責:針對團隊成員的職責一一釐清,
   以提昇工作效率。

2012/8/31              51
成效類別
                  服務成效
            短期     中期         長期
     知識          學習      能力
     態度          行為      狀況
     技巧                  地位




2012/8/31                          52
發展成效邏輯模式


為本方案投入的資源   運用投入資源,以
            方案宗旨為目標所 方案直接成果       方案進行中與進行後案
例如:         進行的相關活動               主或參與者的受益情形
 經費         例如:       例如:         例如:
 專職人力與時間     提供遊民食宿    授課班數與時數     獲取新知識
 志工人數與時數     提供就業訓練    提供諮商服務時數    增進新技能
 設備設施        教育社會大眾有關 提供教材份數
 器材及工具      兒童保護的觀念:   服務提供的總時數
方案規範與限制     如何辨認受虐兒童   方案服務人數     態度價值觀改變
例如:         的傷痕
 法律          為青少年少女安排             行為的改善
 辦法與規定      大哥大姊陪伴成長
 經費贊助者要求                          狀況的改善
                                  社經地位的提昇
2012/8/31                                      53
Long-term outcomes
                                             長期成效

                                    Intermediate
                                    Outcomes 中期成效

                          Initial Outcomes
                          初期成效


                  Outputs 服務產出


            Activities 方案活動


  Input 投入資源


2012/8/31                                                         54
邏
  輯
  模
  式
  圖
  範
  例




2012/8/31   55
第二階段:
選擇成效;確認指標及影響因素

    第一步驟:
    選擇要測量的成效

    第二步驟:確認指標

    第三步驟:確認影響因素

2012/8/31         56
選擇要測量的成效

   選擇具有以下條件的成效:
   該成效與方案服務的結果有
     邏輯關係
   與特定的方案活動有關
   能回應方案關切的問題
   代表有意義的幫助或改變
   能夠有效地傳達方案的效益


2012/8/31              57
成效選擇表
 成效          意義性    責信      可測性   可行性
     評估此成          評估此成     評估此成 考量每一
     效對此方          效對於此     效能被測 個成效評
     案的意義          方案責信     量的程度 量所需的
列出四個                                     總
     (從1-3         展現的程     (從1-3 時間、資
在這方案                                     計
     分,3分          度(從1-3   分,3分 源和互利
邏輯模式
     代表最具          分,3分代    代表最容 (從1-3
中的成效。
     意義性)          表最具可     易被測量) 分,3分
                   說明性)           代表最具
                                  可行性)




 2012/8/31                                   58
確認指標

   指標是:
    可觀察也可測量的
    能夠導出方案的成功
    描述成效發生時的情形
    夠明確,能使不同的人
     看到時得到相同結論
    能夠以合理的成本、
     時間、人力來測量

2012/8/31                59
            2-7
指標的類型 :課輔家教
  成效類型                成效          指標

知識                學生知道好的學習   **%的學生,可以指出至少五
                  習慣         種有效學習的讀書方法

行為                學生準時完成家庭   **%的學生,在老師指派作業
                  作業         後能準時繳交


改善的情況 學生有好的學習成               **%的學生,能得到A或B的
                  就          成績並繼續保持。
                             **%得到C或更差成績的學生,
                             可以在完成方案後,改善他們
                             的成績


2012/8/31                                      60
            2-9
步驟三:確認影響因素

        變數:
         服務對象
         環境
         方案




2012/8/31                       61
            2-10
成效評量 : 第三階段
                          第一階段:規劃
                          「成效評量」,發
                          展邏輯模式

      第三階段:
      蒐集資料,改善方案



                    第二階段:選擇成效:
                    確認指標與影響因素




2012/8/31                            62
            3-1
第三階段 : 蒐集資料 ; 改善方案

第一步驟-設計資料蒐集方法
                             Use
                       Analyze
第二步驟-資料蒐集          Organi
                   ze
                   Collect

第三步驟-組織並彙整資料         Design



第四步驟-分析和呈現資料

第五步驟-運用資料改進方案,你的行動計畫

 2012/8/31                         63
             3-3
成效評量規劃表
 成效:

             HOW     WHO       WHEN         WHERE
            (方法和工
指標/影響因素                    程序(Procedures)
             具)

      你如何得                什麼時候要         在什麼地方
方案預期達 到資料?          誰負責提供 收集資料—         收集資料—
到成效,你 你所使用          資料?誰負 在方案中的         是在服務對
所要觀察或 的方法和          責收集資料 那個時機點         象的家中、
測量的指標?工具是什          ?     以及頻率、         透過電話等
      麼?                  次數?           ?


2012/8/31                                       64
成效導向邏輯模式的計畫書架構
  – 計畫名稱、計畫書摘要、邏輯模式
  – 計畫書的前言、緣起
  – 處境分析、問題界定、需求評估
  – 計畫的目標與目的
  – 活動或服務、投入資源
  – 評估計畫
  – 預算表、進度表與分工表
  – 附件


2012/8/31             65
謝謝聆聽
            敬請指教


2012/8/31          66

0831 npo的方案撰寫(王嘉蕙老師)