Taiwan NGOs go digital ?
NGO 推進器
Published in
6 min readJan 8, 2019

--

評估入門

兩週前介紹過 BetterEvaluation 彩虹框架,其提供組織/個人在進行任何評量之前,透過七大類問題提供縝密的全方位指引,從答案的思索來架構出進一步合乎自身需求的具體評量手段工具選取。換句話說,彩虹框架本身並不直接涉及具體的評量操作細節,可以說是在進入實質評估之前的量身準備。為填補未能具體了解評估到底是什麼、該怎麼執行的欠缺,本週還是補寫一篇文章,從最簡單基本的評估入門 ABC 作點說明。

什麼是評估,評估要作什麼?

若問自己過往在非營利組織的經驗,「評估」大概就是用加大字體行距的排版花招來應付一下專案資助者的無趣文書作業,當然這種打混學生交作業的方式並不是正確而健康的評估認知與方法,卻是徵文比賽、形式掛帥台灣社會的虛應故事。嚴謹的評估通常涉及收集和使用數據來回答關於工作在質量、價值上如何改善精進的問題。確實中肯的評估可以客觀地回答: 這個項目有什麼具體成果,例如對誰帶來(什麼樣的)好處?它為什麼可以運作良好?是否實現了原本預期成果?未達預期效果又是什麼原因,未來如何阻斷這些干擾破壞因素的發生?

透過上述答案的釐清,可發現評估不只是為了方案層次的有效與否監控,更是對組織面、策略面的中長期規畫目標回應,並落實在具體評估結果與特定受眾(如資助者、志工)的交流溝通,以期促成下一階段或未來計畫的完善,故評估應是一套組織內化的循環再生系統,黏結了各個專案觸發啟動與終結落幕。

為何需進行評量?

評估是為了改善方案,協助組織梳理出透過各種計畫成敗原因,從這些教訓經驗找到最有效促進改革的方法。

在評估常見的用語中,監測出現機會不少,也常讓人誤以為監測監督等同於「評估」。從操作面觀察,監測(monitor)是例行地收集方案相關資訊與數據,以掌握項目進度與階段成果,故其往往有"項目時間表"來標示重要里程碑。 而評估比監測更為深入,評估希望能進一步探索計畫執行的優勢和挑戰何在、為什麼會導致某些結果、是否如期實現了原初的目標。 此外,評估還關注質量問題,重視該計畫意圖造成的影響,妥適地衝量影響所創造的價值。

啟動評估五個要素

  1. 推動方案之前,就必須有作評量之打算,如此才能對於整個執行過程中要留意收集哪些資料數據有所準備,也因一開始就明白揭示評估為整個計畫的一部份,工作人員才不至於把評估當成額外新增負擔。
  2. 弄清楚基礎現況︰對於基本問題掌握具體答案,例如為什麼要作評估(why)、有什麼期待、評估可以回答什麼問題(what)、需要哪些人一起參與(who)、預期何時可以取得結果(When)…..
  3. 做好規劃︰回答完上述基本現況問題後,接下來要思考的是 How,也就是具體操作的開展,諸如如何執行評量(方法挑選、題目設計、數據收集…),資源如何做最適當的配置,最終的評估結果報告又該如何地流傳,好讓未來相關計畫能事先參考以做必要的調整因應。
  4. 誰來做評估︰如果是內部成員作評估,他/她需要何種技能條件?組織如何供關相關的技術訓練機會;如果是找外部人士執行評估,又有什麼優缺點?
  5. 邀請相關受益者加入︰利用評估機會,適當邀請受益者提供回饋,提高他們對於專案的認同支持,從多樣角度縱觀計畫遇到的現實問題。
  6. 相應的資源:組織願意投入必須的金錢、人力時間用於方案計畫評估,一般建議應保留分配 10 %的預算留作評估的支出使用。

評估程序

https://knowhow.ncvo.org.uk/organisation/impact/about-impact-and-evaluation/the-evaluation-process

1. 面對問題:了解(受益人的)問題是規劃的起點,透過初步的"需求評估',以便找出最有利的回應位置。

2. 希望帶來什麼改變? 回應上述問題後打算採取的行動能夠帶來什麼變化? 短期和中期變化可能影響了工作成果廣泛或長期成效。 這些差別變化記錄將成為後續評估的一部分。

3. 做什麼才能帶來改變:識別可產生影響的產品或服務(介入行為),完成此工作進度將是評估的一部份。

4. 追蹤進度:監督進展,使用適當的方法收集所做事項與其發生的變化等相關資訊。

5. 經驗學習:分析數據以判斷工作成效,從而產生明確的評估結果。 找出因方案帶來什麼變化影響,哪些方面進展順利,哪些方面可以改進。

6. 善用結果:利用評估結果,多與外部受眾互動,與資助者和捐贈者溝通繼續改善工作。

美國 Foundation Center 轄下的議題資源管理中心 Issue Lab 收集了不少各家基金會、研究智庫提交的評估參考資源,有興趣者可以再好好探究,茲稍舉幾例如下:

  1. " Making Evaluations Matter: A Practical Guide for Evaluators"
  2. "Effective Nonprofit Evaluation: Through a “ Community of Learners"
  3. "Four Essentials for Evaluation"
  4. "Evaluation Principles and Practices"
  5. “Evaluation 101: A practical guide for evaluating your program

本站提供 flipboard app 雜誌管道,便於讀者在平板電腦上介面閱讀,亦不會因為機器演算法而錯過「NGO 推進器」每週的文章資訊。若偏好習慣 RSS 閱讀器,訂閱網址為:https://medium.twngo.xyz/feed

除了每週二固定發佈一篇主題專文外,每週五另外再發表一篇網摘性質的非營利組織資訊週報 — 灰暗星期五,簡單分享筆者最近一週讀了什麼、看到什麼有趣的相關內容。若有任何建議或指教,可留言、來信或加入 TWNGO slack 安靜聊天室製造一點喧嘩的噪音。

--

--