2001/3/10 台北科大 技職所 曾淑惠 1 評鑑方案的建構 評鑑方案的功能 評鑑方案的建構取向 建構評鑑方案的焦點問題 評鑑方案的規劃步驟 評鑑方案的建構與實施原則 評鑑方案的實施配合事項 評鑑方案的管理

2001/3/10 台北科大 技職所 曾淑惠 2 評鑑方案的功能 「評鑑方案的內容」能： – 精確的指明方案提供的服務 – 建立方案目標，決定判斷是否達成目 標的證據 – 發展或選擇可採用的方法 – 追蹤評鑑的目標 – 實現並評估新方案的設計

2001/3/10 台北科大 技職所 曾淑惠 3 評鑑方案的建構取向  取向一  假評鑑 (pseudo-evaluation)  準評鑑 (quasi-evaluation)  真評鑑 (true-evaluation)  取向二  形成性評鑑 (formative evaluation)  總結性評鑑 (summative evaluation)

2001/3/10 台北科大 技職所 曾淑惠 4 假評鑑、準評鑑、真評鑑  假評鑑  政治操縱研究  公關授意研究  準評鑑  目標本位研究  實驗設計研究  績效研究  測驗計畫  管理資訊系統

2001/3/10 台北科大 技職所 曾淑惠 5 假評鑑、準評鑑、真評鑑 ( 續 )  真評鑑  認可研究  政策研究  決策導向研究  消費者導向研究  當事者中心研究  鑑賞本位研究

2001/3/10 台北科大 技職所 曾淑惠 6 建構評鑑方案的焦點問題 你想要評鑑什麼 ? – 評鑑努力的方向應與方案努力的方向 相同 – 想要獲得多少評鑑的結論，必須有相 對的評鑑活動 – 不是所有的工作都需要正式的評鑑

2001/3/10 台北科大 技職所 曾淑惠 7 建構評鑑方案的焦點問題 評鑑的目的為何 ? – 用來建立對評鑑的基本共識 – 可以是： 幫助他人瞭解方案及其成果 改進方案 測量方案是否改變了人們的生活 決定方案的花費是否值得 符合排名及保有權力的要求 符合行政的需求 ……..

2001/3/10 台北科大 技職所 曾淑惠 8 建構評鑑方案的焦點問題 誰是評鑑資訊的觀眾 ? – 觀眾種類 方案參與者、評鑑者、授權評鑑者 合作者、支持者、志願者、同儕團體 媒體 民意代表 社區領導人或教育推廣部門行政主管 其他 – 他們想要知道什麼 ? 如何使用資訊 ?

2001/3/10 台北科大 技職所 曾淑惠 9 建構評鑑方案的焦點問題 那些是評鑑想要尋求答案的問題 ? – 定義問題 關於方案的背景 關於方案的需求 關於方案的實施 關於方案的結果與衝擊 – 界定主要問題與子問題 – 定義關鍵字詞

2001/3/10 台北科大 技職所 曾淑惠 10 建構評鑑方案的焦點問題 什麼資訊可以回答這些問題 ? – 建立指標，溝通指標是否有用 – 資訊的種類 ---- 質化與量化 資訊的價值端視評鑑觀眾的觀點與是否能夠接受而定

2001/3/10 台北科大 技職所 曾淑惠 11 建構評鑑方案的焦點問題 需要那些資源 – 時間 可用的評鑑時間 評鑑期間的參與者的工作負擔 – 金錢 各種費用的財務來源 – 人力

2001/3/10 台北科大 技職所 曾淑惠 12 建構評鑑方案的焦點問題 何時須要評鑑 – 有用的時機 – 截止日以前

2001/3/10 台北科大 技職所 曾淑惠 13 評鑑方案的規劃步驟 評鑑的需求評估 陳述評鑑的責任 定義評鑑的客戶、觀眾與對象 設定評鑑的範圍並分析評鑑的內容 定義並選擇評鑑的目的與重要問題 (problems & issues) 選擇評鑑發展模式

2001/3/10 台北科大 技職所 曾淑惠 14 評鑑方案的規劃步驟 ( 續 ) 指出資料蒐集來源 計畫資訊蒐集、分析、解釋的方法 選擇觀察人員 設定評鑑的標準並發展評鑑工具 訂定評鑑程序 規劃評鑑計畫，發展評鑑的經費、 時程表等管理計畫

2001/3/10 台北科大 技職所 曾淑惠 15 評鑑方案的規劃步驟 ( 續 ) 確定可獲得的資源以實現所有預設 的功能 蒐集、分析、並解釋評鑑資訊 提出評鑑結論與建議，並完成評鑑 報告 與當事人、計畫成員商談 (n 級評鑑 ) 規劃與實施評鑑時強調實務問題

2001/3/10 台北科大 技職所 曾淑惠 16 評鑑方案的建構與實施原則 協商評鑑的政策、倫理與人際關係 – 在評鑑委員與關係人間建立並維護良 好的溝通管道 – 從評鑑委員與其他人的人際關係、財 務關係、組織關係瞭解可能的偏見 – 維護倫理的標準 – 協調評鑑的政治壓力與問題 – 進行個案研究

2001/3/10 台北科大 技職所 曾淑惠 17 評鑑方案的建構與實施原則 ( 續 ) 蒐集評鑑資訊 – 注意蒐集資料的規範與潛在問題 – 對資訊進行控管、組織、與頡取 分析評鑑資訊 – 質化資料的分析 – 量化資料的分析

2001/3/10 台北科大 技職所 曾淑惠 18 評鑑方案的建構與實施原則 ( 續 ) 解釋評鑑資訊 – 考慮是否達成評鑑目的 – 考慮是否違反法令、民主觀念、倫理 原則等 – 考慮是否會減低存取的需求 – 考慮實現的價值 – 詢問並考量評論群委員的正反意見 – 強調評鑑中產生資料的程序

2001/3/10 台北科大 技職所 曾淑惠 19 評鑑方案的建構與實施原則 ( 續 ) 評鑑資訊的報告與使用 進行後設評鑑 –Metaevaluation –Evaluating evaluation –Secondary evaluation

2001/3/10 台北科大 技職所 曾淑惠 20 評鑑方案的實施配合事項 為評鑑的實施提供適切的訓練 評鑑過程需要主要人員與關係人參 與決策 評估評鑑對象內部成員的支持與參 與程度 評估外部網絡對評鑑對象的支持度

2001/3/10 台北科大 技職所 曾淑惠 21 評鑑方案的實施配合事項 ( 續 ) 建立蒐集資料的追蹤程序，引導評 鑑對象對更新組織的改進 系統化的使用評鑑的結果，以指引 獎勵的實施

2001/3/10 台北科大 技職所 曾淑惠 22 評鑑方案的管理 時程表 責任區分 預算 完成評鑑方案的計畫