1. 2001/3/15 台北科大 技職所 曾淑惠 1 評鑑概論 ─II § 歷史演進 § 評鑑工作的各種角色 § 評鑑與研究 § 方案評鑑 § 教育方案評鑑 § 問題討論

2. 2001/3/15 台北科大 技職所 曾淑惠 2 歷史演進 § 前泰勒期 (1800-1930) § 泰勒期 (1930-1945) § 成長期 (1945-1957) § 擴展期 (1958-1972) § 專業期 (1973- )

3. 2001/3/15 台北科大 技職所 曾淑惠 3 歷史演進 l 前泰勒期 評鑑的概念正如中國實施的文官考試制度，在西 元前五世紀， Socrates 及其他希臘教師已用鑑的 發問技巧做為其教學方法的一部分。 在十九世紀，英國運用皇家委員會以評鑑公共服 務。 1845 年，美國 Horace Mann 依據實作測驗從事評 鑑，以評估 Boston 的學校是否成功的教育其學生。 1887-1898 年間， Joseph Rice 的研究，此一研究通 常認為是美國首次實施的正式教育方案的評鑑。 1900 年代早期發展的另一項評鑑途徑乃是標準化 的測驗。

4. 2001/3/15 台北科大 技職所 曾淑惠 4 歷史演進 § 泰勒期 l Tyler 將評鑑界定為目標是否達成的確定。 l 在 1942 年代， Ralph Tyler 在美國對中等教育 所作的八年研究計畫 l John Dewey 及其他學者企圖協助教育，期使 教育成為一種動態、革新的及自我更新的制 度。

5. 2001/3/15 台北科大 技職所 曾淑惠 5 歷史演進 § 成長期 l 此一時期教育的提供、人員及設備等的擴展 較大。 l 教育評鑑主要是地方學區的權限。 l 聯邦和州政府機構尚未深入參與方案的評鑑。 l 評鑑基金來自地方的財源、各種基金會或各 種專業組織。

6. 2001/3/15 台北科大 技職所 曾淑惠 6 歷史演進 § 擴展期 l 1960 年代後期 -1970 年代前期，熱列描述、 討論和爭論有關評鑑的概念。 l Cronbach(1963) 的一篇文章中，他嚴厲批評 評鑑的主導概念缺乏適切性和實用性，並且 勸告評鑑人員避開其所喜好的事後歸因的評 鑑，亦即依據實驗組與控制組參照常模測驗 成績的比較的評鑑。 l 參議員 Robert Kennedy 及其在國會的同事響 應此一關切的事情，修正了 1965 年的『初等 及中等教育法案』，以包括明確的評鑑要求。

7. 2001/3/15 台北科大 技職所 曾淑惠 7 歷史演進 § 擴展期 l Glaser(1963) 、 Tyler(1967) ，以及 Popham(1971) 等指出參照效標測驗為參照常模測驗的另外一 種選擇途徑。 l Cook(1966) 要求使用系統分析途徑以評鑑各種 方案。 l Phi Delta Kappa 設立了全國評鑑研究委員會 （ Stufflebeam et al.,1971) 。此一委員會的結論 是，教育評鑑『罹患重病』，因而要求發展評 鑑的新理論和新方法。

8. 2001/3/15 台北科大 技職所 曾淑惠 8 歷史演進 § 專業期 l 教育評鑑人員在 1970 年代將其領域專業化所 做的進步實在相當顯著。 l 有許多的期刊、書籍和論文專門探討評鑑， 以供專業資料的交換。 l 許多大學已開始提供至少一個課程的評鑑方 法論。 l 評鑑有關的研究和發展的中心設立。 l Dick Johnson(1980) 出版第一本評鑑人員和評 鑑機構指南。

9. 2001/3/15 台北科大 技職所 曾淑惠 9 歷史演進 ( 續 ) § 第一代評鑑 ---- 以測驗為內容 § 第二代評鑑 ---- 陳述客觀事實 § 第三代評鑑 ---- 以判斷為取向 § 第四代評鑑 ---- 以協商與溝通為核心

10. 2001/3/15 台北科大 技職所 曾淑惠 10 評鑑工作的各種角色 § 評鑑的當事人 (client) § 評鑑的設計者 (designer) § 評鑑的協調者 (coordinator) § 評鑑的回答者 (respondents) § 評鑑的訓練者 (trainer) § 評鑑的研究者 (researcher)

11. 2001/3/15 台北科大 技職所 曾淑惠 11 評鑑工作的各種角色 ( 續 ) § 評鑑的發展者 (designer) § 評鑑的個案工作者 (caseworkers) § 資訊專家 (information specialists) § 技術支援專家 (technical support specialists) § 溝通專家 (communication specialists) § 後設評鑑者 (metaevaluator)

12. 2001/3/15 台北科大 技職所 曾淑惠 12 評鑑與研究 § 研究是一種科學，基礎研究用來產生新 知識，應用研究則在幫助瞭解事情的現 象；評鑑則是一種專業的方法論，運用 工具去回答有關品質的特定問題 § 研究與評鑑最主要的區別在於被研究現 象的型態與詢問問題的目的

13. 2001/3/15 台北科大 技職所 曾淑惠 13 評鑑與研究 § 評鑑與研究的不同點 (Worthen& Sanders, 1987) l 探詢者的動機 ( 研究是好奇；評鑑是關切 ) l 探詢者的自主權 ( 研究是獨立的；評鑑代表 客戶工作 ) l 詢問的目的 ( 研就是尋求結論；評鑑是引導 決策 ) l 詢問的嚴格性 ( 研究較為強調對預測的控制 )

14. 2001/3/15 台北科大 技職所 曾淑惠 14 評鑑與研究 § 評鑑與研究的不同點 ( 續 ) l 解釋的角色 ( 研究用來回答〝為什麼〞的問 題；評鑑用來探索〝有什麼〞問題 ) l 被研究現象的屬性 ( 研究產生科學知識；評 鑑評估事情的價值 ) l 被研究現象的一般性 ( 研究的目標在透過時 間將知識加以一般化，以導出可以解釋變數 間關係的規則；評鑑則一次就評定一件事情 的價值，陳述一件將被評定價值的工作 )

15. 2001/3/15 台北科大 技職所 曾淑惠 15 方案評鑑 §Evaluation is the systematic collection and analysis of data needed to make decisions, a process in which most well-run programs engage from the outset. §Program evaluation is carefully collecting information about a program or some aspect of a program in order to make necessary decisions about the program

16. 2001/3/15 台北科大 技職所 曾淑惠 16 方案評鑑 §Why conduct program evaluation l For project management l For staying on track l For project efficiency l For project accountability l For program development and dissemination

17. 2001/3/15 台北科大 技職所 曾淑惠 17 方案評鑑 §Where program evaluation is helpful l Understand, verify or increase the impact of products or services on customers or clients l Improve delivery mechanisms to be more efficient and less costly l Verify that you’re doing what you think you’re doing l 促進方案的管理 l 增進對社區的服務與公共關係 www.mapnp.org/library/evaluatn/fn1_eval.htm

18. 2001/3/15 台北科大 技職所 曾淑惠 18 方案評鑑 §Where program evaluation is helpful(cont.) l 符合資格認可的需求 l 說明經費的使用情形 l 蒐集相關資料並反應事實 l 做為選擇方案的依據 l 改進方案 l 瞭解方案所附帶產生的問題 Posavac& Carey, 1989

19. 2001/3/15 台北科大 技職所 曾淑惠 19 方案評鑑 §Types of program evaluation §Needs assessments §Accreditation §Cost/benefit analysis §Effectiveness §Efficiency §Formative §Summative

20. 2001/3/15 台北科大 技職所 曾淑惠 20 方案評鑑 §Types of program evaluation §Goal-base §Goal-free §Context §Input §Process §Product §Outcome §Impact

21. 2001/3/15 台北科大 技職所 曾淑惠 21 方案評鑑 §Challenge of program evaluation l 政策的轉變衝擊方案的發展 l 方案評鑑時間的適合性 l 相關文獻的欠缺 l 公布方案評鑑項目的訂定不易 l 受評單位的抱怨與抗議

22. 2001/3/15 台北科大 技職所 曾淑惠 22 教育方案評鑑 § 教育方案：係指對特定教育層面的缺失、 或特定教育對象的需求、或特定教育問 題的衝擊，謀求改進與解決之道的教育 活動，而形成一種發展性教育活動。 § 教育評鑑：是一個有系統蒐集並解釋證 據，藉以判斷教育活動的價值，作為進 一步行動參考的過程。

23. 2001/3/15 台北科大 技職所 曾淑惠 23 教育方案評鑑 § 教育方案評鑑的四要素： l 系統化蒐集教育方案的相關證據。 l 審慎地解釋各項證據。 l 判斷教育方案的價值。 l 提示改進的行動。

24. 2001/3/15 台北科大 技職所 曾淑惠 24 教育方案評鑑 § 學校需要教育方案評鑑的教育活動有二類： l 基礎性活動：是主流教育中已經制度化的例行性教 育活動。 l 發展性活動：是學校為求發展與進步，在基礎活動 之外，規畫辦理的特殊性教育活動。

25. 2001/3/15 台北科大 技職所 曾淑惠 25 問題討論 § 為什麼評鑑在發展成為一專業領域花了 這麼多的時間 ? § 現階段評鑑的主要困境為何 ?