2001/3/10 台北科大 技職所 曾淑惠 1

評鑑方案的建構

評鑑方案的功能評鑑方案的建構取向建構評鑑方案的焦點問題評鑑方案的規劃步驟評鑑方案的建構與實施原則評鑑方案的實施配合事項評鑑方案的管理

2001/3/10 台北科大 技職所 曾淑惠 2

評鑑方案的功能

「評鑑方案的內容」能：–精確的指明方案提供的服務–建立方案目標，決定判斷是否達成目標的證據

–發展或選擇可採用的方法–追蹤評鑑的目標–實現並評估新方案的設計

2001/3/10 台北科大 技職所 曾淑惠 3

評鑑方案的建構取向 取向一

假評鑑 (pseudo-evaluation) 準評鑑 (quasi-evaluation) 真評鑑 (true-evaluation)

取向二 形成性評鑑 (formative evaluation) 總結性評鑑 (summative evaluation)

2001/3/10 台北科大 技職所 曾淑惠 4

假評鑑、準評鑑、真評鑑 假評鑑

政治操縱研究 公關授意研究

準評鑑 目標本位研究 實驗設計研究 績效研究 測驗計畫 管理資訊系統

2001/3/10 台北科大 技職所 曾淑惠 5

假評鑑、準評鑑、真評鑑(續 )

真評鑑 認可研究 政策研究 決策導向研究 消費者導向研究 當事者中心研究 鑑賞本位研究

2001/3/10 台北科大 技職所 曾淑惠 6

建構評鑑方案的焦點問題

你想要評鑑什麼 ?–評鑑努力的方向應與方案努力的方向相同

–想要獲得多少評鑑的結論，必須有相對的評鑑活動

–不是所有的工作都需要正式的評鑑

2001/3/10 台北科大 技職所 曾淑惠 7

建構評鑑方案的焦點問題評鑑的目的為何 ?

–用來建立對評鑑的基本共識–可以是：

幫助他人瞭解方案及其成果改進方案測量方案是否改變了人們的生活決定方案的花費是否值得符合排名及保有權力的要求符合行政的需求……..

2001/3/10 台北科大 技職所 曾淑惠 8

建構評鑑方案的焦點問題

誰是評鑑資訊的觀眾 ?–觀眾種類

方案參與者、評鑑者、授權評鑑者合作者、支持者、志願者、同儕團體媒體民意代表社區領導人或教育推廣部門行政主管其他

–他們想要知道什麼 ?如何使用資訊 ?

2001/3/10 台北科大 技職所 曾淑惠 9

建構評鑑方案的焦點問題

那些是評鑑想要尋求答案的問題 ?–定義問題

關於方案的背景關於方案的需求關於方案的實施關於方案的結果與衝擊

–界定主要問題與子問題–定義關鍵字詞

2001/3/10 台北科大 技職所 曾淑惠 10

建構評鑑方案的焦點問題什麼資訊可以回答這些問題 ?

–建立指標，溝通指標是否有用–資訊的種類 ----質化與量化

資訊的價值端視評鑑觀眾的觀點與是否能夠接受而定

2001/3/10 台北科大 技職所 曾淑惠 11

建構評鑑方案的焦點問題需要那些資源

–時間可用的評鑑時間評鑑期間的參與者的工作負擔

–金錢 -----各種費用的財務來源–人力

2001/3/10 台北科大 技職所 曾淑惠 12

建構評鑑方案的焦點問題何時須要評鑑

–有用的時機–截止日以前

2001/3/10 台北科大 技職所 曾淑惠 13

評鑑方案的規劃步驟

評鑑的需求評估陳述評鑑的責任定義評鑑的客戶、觀眾與對象設定評鑑的範圍並分析評鑑的內容定義並選擇評鑑的目的與重要問題

(problems & issues)選擇評鑑發展模式

2001/3/10 台北科大 技職所 曾淑惠 14

評鑑方案的規劃步驟 ( 續 )

指出資料蒐集來源計畫資訊蒐集、分析、解釋的方法選擇觀察人員設定評鑑的標準並發展評鑑工具訂定評鑑程序規劃評鑑計畫，發展評鑑的經費、時程表等管理計畫

2001/3/10 台北科大 技職所 曾淑惠 15

評鑑方案的規劃步驟 ( 續 )

確定可獲得的資源以實現所有預設的功能蒐集、分析、並解釋評鑑資訊提出評鑑結論與建議，並完成評鑑報告與當事人、計畫成員商談 (n 級評鑑 )

規劃與實施評鑑時強調實務問題

2001/3/10 台北科大 技職所 曾淑惠 16

評鑑方案的建構與實施原則

協商評鑑的政策、倫理與人際關係–在評鑑委員與關係人間建立並維護良好的溝通管道

–從評鑑委員與其他人的人際關係、財務關係、組織關係瞭解可能的偏見

–維護倫理的標準–協調評鑑的政治壓力與問題–進行個案研究

2001/3/10 台北科大 技職所 曾淑惠 17

評鑑方案的建構與實施原則 ( 續 )

蒐集評鑑資訊–注意蒐集資料的規範與潛在問題–對資訊進行控管、組織、與頡取

分析評鑑資訊–質化資料的分析–量化資料的分析

2001/3/10 台北科大 技職所 曾淑惠 18

評鑑方案的建構與實施原則( 續 )

解釋評鑑資訊–考慮是否達成評鑑目的–考慮是否違反法令、民主觀念、倫理原則等

–考慮是否會減低存取的需求–考慮實現的價值–詢問並考量評論群委員的正反意見–強調評鑑中產生資料的程序

2001/3/10 台北科大 技職所 曾淑惠 19

評鑑方案的建構與實施原則( 續 )

評鑑資訊的報告與使用進行後設評鑑

– Metaevaluation

– Evaluating evaluation

– Secondary evaluation

2001/3/10 台北科大 技職所 曾淑惠 20

評鑑方案的實施配合事項

為評鑑的實施提供適切的訓練評鑑過程需要主要人員與關係人參與決策

評估評鑑對象內部成員的支持與參與程度

評估外部網絡對評鑑對象的支持度

2001/3/10 台北科大 技職所 曾淑惠 21

評鑑方案的實施配合事項 ( 續 )

建立蒐集資料的追蹤程序，引導評鑑對象對更新組織的改進

系統化的使用評鑑的結果，以指引獎勵的實施

2001/3/10 台北科大 技職所 曾淑惠 22

評鑑方案的管理時程表責任區分預算完成評鑑方案的計畫