獨善其身或兼善天下校務研究精進辦學王麗雲 國立臺灣師範大學教育研究與評鑑中心主任

講者介紹• 公費留學教育評鑑學門• 高等考試及格• 國中英語教師• 臺師大教育系學士碩士、哈佛大學教育碩士博士• 2006Data Institute• 臺灣高等教育整合資料庫計畫主持人

– 畢業生流向調查– 高教師生調查 ( 大一、大三、大專教師 )

• 教師資料庫整合系統主持人• 前高教評鑑中心研究發展處處長• 新北市國民中小學校務評鑑計畫主持人

– 問卷調查– 知識管理平台

報告大綱一、校務研究的意義功能二、校務研究的內容與基礎工程三、聯合校務研究

一、校務研究的意義與功能

敬請參考《大專校院校務研究與資料庫應用》

何以致此？如果學者專家這麼會研究，怎麼會讓高等教育變成這樣？如果學者專家所來自的高等教育變成這樣，我們還能相信學者專家改變社會嗎？ 如果教授自顧不暇，自身難救，能指望他們救學生嗎？知識殿堂所知甚多，但缺乏自我認知與改變動機，生存基礎早已悄悄崩壞卻不自知

苦日子來了？！• 高等教育機構經營的重點與挑戰，較以往更為複雜，各界的期望與責難也更甚以往。• 本於資料與證據，作為高等教育機構決策與前瞻規劃的參考更為重要。 • 本應重視數據的高等教育，正遭受忽視數據的苦果。• 校務研究 (institutional

research) 在許多國家已推動多年，大部份學校設有校務研究辦公室，成為高等教育機構內部智庫。

Understanding

Knowledge

Information

Data

各國校務分析組織發展• 美國：校務分析協會（ Association for Institutional

Research ）• 澳洲： Australasian Association for Institutional

Research （ AAIR)• 歐洲： European Association for Institutional Research（ EAIR)• 非洲： Southern African Association for Institutional

Research （ SAAIR ）• 亞洲： South East Asia Association for Institutional

Research （ SEAAIR)

聰敏的、以資料與證據為本的辦學與校務經營，乃是卓越高等教育的表現。

資料與決定• 資料≠決定• 沒有校務資料，或不知道如何善用這些資料，決策者無法作成以證據為本、有益機構的決定• 沒有資料→決定缺乏說服力，不易帶動組織齊心改革。• 一個國小的故事

校務研究的意義•校務研究（ institutional research ）包括校務與研究兩部份。–校務，乃是大專校院相關事務與活動。–研究乃是對某一議題提供系統性的答案。

11

校務研究的意義與重要性• 蒐集資料或進行有用或必要之研究，以 (1) 瞭解或解釋機構， (2) 對於目前運作或未來規劃作出敏智的決定， (3)改善機構的效率與效能 (Saupe & Montgemery,

1970 ， 2) 。• 校務研究是描述大學或學院中發生的全部功能 ( 教育、行政、支持 ) 的所有活動。包括資料蒐集分析策略，以支持組織的決策 (Coughlin, Hoey, & Hirano-Nakanishi, 2009) 。• 校務研究是透過資料蒐集、分析、報告，以及教職員探究

(staff work) ，以促進高等教育機構的運作與決定 (Saupe & Montgemery, 1970 ， 3) 。 資料蒐集 分析 報告

12

校務研究的意義與重要性校務研究與社會科學研究有同有異相異之處 校務研究的應用性較強，關心個別學校，較關心問題的解決，研究問題的發現也較難推論到其他機構。

相同之處 研究取徑、資料蒐集方法、倫理守則等頗為一致，個別學校也可從高等教育研究成果獲益，個別學校的研究發現對於社會科學也會有重要貢獻 跨機構的校務研究與高等教育研究十分接近，自然也是社會科學的一環。

校務研究發展• 起源甚早，大專校院對「硬資料」（ hard information ）的需求，從來就沒有斷過。• 美國政府早在 1869 年開始蒐集大專校院資料。• 正式制度化則早至 1920 年，知名大學開始設立校務研究辦公室。• 1950s ，這些組織的名稱正式稱為校務研究辦公室。

校務研究發展• 調查資料庫的建立是重要里程碑• 例如：美國教育部長期建立高等教育整合資料庫（ Integrated Postsecondary Education Data System, IPEDS ）• 美國大專校院校務研究人員經常接受資料庫的教學訓練，以作為分析與瞭解學校運作狀況的依據

校務研究愈受重視之原因• 校務研究受到重視，主要是基於下列兩個原因

1. 績效責任的興起：只要錢，不要責任的作法難為社會接受2. 高等教育全球競爭興起：理性分析、爭取資源

• 前兩項因素都使得校務分析成為必要，高等教育機構除了需要傳統的校務研究外，更需要透過統計分析，進行議題研究，以促成以證據為基礎的決定，增加高等教育機構的競爭力。

16

校務研究的意義與重要性1. 準備營運報告（ operational report ）

內容包括註冊、學生補助、住宿、財務、人事、以及其他資料。 是組織運作的核心資料，常見的問題是校內各單位對資料的掌握情況不一致，校務研究者的工作是整合資料以便得到一致的數據，甚至要能設計學校的資訊系統。

17

校務研究的意義與重要性2. 準備分析與總結報告（ analytic and summary

report） 必須具備明顯的問題意識，對於資料的解釋也必須小心。 碰到重大議題時，歷史性的資料通常不可少，方能有助於瞭解該項議題的變化。

18

校務研究的意義與重要性3.建立分析或模型研究資料（ analytical or

modeling studies ） 有時必須回答一些因果性較強的問題

» 例如預測學生的註冊率，或是解釋影響教授升等的因素，或是瞭解博士生畢業時間的影響因素

透過現有資料建立模型，可以解釋與預測，以利組織規劃。

19

校務研究的意義與重要性4. 設計管理資訊系統（ management

information system ） 學校本身應該有資訊管理系統，作為校務分析的基礎，這些資料與資訊的蒐集、保存、保管、應用都應該有一套詳細的規劃，除了要求資訊正確，避免重覆蒐集之外，更重要的是要為這些資料加值，作為校務規劃與決策的基礎。

20

校務研究的意義與重要性5. 特定議題研究

例如是否修雙主修的同學在就業上的表現會優於未修雙主修者？又如教師的教學與研究時間究竟應該如何分配，方能使其生產力最高（ Toutkoushian, 2006 ）

舉凡學校中行政、教師、學生、課程、方案等等的成果，都可以依據需要進行專題研究，研究的成果可以作為校務規劃或革新的參考。

21

校務研究的意義與重要性6. 回應外界資訊需求

各界，特別是政府機構，經常會向學校索取資訊，校務研究的功能包括整合這些資訊的提供，回應外界對學校資訊的需求。

22

校務研究的意義與重要性7. 協助學校教職員工作

學校現有各處室或系所各在運作時，可能也都需要校務研究的協助，例如如何擬定教學卓越獎，如何判定分數貶值的現象等。

23

校務研究的意義與重要性8. 研究支持教育發展

校內有些試辦方案或是新方案，這些方案本身辦理成效如何？是否應該中止、修正或繼續？都可以透過校務資料分析。例如如果發現國際化作法推動後，學生外語能力或自信心確有提升，便可以認定該方案的確在提升國際化能力上有幫助。

24

校務研究的意義與重要性9. 外在環境調查

校務研究的另一個焦點是顧客調查，例如僱主調查，瞭解僱主對人才培育的期望（ Saupe, 1990）

校務研究對大專院校之貢獻• 一份完成的校務研究內容則包括了報告、研究規劃與政策分析、財務研究、註冊管理研究、學生調查、教員調查、學術研究、以及其他計畫工作（ Delaney, 1997, 4 ）。

校務研究對大專院校之貢獻• 報告：機構統計報告、對內與對外行政報告等。這類的報告，都是長期報導機構發展的重要資訊。 ( 學界也提出其他監督高等教育發展的指標，透過永續性指標的評估，作為監督高等教育機構發展的依據。 )

• 研究、規劃與政策分析：規劃與政策分析研究、預測、長期研究、市場研究等。

校務研究對大專院校之貢獻財務研究：成本分析、財政分析、財務預測等。註冊管理研究：入學、財務補助、留讀情況等（Bailey,

2006）。學生調查：在校生與畢業生調查。教員調查：教員評鑑、教員工作量研究、薪資分析等。例如改進教原表現的方法，決定教員適當的獎勵方式、各系教員缺額的安排等等（Ferren, A. S. & Aylesworth, 2001）。

校務研究對大專院校之貢獻學術研究：學程檢討、學程評鑑、安置測驗評量、結果評量等。其他計畫：如空間利用研究、轉學研究等。

上述主題國內各校其實多多少少都有進行，但是在完整性與深度上可能因各校人力不同而有差異。

校務研究對大專院校之貢獻• 綜上，校務研究對大專校院經營的功能包括了問題界定、行動研究、政策分析（ Saupe, 1990 ）。

• 上述工作，也形塑了校務研究者的角色，包括：– 資訊規劃者（ information architect ）– 改變能動者（ change agent ）– 選擇的顧問（ consultant choice ）（ Delaney, 1997 ）

校務研究對其他機構之貢獻其他單位也需要這些資料作為規劃的參考

以美國而言，因體認到在 2010 年前，有 42% 的新增工作都是由大學畢業生從事，對於這部份的人力因而特別關心。 如果高等教育機構所培育出人力的素質與數量，不能符合新興職缺的需求，勢必影響到經濟的發展，高等教育機構的功能也會受到部份質疑（ Toutkoushian, 2005 ）。

校務研究對其他機構之貢獻Toutkoushian （ 2005 ）指出，教育市場與勞動力市場並不相同，高等教育人力供給經常落後勞動力市場至少四年，如果沒有長期且即時的資料供學生、學校、產業之間作參考，兩者之間的落差必然會造成，損失。如果能夠將人力供與需的預估資料清楚地掌握，透過長期及各方資料的累積，獲得更好的參數進行預測，減少兩個市場間的磨擦損失，將會是各界之福。

校務分析對其他機構的貢獻EX.我國經濟部工業局每年都會進行人力供需的推估，其中人力供給面的情況部份便仰賴臺灣高等教育資料庫中畢業生流向的資料，以建立推估參數。

校務研究與高等教育改進一、協助學校作成校務發展決定

簡單的資料蒐集與分析，就可能使得學校的決定完全轉向。 EX.康乃爾大學文理學院原本計畫關閉其社會學系（ Ehrenberg, 2005 ）。

校務研究與高等教育改進二、提供證據，解決政策爭議，改善決策

Ehrenberg （ 2005 ）曾經舉一例說明校務分析中的特定議題研究如何協助擬定高等教育重大決策。 EX. 美國招收外國博士班生的例子。

二、校務研究內容與基礎工程

校務研究 ( 卓越要求 )資料蒐集整合 資料分析應用運作資料

整合資料(橫斷、趨勢、脈絡 )

國內外聯盟大學

校友資料雇主資料

學生資料

教職資料 課教資料 方案資料指標建構

校務決策

議題分析追蹤、課責、預警 問題分析解決

校務經營 學生學習

資料形式客觀資料

ex. 個人資料、校方記錄、外部官方資料等主觀資料

ex. 意見調查、評估等

校務研究在研究什麼？加州大學校長辦公室 校務究責報告，涵蓋： (Annual Accountability Report) ， 14章， 138項指標

大學規模 招生 學生及其學業完成情況 教師以及教學情況 工作人員 科研 財務管理及預算 多元化 持續性發展狀況 ...... 等

• 有價值的資訊來自：大學自主、自我管理、以據為策• 自我改善機制成為高教評鑑新興重點 (項目五 )• 自我改善需以資訊為本（ evidence-based ），方能有好的決策。

好的決策

好的分析

好的資料好的問題

好的目標

40

學生調查分析案例• 分析內容僅作現場報告

成績資料

學籍資料

調查資料

表現資料

研究資料

評量資料

補助資料 MORE

心得：校務研究非由零開始• 校務研究不是新東西– 有些資料平常就有– 有些分析偶爾也會做– 有些數字或文字平常也在看

• 缺的是…– 資料整合– 系統分析– 決策習慣

• 自 2010起，關心世界大學網路計量排名– 定期召開會議，督促改進學校網頁內容的完整性

• 發展成：世界大學排名討論會議– 從外界的角度看本校哪些校務項目需要改善– 以量化數據呈現，改善本校排名，成效卓著

• 行政單位管考制度與系統– 把各項大小工程、行政事務，納入追蹤、考核– 將每年上百項校務，徹底落實，造福師生

師大如何實踐校務研究作為

但是…應用資料輔助決策仍未成為習慣• 主管和承辦人往往搞不清楚那裏有資料？內容是什麼？這決策過程，太被動• 院長、主任、所長，也都憑智慧、經驗辦事、決策• 但經驗會隨人員離職、退休而流失• 需要主動、預警性的決策支援制度與系統

領域專家介入、資訊技術配合• 校務研究是以資料驅動（ data driven ）、科學方法，給出具體量化數據，輔助決策。• 本校每年累積的各種欄位項目，超過上億筆數據

– 教務處系統：學生資料、選課、成績─上千萬筆– 研發處系統：教師表現、研究成果─上百萬項– 圖書館的借閱資料、學術處的 e-Portfolio 資料

• 但資料需要梳理、一致性、定期蒐集、知道如何利用• 需要領域專家的介入，資訊技術人員的配合

三哩路• 第一哩：盤點

– 將雲朵變成雲端 ( 資料整合、精簡、補齊 ) ，將烏雲變成白雲 ( 資料定義及蒐集時程統一 )• 第二哩：分析

– 根據議題、問題、及業務需求發展分析架構• 第三哩：決策習慣

– 養成關心內外數據、思考數據、以據為策的習慣

下一步如何進行？• 掛牌容易做事難，各校高下在內部合作、外部結盟、資料庫整合、決策應用、議題引導狀況階段 工作內容 能力需求盤點期

瞭解現有資料欄位及定義、蒐集期程，盤點決策需求，瞭解外部資料獲得可能，提出建置架構建議及校務資料整合期程 ( 年度之蒐集整合分析行事曆 )

瞭解高教系統有資料庫基本概念

建置期資料交換及系統整合建置歷史資料整合、現有資料整合、資料清理、調查整合、學生個人系統建置

資訊人員統計人員調查及行政人員熟悉高教

運作期 進行分析、規劃報告架構及發佈出方式資訊人員統計人員調查及行政人員熟悉高教

下面問題，您知道答案嗎？① 那一種管道入學的學生，對系上認同度最低？② 修畢雙主修與修畢輔系，誰畢業後一年的薪水高？③ 大學部延畢生與非延畢生，誰畢業後的學用配合度較高？誰的薪資較高？碩士呢？④ 師資生或非師資生，誰對學校的滿意度較高？⑤ 那一科系，學生滿意度居全國三千多科系之前三十名？

三、聯合校務分析

學校 學校 學校 學校 學校

領 域

領 域

校務研究的盲點高等教育要直、要橫、也要圓。目前設計只見直

聯合校務分析• 理性的替大局想，替未來想，不是一件容易的事，絕大部份的人都認為在我任內不出事就好了，下一任是下一任的事。• 教授的想法是不要動到我的東西，學生本來就該學我的東西 ( 是也不是 ) ，教書是我的事，找工作是學生的事。• 師範校院慘痛的經驗、餐飲管理即將發生的事• 大家都在努力划自己的船，卻不關心有沒有人在掌舵？這樣的努力有什麼用？• 一包鹽教我的事• 高雄餐旅大學教我的事• 指望”聖人”指點方向，不如行會共同治理。

51

高教領域分析案例• 分析內容僅作現場報告

展望為自己負責也為領域發展負責進而自己也由負責中受益

敬請指教