作為教育創新與人才發展的非營利組織,TFT團隊的執行成果或許較難用統計數據精確衡量,因為TFT所關心的「人」與「影響力」,不僅關乎時間與生命的厚度,放在時間軸上,無論縱著看還是橫著看,都有極大的個體差異。儘管如此,TFT仍盡力在奔向願景的路程中,用證據說話,以嚴謹、負責的態度回應社會大眾的期待。
教育影響力的嚴謹檢視:改變理論 2.0
TFT 為了謹慎評估組織和教師計畫的影響力,創始之初便設立研究追蹤組,負責追蹤與評估TFT計畫成效,作為組織責信依據及重要策略的參考。每年,研究追蹤團隊將研究發現與追蹤成果撰寫成報告,公布於年報及官網中,供大眾檢驗。
對 TFT 來說,人才培育是一項沒有終點的工程,我們所關心的「人」不僅是孩子,還有在社會中打滾的每一個生命,以「人——場域——系統」為方法,期待能針對結構性的挑戰提供系統性的解方,為人的成長與學習創造最理想的條件、提供適當的媒介與專業的協助,並透過串聯更多的資源,引導整體社會對於教育不平等的重視,激發改變的行動。
我們期待星火不僅能燎原,還能在無限的時間中燃燒不盡。也許人才培育只是一種催化劑,但TFT作為一個致力發揮社會影響力的組織,必須負責地確保自己持續實現有意義的改變。我們發展出自己的「改變理論」(Theory of Change)── 以「組織活動投入」為起點,「最終希望創造的改變」為終點,描繪出組織預期創造改變的因果關係。並以模型發展專屬於 TFT「有效改變問題的邏輯(Logic Model)」,包含策略選擇、行動順序和短中長期之檢核指標,以確保眾人期待的改變能具體落實。如此,研究追蹤團隊得以在此邏輯中,透過嚴謹的研究與調查,審視 TFT 行動的執行效果,為團隊與計畫的定位、調整,提供可靠的依據。
不僅僅是數字,更是啟發改變的力量
除了獨立、嚴謹且不間斷的成效評估,也透過定期地蒐集校友、計畫成員等夥伴的反饋、內部反思會議等媒介,持續地洞察和學習,並對未知的挑戰保持敏捷、彈性的反應能力。此外,我們也透過不定期地第三方合作,讓外部單位來檢視TFT的服務成效,例如:2019年與台北大學社會系陳婉琪教授和陳易甫副教授研究團隊合作之「TFT合作地區偏鄉小學調查計畫」以第四屆計畫期間為主,分析TFT服務之效果。我們從經驗中學習有效的方法,也從經驗中意識到需要調整的措施,這是十年來穩定前進的堅持。
秉持著「蒐集有意義的數據」、「使數據能實際回饋教育系統」的目標,TFT所做的追蹤和評估不僅面向我們所關心的孩子,也關注到每一個TFT計畫成員與執行團隊,乃至於臺灣教育環境的現況。例如2021年透過參與中研院社會所發起之「COVID-19對台灣社會之影響」,協助蒐集1255份問卷調查現場教師在「停課不停學」期間的觀察與經驗,即時也豐富地提供了國內相關政策與研究的實證參考。即便在整體研究方面有諸多限制與可改善的空間,TFT仍重視「創造改變」的價值,期待在努力「使數據能回饋教育系統」的路上,也能串連教育生態系,支持政府、社區和學校執行「以實證為基礎」的教育方針。
成效評估之於我們的意義並非追求交出一張張亮麗的成績單,而是在於幫助看見TFT的每一個「現在」,也衡量願景中每一種可能的「未來」。作為教育創新與人才發展的非營利組織,我們深切地相信每一個人的無限可能,因此更加謹慎地看待生命對於生命的影響,對我們做出的每一個行動深切地負起責任。
表1 TFT 歷年研究計畫案例
研究項目 | 合作單位 | 研究工具 | 研究影響 |
第三方成效評估初步報告:第一屆 TFT 教師兩年表現 | 台南大學台東大學 | 學生訪談校方訪談計劃成員訪談 | 看見TFT計畫成員即使具備相當熱情和能力,不少 TFT 教師教學經驗仍有限。 團隊持續調整教師培育方法,發展計畫成員教學專業。 |
2016年TFT計畫成效:第三方研究 | 國教院中研院經濟所 | 政府測驗資料 | 證實TFT合作學校較其他偏遠地區學校,不管社經條件弱勢,還是教師缺口都更為挑戰。而計畫的介入能夠提升學生學習表現。提供組織以教師計畫回應議題策略的實證基礎。 |
2017-2019年 TFT 合作地區偏鄉小學調查計畫 | 台北大學社會系 | 教師問卷學校問卷 | 證實經歷 TFT 導師完整兩年教學的學生,在「自我效能感」上有顯著的正面影響。對於學校來說,TFT加入能夠正面影響學校其他老師。團隊持續與學校建立穩定且正向地互動,並思考如何將支持延伸到其他非TFT計畫成員。 |
COVID-19對台灣社會之影響 | 台北大學社會系 | 教師問卷 | 協助調查進行,更補充了偏遠地區學校教師的觀點,使台灣社會能夠更清楚地了解到遠端學習帶來的影響和改善空間,例如:後段學生的學習差距落後幅度加大、教師遠距教學支持資源不足等。TFT進一步建立遠距教學資源共享網站,整理國內外資源,支持教學者。(延伸閱讀國際連結) |
學生年度追蹤 | TFT 內部例行追蹤 | 學生問卷教師觀察表 | 每年度的例行性追蹤,用於穩定地監測計畫成效,團隊能夠即時掌握,保持敏捷地回應需求。 |
計畫成員年度追蹤 | 計畫成員問卷 | ||
校友年度追蹤 | 校友問卷 |