Show a desktop notification when the AI TA finishes replying
Notify me when classmates post messages in the forum
Play an alert sound whenever there is a new notification
From AI Literacy to Scientific Literacy: A Co-Design Forum with Earth-Science Teachers on a Generative-AI Teaching Platform
生成式 AI 進入教學現場後,最常見的研究問法是「教師接不接受」。 以科技接受模式(TAM)與 UTAUT 為基礎的大量研究,估計的是一項工具會不會被採用; 但平台團隊真正需要知道的,是這項工具必須變成什麼樣子才用得上, 而後者不是把問卷做得更好就能得到的答案。
既有文獻還有兩個取樣上的偏斜:多半研究通用型聊天機器人而非功能龐雜的平台, 受試者也多為職前教師或大學教師。真正在教特定學科的在職教師, 對一個生成式 AI 平台會提出什麼要求,尤其是會要求它去測量什麼, 幾乎沒有實證資料。
地球科學把這個缺口放到最大。它在中學是跨越大氣、水圈與海洋、固體地球與天文的統整科目, 核心概念(駕馭颱風路徑的科氏偏轉、驅動海陸風的對流、成雲的絕熱冷卻、測量恆星距離的視差) 多半看不見、太抽象,或慢到一堂課內觀察不完,正是互動模擬與即時開放資料最有可能派上用場的地方。
本研究採共同設計論壇(co-design forum)而非接受度調查: 把教師放在設計夥伴的位置,讓他們「提規格」而不是「打分數」。
這個設計最大的效度威脅是「當著開發者的面,教師會不會客氣」。 論文以語料內容本身回答:五個主題中有兩個直接挑戰平台的前提, 一個記錄教師當場稽核產品並找出瑕疵,另一個明說平台目前尚未達到可用門檻; 語料中的肯定是具體而有條件的,不是全面背書。
五個主題中,第一個最具遷移性:
論文主張這個分歧是可以搭橋的,而橋就是科學素養。 教師要求被測量的東西(座標軸要標單位、尺度要站得住腳、資料是被「讀」出來而不只是被畫出來、 數值要落在儀器支持得起的精度內),聽起來像格式要求,實際上是學科的知識論承諾: 一個沒有單位的數字,並沒有承諾指涉世界上的任何東西。
這使科學素養與 AI 素養成為同一種類型的歷程構念: 都不是靠回憶去測,而是從學習者產出的東西推論而來。 若此推論成立,平台既有的那套機制(已在多機構規模上以 Bloom 認知層次分類學生提問、 並與人類評分者對照驗證)需要換的是測量目標,而不是重新打造一套工具。
論壇當場收斂出的機制值得記錄,因為它示範了教師的限制條件允許什麼: 學生親手把自己的實驗紀錄畫成圖,系統只負責判斷這張圖是否具備使其成為科學圖表的要件, 並提供下一輪回饋。該自動化的是稀缺資源(回饋的輪次),不是看得見的產出(圖本身)。 在生成式 AI 讓「模仿」變得廉價之後,可被評量的重心也從成品(現在可以被偽造) 移到互動(因為必須即時回應,較難偽造)。
另一項與撰寫教材直接相關的教訓來自平台自身的錯誤: 一張說明圖的結構性錯誤是由學科專家(本文第三作者)在閱讀時發現,而不是委製它的開發者。 修正的方式不是換個提示詞重新生成,而是放棄以圖像生成製作該圖, 改以向量幾何撰寫,因為這張圖的要求是「邊界落在精確的角度、二十個標籤各自錨定在對應的帶狀區域」, 屬於位置精確性,那不是生成式圖像模型該負責的事。 提示詞無法弭平「產出必須保證什麼」與「生成方法能夠保證什麼」之間的落差。
單一場域、單一場次,樣本為自選且高度非典型的資深教師(他們自行安排代課、自費前往), 是設計研究要的對象,卻不是估計市場需求該用的對象; 具代表性的樣本對教材的門檻大概會更低、對支援的要求會更高。 編碼由單一分析者完成,且該分析者同時是平台開發者。 問卷(n=3)不支持任何推論。所有發現都是「單次接觸後陳述的需求」, 是否能預測真實課堂中的採用,仍屬未知。
論文亦自我設限地標示了推論邊界:教師講出來的那些要求是發現; 「它們構成單一可測量的構念、與 AI 素養屬同一類型、可由同一套機制服務」則是作者的推論, 在本文中論證、但尚未被檢驗。若讓語言模型評判學生的解釋, 還須先處理流暢度、語域與長度所帶入的無關變異(這些與家庭語言、社經背景相關), 以及「同一系統既出題又評分」造成的循環性。
論壇中實際操作的是 Uedu Science 互動模擬(地球科學為其中一個科目群) 與平台介接的即時環境開放資料。本研究的價值不在於證明這些功能好用, 而在於由學科教師界定出它們該往哪裡走: 進入沒有教材的「探究與實作」,把自動化用在回饋的輪次上, 並把測量目標從 AI 素養調整為教師被課責的學科學習。 論文提出的手繪圖評量機制仍在開發中,尚未成為平台功能。
前往使用