Home
學生控制台
註冊會員/登入
研究知情同意書
UeduGPTs
Aida 優學伴
Uedu Open
支援與訊息

UeduGPTs

--

Jupyters

2

AI 回覆桌面通知

AI 助教回覆完成時顯示桌面通知

聊天訊息通知

同學在討論區發送訊息時通知

聲音通知

每當有新通知時播放提示音

METHODOLOGY

Debate Survey
模擬辯論態度問卷

說明模擬辯論前後測 Likert 量表的設計原理,包含三維度測量架構(立場、信心、開放性)、反向題處理、態度變化計算方法與研究應用。

1. 概述

模擬辯論態度問卷在每次模擬辯論(mode=4)的前後,讓學生填寫 Likert 五點量表,測量辯論前後在立場、信心、開放性三個維度的態度變化。

與蘇格拉底對話的前後測 Quiz 不同,辯論問卷測量的是態度而非知識,沒有「正確答案」,而是觀察學生觀點的變化程度。

2. 與 Quiz 的差異

面向蘇格拉底 Quiz辯論態度問卷
題型單選題(A/B/C/D)Likert 五點量表(1-5)
測量目標知識理解程度態度與觀點
正確答案
計分方式答對題數 + 學習增益平均分 + 維度分 + 態度變化
反向題不支援支援(有效分 = 6 - 原始分)
報告學習增益報告態度變化報告

3. 三維度架構

問卷題目涵蓋三個心理測量維度:

維度英文測量內容題目範例
立場Stance學生對辯題的贊成/反對程度「我認為 AI 應該被允許做出醫療決策」
信心Confidence學生對自身觀點的確信程度「我有信心為自己的立場提出有力的論據」
開放性Openness學生對反方觀點的理解與接納「我能理解持相反立場者的論點」
研究假設

有效的辯論練習應能提升學生的信心(更敢表達觀點)和開放性(更能理解對方),而立場的變化則反映辯論是否改變了學生的觀點。

4. Likert 量表設計

每題使用五點量表:

分數標籤
1非常不同意
2不同意
3普通
4同意
5非常同意

反向題處理

部分題目為反向題(如「我無法理解對方的觀點」),計分時有效分數 = 6 - 原始分數。例如學生選了 2(不同意),有效分數為 4,代表其實是偏向同意「能理解對方觀點」。

每次問卷至少包含 1 題反向題,用於檢驗作答一致性。

5. AI 出題機制

系統使用 GPT-4o-mini 模型,根據辯論主題的標題與背景自動產生 Likert 題目:

  • 三個維度均勻分布(每維度至少 1-2 題)
  • 至少包含 1 題反向題
  • 題目使用第一人稱陳述句
  • 題目具體對應辯論主題,非泛泛而談
  • 使用繁體中文

題目格式

欄位型別說明
item_textString題目文字(如「我認為...」)
dimensionStringstance / confidence / openness
is_reverseBoolean是否為反向題
sourceEnumaimanual

6. 計分與態度變化

整體平均分

所有題目的有效分數(反向題已轉換)取平均,範圍 1.0-5.0。

維度分數

按 stance / confidence / openness 分組,各自計算平均分。

態度變化報告

後測完成後,系統產生態度變化報告,包含:

  • 整體 shift:後測平均分 - 前測平均分
  • 維度比較:三個維度各自的 pre/post 平均分與變化量
  • 逐題比較:每題的 pre → post 分數變化,以箭頭和顏色標示方向(↑ 綠色 / ↓ 紅色 / → 灰色)
與 Quiz 學習增益的差異

態度問卷不計算 Normalized Gain,因為 Likert 量表沒有「滿分」的概念。研究者應使用配對 t 檢定或 Wilcoxon 符號等級檢定來檢驗前後差異的統計顯著性,並報告效果量(Cohen's d)。

7. 資料結構

題目表(debate_survey_items)

欄位型別說明
topic_idINT關聯的辯論主題 ID
item_orderTINYINT題目順序
item_textTEXT題目文字
dimensionVARCHARstance / confidence / openness
is_reverseTINYINT是否為反向題

作答紀錄表(debate_survey_responses)

欄位型別說明
topic_idINT辯論主題 ID
chat_idINT關聯的對話 session ID
user_idINT學生 ID
phaseENUMpre / post
answersJSON各題分數,如 {"1":4,"2":2,"3":5}
mean_scoreDECIMAL整體平均分
dimension_scoresJSON各維度平均分
time_spentINT作答秒數

8. 研究應用

態度問卷資料可透過 Uedu Lab 匯出,用於以下研究:

  • 態度變化分析:辯論是否顯著改變學生的立場、信心或開放性
  • 維度間關係:信心提升是否伴隨開放性提升(或降低)
  • 辯論主題效果:不同主題對態度變化的影響差異
  • 跨模式比較:蘇格拉底對話(知識增益)vs 模擬辯論(態度變化)的教學效果比較
  • 對話行為分析:結合對話紀錄,分析論述品質與態度變化的關聯
研究倫理提醒

態度問卷涉及學生的個人觀點與立場,屬於敏感資料。使用前請確認已通過 IRB 審查。系統在問卷頁面已標示「此問卷不計入成績,僅供教學研究使用」。