AI Tutor的大規模驗證有效的研究

 第一個AI Tutor的大規模驗證有效的研究出現了？這個在迦納的對照研究顯示，AI Tutor顯著的提高了3-9年級學生的成績。

論文摘要：
本研究評估了透過 WhatsApp 進入的AI對話式數學家教 Rori ，對迦納 11 所學校約 1000 名3-9年級學生數學成績的影響。每所學校被分配到實驗組和對照組；對照組的學生繼續接受常規數學教學，而實驗組的學生則在8 個月的時間裡，除了常規數學教學外，每週還與Rori 進行兩次30 分鐘的對話。我們發現，實驗組的數學成績大幅提高，效應大小為 0.37，且結果具有統計意義（p < 0.001）。

Rising Academies是位在迦納的教育網路公司，他們在WhatsApp上推出了一個免費的AI數學家教Roxi。他們受Teaching at the Right Level及Intelligent Tutoring Systems的啟發，Rori採用基於精熟的學習路徑（因材網也是這種）首先測驗學生的程度到哪，然後分配至500多個微型課程之一進行教學。課程包含簡要的說明以及一系列鷹架式的練習題。每當學生做錯的時候，AI會對所犯錯的類型進行具體的回饋。如果學生在解題遇到困難，AI會先給學生提示然後才給完整的解題方案。並且如果當學生遇到太難的課程的時候，Rori會將他們移到比較合適的課程上。Rori讓學生透過對話式介面使用蘇格拉底式的對話鼓勵學生發展後設反思。

實驗方法：
在迦納找了3-9年級約1000名的學生參與測試，每週用課外時間與Rori一起上2堂30分鐘的課，教師在一旁協助，學生用紙計算答案，對照組繼續進行常規的數學教學不使用Rori。而為了評估Rori對數學技能的影響，學生在8個月內都做了兩次數學評估以評估數學知識合計能的增加情況。

論文連結：
https://arxiv.org/abs/2402.09809