多模態(tài)交互已經(jīng)成為教育科技行業(yè)探索的方向。
可視化交互式AI教師系統(tǒng)ChatTutor來了,可邊講解邊繪制動(dòng)態(tài)圖
多知11月18日,最近,一款可視化交互式AI教師系統(tǒng)ChatTutor發(fā)布,打破傳統(tǒng)AI問答“純文字輸出”的局限,可以實(shí)時(shí)同步畫板,實(shí)現(xiàn)“邊講解、邊繪制、邊推演”的類人教學(xué)體驗(yàn)。
在真實(shí)課堂中,教師會(huì)運(yùn)用粉筆、電腦、黑板等多種教具來幫助學(xué)生更好地理解知識(shí)。對(duì)聊天機(jī)器人而言,純文本傳遞的信息量非常有限,尤其在STEM(科學(xué)、技術(shù)、工程、數(shù)學(xué))學(xué)科中更為明顯。由此,ChatTutor 應(yīng)運(yùn)而生。

多知觀察到,ChatTutor 是GitHub 上一款開源產(chǎn)品,通過設(shè)置配置API密鑰和模型,然后可以在線頁面訪問。
根據(jù)介紹,ChatTutor 不再是僅文字的交互,還有動(dòng)態(tài)圖形。例如,當(dāng)用戶提問“二次函數(shù)如何平移”,AI可以口述原理,還可以在畫板上動(dòng)態(tài)繪制曲線、標(biāo)注頂點(diǎn)、演示變換過程。
根據(jù)介紹,ChatTutor依托多模態(tài)生成技術(shù),構(gòu)建起覆蓋多領(lǐng)域的智能教學(xué)矩陣:
數(shù)學(xué)可視化:函數(shù)圖像、幾何構(gòu)造、統(tǒng)計(jì)圖表一鍵生成,支持動(dòng)態(tài)推導(dǎo)與參數(shù)調(diào)節(jié);
物理實(shí)驗(yàn)?zāi)M:即時(shí)繪制力學(xué)受力圖、運(yùn)動(dòng)軌跡、波動(dòng)傳播等,將抽象定律具象化;
邏輯電路交互:可拖拽門電路元件,實(shí)時(shí)驗(yàn)證時(shí)序邏輯與狀態(tài)轉(zhuǎn)換;
編程逐行教學(xué):支持Python、JavaScript等語言,邊寫代碼邊解釋執(zhí)行流程與錯(cuò)誤排查;
思維導(dǎo)圖生成:將復(fù)雜概念自動(dòng)結(jié)構(gòu)化,一鍵導(dǎo)出用于復(fù)習(xí)或團(tuán)隊(duì)協(xié)作。
可以看到,ChatTutor賦予AI使用教具的能力,讓AI成為真正能動(dòng)手教學(xué)的老師。該產(chǎn)品針對(duì)于有編程能力的教師來說,有一些輔助作用,但對(duì)大眾來說,還是有些不方便。
實(shí)際上,多模態(tài)交互亦是整個(gè)教育科技行業(yè)探索的方向,例如,學(xué)而思學(xué)習(xí)機(jī)軟硬一體化小思AI 1對(duì)1,就是多模態(tài)的交互方式,集批改和講題為一身;多知曾報(bào)道的VideoTutor則是通過視頻化的方式進(jìn)行講解,也融入了動(dòng)態(tài)圖形。
媒體商務(wù)合作:夏女士18614077531(微信同號(hào))