人工智能與數字教育觀察
AI and Digital Education Spectator

用刻意設計的化學提問,檢視AI推理盲點

研究針對大型語言模型的化學推理能力,設計具挑戰性的提問,要求ChatGPT等模型處理複雜化學問題,再分析答案及推論。這些提問刻意測試模型在學科內容上的能力邊界,結果揭示現有系統的推理弱點,流暢的文字解說並不一定伴隨可靠的化學判斷。論文屬模型能力分析,未安排學生學習介入,也沒有以成績比較證明相關工具的教學效果。

論文原文

Evaluating and challenging the reasoning capabilities of generative artificial intelligence for technology-assisted chemistry education
研究及來源資料
研究來自哪裏?
University of the Basque Country UPV/EHU、Udako Euskal Unibertsitatea
地域視角
世界各地研究 · 國際
DOI
10.1007/s10639-024-13295-6
期刊/研討會
Education and Information Technologies
類型
針對性提問測試;大型語言模型化學推理分析
地區說明
按研究內容分類;作者院校所在地不視作研究樣本地區。
學習領域
科學教育
原文日期
2025-01-03
最近核實
2026-09-11
研究來源分類
期刊
作者
Suna-Şeyma Uçar、Inigo Lopez-Gazpio、Josu Lopez-Gazpio
學習階段
未有指明
研究領域
數學與科學、教學與評估
研究對象
人工智能系統
分類說明
測試對象是模型;摘要沒有列明題目學段。