Browsing by Author "Yen, Yu-Ci"

Filter results by typing the first few letters
Now showing 1 - 1 of 1
  • No Thumbnail Available
    Item
    大型語言模型 ChatGPT 於學測英文考科中選擇題及混合題表現之探究
    (2024) 顏于慈; Yen, Yu-Ci
    人工智慧現今已然融入人們生活的各個層面之中。劃時代的尖端科技也逐漸改變人們對世界的認知及與之的互動方式。就英語學習而言，自OpenAI於2022年推出大型語言模型ChatGPT以來，ChatGPT已為因工作需求或正在學習語言的人們提供了方便的資源。鑑於英語測驗於評估英語學習成果中的關鍵角色，本研究旨在探討：(1) ChatGPT在英語語言測驗中是否為值得信賴的英語學習工具，及 (2) 其於作答英語語言測驗中的的能力及隱憂。本研究評估了ChatGPT（GPT-4和GPT-4o）於2017至2024年的台灣學科能力測驗（學測）英文考科中的表現。測驗題型包括詞彙題、綜合測驗、文意選填、篇章結構、閱讀測驗以及混合題。研究顯示，GPT-4和GPT-4o於每年度的學測英文考科之答題準確率分別落在86%到100%及92.86%到100%區間。GPT-4o在詞彙和語法知識、閱讀技能和圖像處理能力方面優於GPT-4。若以題型來看，GPT-4o在整體表現上優於GPT-4，於詞彙題和篇章結構測驗中取得滿分，並在閱讀測驗、文意選填和綜合測驗中表現出色，作答準確率分別為98.28%、97.50%和96.19%。然而，對於因台灣新課綱的實施而納入的混合題題型，GPT-4和GPT-4o的作答準確率皆僅為66.67%，顯示出大型語言模型處理此類題型的可信度相對較低。而ChatGPT於混合題型中之多選題答題中所顯現出的邏輯謬誤及錯誤解讀，抑或是相對較少的混合題題型之題目數量皆可能為其於混合題題型上表現相對不出色的潛在原因。總體而言，大型語言模型ChatGPT的學測英文答題準確率顯示其在英語學習中具有幫助學生解題的潛力。