最近,北榮新竹分院的團隊為我們帶來了一項有趣的研究成果!他們把ChatGPT應用在2023台灣藥師執業考試,看看它的表現如何。這又是一場人類與AI的對決!
考試規則很簡單,ChatGPT使用中文和英文作為問題的語言,然後它就要回答一連串的考題。不過,因為ChatGPT的還無法辨識圖片,因此圖形問題、化學公式和表格等題目都被排除了。題目如下是一題一題請ChatGPT回答的。
結果如何?讓我們繼續看下去!
驚人的是,ChatGPT在考試中表現得相當亮眼!在第一階段的測試中,中文和英文題目的正確率分別為54.4%和56.9%。第二階段,正確率分別為53.8%和67.6%!尤其在臨床藥學及治療學方面,它的表現更為出色。可以看到有的科目正確率甚至超過70%。
雖然ChatGPT最終未能通過整個考試,但這個成績真的相當了不起!想像一下,只是ChatGPT 3.5版本就能取得如此好的成績。
或許ChatGPT還沒完全成為一名合格的藥師,但AI的發展速度一日千里,我們可以期待未來ChatGPT和其他AI模型在醫療領域的更大突破!
我甚至懷疑脫離考試這麼久的我,現在考不贏ChatGPT...
參考資料:Wang YM, Shen HW, Chen TJ. Performance of ChatGPT on the Pharmacist Licensing Examination in Taiwan [published online ahead of print, 2023 May 25]. J Chin Med Assoc. 2023;10.1097/JCMA.0000000000000942. doi:10.1097/JCMA.0000000000000942



沒有留言:
張貼留言