ChatGPT錯誤率｜新研究揭示高達五成錯誤，工程師仍偏愛AI答案

ChatGPT錯誤率高達五成，這一發現來自普渡大學的最新研究。儘管如此，許多工程師仍然偏愛由AI提供的答案，這一現象引發了廣泛的討論和關注。

ChatGPT錯誤率丨研究背景與主要發現

普渡大學的研究團隊在最近的人機互動大會上發表了他們的研究成果。研究指出，ChatGPT在程式編寫問題的回答中，有高達52%的錯誤率。這一數據顯示，與人類專家相比，ChatGPT在精確性和可靠性方面還有很大的提昇空間。

錯誤類型分析

研究中指出，52%的錯誤答案包含虛假資訊，77%的答案比人類的答案更冗長，78%的答案在某種程度上與人類答案不一致。這些數據揭示了AI在處理複雜問題時的局限性。

ChatGPT錯誤率丨工程師的偏好與原因

儘管存在高錯誤率，許多工程師仍然選擇使用ChatGPT的答案。研究團隊對12名工程師進行了調查，發現其中35%的人偏愛AI生成的答案，39%的人甚至沒有察覺到AI答案中的錯誤。

語言表達的影響

研究團隊進一步分析了2000個隨機選取的ChatGPT答案，發現這些答案通常更正式、更具分析性，且呈現較少的負面情緒。這種表達方式使得答案看起來更具說服力，從而讓使用者放鬆警惕，忽略了錯誤資訊。

ChatGPT錯誤率丨未來展望與改進措施

面對這一挑戰，OpenAI也在積極尋求解決方案。本月稍早，OpenAI宣布將與Stack Overflow合作，目的是提昇AI模型在程式碼編寫方面的能力。這一合作預計將在今年上半年推出初步成果。

技術進步的可能性

隨著AI技術的不斷進步，我們有理由相信，未來ChatGPT及其他AI工具在程式編寫和其他專業領域的表現將逐步提昇。這不僅將改變工程師的工作方式，也可能對整個科技行業產生深遠的影響。