Search
Close this search box.

【請 AI 別擾亂工程師】ChatGPT 程式開發給出半數錯誤建議,但人類工程師看不出來

像 OpenAI ChatGPT 這樣的 AI 聊天機器人,正在作為一種革命性的工具,幫助你我提高工作效率,但最近一項令人震驚的研究發現,ChatGPT 在 52% 的情況下,對於電腦程式設計問題其實都回答了錯誤的建議,既沒有真正幫助到工程師,反而讓人類陷入了更多混亂。

根據美國普渡大學所進行的研究,他們將列於程式設計領域問答網站 Stack Overflow 上,總共 517 個程式設計問題丟給 ChatGPT,結果發現 AI 所給出的解決方案中,竟有高達 52% 的答案包含了錯誤訊息,且有 77% 的答案過於冗長。

掌握 AI 趨勢 & 活動資訊一點都不難!訂閱電子報,每週四一起《AI TOgether》

感謝訂閱!隨時注意信箱的最新資訊

有趣的是人類工程師並沒有因為 ChatGPT 容易給出錯誤回答,就因此捨棄 AI 所提供的修改建議,因為有多達 35% 的接受調查者指出,他們仍然喜歡 ChatGPT 所給予的答案,理由是 AI 對於解決方案的說明,不僅足夠全面甚至還表達清晰。

然而 AI 看似正經回答的背後,卻也讓多達 39% 的工程師,無意間忽略了 ChatGPT 回答中的錯誤資訊。研究人員指出 ChatGPT 透過禮貌的言語、清晰的教科書式回答,以及對問題全面性的兼顧,使 AI 所生成的答案看起來更具說服力,因此受調查者才願意放下戒心,進而忽略 ChatGPT 答案中的各種錯誤。

雖然普渡大學的這項研究,主要是針對程式開發人員進行調查,但它卻指出了任何使用 AI 工具的人,皆可能遇到同樣的問題。

大型科技公司目前正在人工智慧領域投入數十億美元,期待對外界提供最可靠的聊天機器人,包含 Meta、微軟和 Google 都在爭奪新興領域的主導地位,但即便這個領域有機會從根本上重塑人類和網路間的關係,不過中間仍存在著許多障礙。

其中,最主要的障礙在於人工智慧至今還不夠可靠,尤其是當使用者提出真正「獨一無二」的問題時,AI 不見得能夠給予正確且有效的解答,例如 Google AI 會叫你在披薩上塗膠水,才能夠避免起司流下來,在在提醒了我們當今 AI 的侷限性。

對於普渡大學的研究,OpenAI 並沒有立刻作出相關回應,但對已經仰賴 AI 進行程式開發的工程師們來說,未來確實應該對 AI 的回答多一分警惕。

【延伸閱讀】

◆ 「Google 搜尋變得有夠蠢!」吃披薩時起司會掉下來怎麼辦?AI 說那你就用膠水黏住食材啊

◆ AI 被汙染恐走向自我毀滅?研究揭「模型崩潰」不可避免,給你的答案會是胡說八道

◆ 【擺脫 ChatGPT 的胡說八道】8 個 ChatGPT 替代服務!精準答案、流暢文筆 AI 任你選

*本文開放合作夥伴轉載,資料來源:《Gizmodo》《Futurism》。首圖來源:Unsplash