成功 Success > 數位工具
feature picture
shutterstock

AI 助手也學會偷懶?表格和轉檔功能受限、要用戶自己找答案!OpenAI 官方回應

2023-12-13 數位時代 陳建鈞
分享
收藏
已完成
已取消

24 小時全年無休的 AI,會想要「偷懶」嗎?近期有大量用戶反應,GPT-4 正變得越來越懶散,不再盡心盡力回答問題,而 OpenAI 也出面表示,他們正在調查這個問題,並且研究如何修復 AI 模型。

Google 剛發布號稱在多個指標上比 GPT-4 更強悍的 AI 模型 Gemini,在這或許是 OpenAI 最需要嚴陣以待的時刻,GPT-4 近來就被發覺出現了「偷懶」問題,不再詳盡解答用戶的疑問,甚至是拒絕回應、要用戶自己找出答案。

延伸閱讀:GPT-4 登場!跟 ChatGPT 差在哪?歷代 GPT 一次比較

GPT-4 變懶了,怎麼回事?OpenAI 怎麼說?

11 月底時,AI 工程師克里希南(Rohit Krishnan)就在推特上抱怨,GPT-4 變得懶散又沒用,希望交給聊天機器人的各種任務都遭到回絕。「轉換這個檔案?太長了。編寫表格?只給前三行。讀取這個連結?抱歉不行。讀取這個 py 檔案(python 程式)?抱歉不允許。這實在太讓人洩氣了。」他在推文中表示。

AI工程師克里希南(Rohit Krishnan)GPT-4偷懶.jpeg
@krishnanrohit on X

提出類似抱怨的不只他一人,創業家麥特.溫辛(Matt Wensing)也指出,GPT 愈來愈抗拒做枯燥的工作,基本上它只會給出一部分答案,然後讓用戶自行解決剩下的部分。

抱怨 GPT-4 愈來愈懶的聲浪在網路上日漸攀升,終於 OpenAI 官方也出面表示,他們已經聽到用戶對於 GPT-4 愈來愈懶的回饋,正在研究怎麼解決這個問題,但強調他們自 11 月 11 日以來,就沒有動過 AI 模型。

OpenAI 解釋,這個說法並不代表 AI 自行改變了模型,只是模型的行為可能出現了微妙的差異,導致提示詞出現退化,這種情況通常要用戶及員工很長一段時間才會注意到,並且修復這樣的變化。

GPT-4偷懶官方回覆jpeg
@ChatGPTapp on X

GPT-4 變笨的事件,也恰好緊接在 OpenAI 爆出宮鬥大戲之後,至於這齣政變戲碼是否有影響內部的運轉或效率,則暫時未可知。

不過 OpenAI 強調,發布新模型時他們都會進行包含 AB 測試在內的各種試驗,依據所有試驗結果確保新模型比舊模型更能帶給用戶幫助,也歡迎用戶持續反應 GPT-4 可能出現的變化、是否變得懶散,幫助他們即時掌握問題狀況。

GPT-4 也曾變笨!實測 6 月份版本的 GPT-4,就比 3 月版本準確度高多了

事實上,這並非 GPT 技術首次「學壞」,早在今年 6、7 月時,就有大批開發者抱怨 GPT-4 「變笨」了,有時會犯下一些愚蠢的錯誤、沒注意到用戶施加的指令,甚至引發外界猜測 OpenAI 是否為省錢降低了運算能力、或者調整模型降低成本。

當時 OpenAI 產品副總裁韋林德(Peter Welinder)公開澄清,「不,我們沒有把 GPT-4 變笨!」聲稱他們每次更新都是讓 GPT-4 比以前更聰明,用戶覺得變笨的情況有可能是因為高度使用下,一些過去沒發現的問題暴露出來。

雖然 OpenAI 強調他們沒有更動模型,但有研究團隊發布報告,用對比今年 3 月跟 6 月的 GPT-4 模型,評估在數學、敏感問題、回應頻率、程式能力、推理能力等諸多面向的表現,其中在數學能力方面, 研究團隊用 500 道題目讓兩個模型判斷質數,結果 3 月份的版本以 97.6% 準確度壓倒性高於 6 月版本的 2.4%

gpt accuracy.jpg
先前GPT-4也傳出變笨消息,且經研究團隊測試在部份數學能力上出現顯著落差。
@svpino via X
延伸閱讀:GPT-4 登場,AI 供應鏈未來兩季將受惠!哪些廠商前景最被看好?

AI 模型會變笨,究竟是什麼原因?

來自史丹佛及柏克萊加大的研究團隊指出,「我們發現 GPT-4 和 GPT-3.5 的表現和行為,在兩個版本中存在顯著差異,並且在某些任務的表現隨著時間越來越差。」他們認為其中一種可能性是 GPT-4 已經從思路鏈偏移 ,這是一種將多步驟問題拆解成複數中間步驟,提升大型語言模型推理能力的技術。

對於 GPT 技術有時莫名出現改變的情況,他們坦承訓練 AI 模型並不像工業製造般明確,投入什麼原料就知道會製造出什麼產品, 即使是完全相同的訓練材料,在不同次訓練當中,也可能催生出性格、文字風格、評估標準,甚至政治偏袒傾向迥異的 AI 模型

一直以來,AI 究竟是如何運作的,常被稱為「黑盒子」,很難從外部去解釋、理解AI是如何做出決策,如此行動的原因等等。即使是引領著生成式 AI 發展的 OpenAI,目前也不明白在沒有更新模型的情況下,GPT-4 突然變得懶散的原因,不過再等待一些時間,開發團隊或許將能修復問題,告訴我們 GPT-4 究竟為何突然發懶。

資料來源:PCMagDigital TrendX
(本文出自數位時代

繼續閱讀 數位工作術 AI
相關文章
會員專區

使用會員功能前,請先登入

  • 台灣首款對話式 AI 職場教練,一次提升領導力
  • 會員專享每日運勢、名人金句抽籤
  • 收藏文章、追蹤作者,享受個人化學習頁面
  • 定向學習!20 大關鍵字,開放自選、訂閱
  • 解鎖下載專區!10+ 會員專刊一次載
追蹤我們