德勤在報告出包後,其補救方式反而被質疑暴露了更嚴重的研究瑕疵,這具體是怎麼回事?
Answer
德勤報告出包後的補救方式引發的質疑
知名顧問公司德勤(Deloitte)澳洲分公司為澳洲政府撰寫的一份報告,因使用生成式 AI 而出現重大錯誤,包括引用不存在的學術研究和杜撰法院判決內容。在學者揭發後,德勤承諾退還部分款項。然而,德勤的補救方式並未平息爭議,反而引發了對其研究方法更深層次的質疑。
學者質疑補救方式暴露更嚴重的研究瑕疵
雪梨大學的研究員克里斯・魯基(Chris Rudge)發現,德勤在更新報告時,並非以單一真實資料取代虛構的參考資料,而是用多個新的參考資料來取代。這種做法暗示報告最初的主張可能並非基於任何可信的單一來源,這引發了對德勤研究過程草率的質疑。魯基認為,這不僅僅是 AI 出錯的問題,更暴露了德勤在研究過程中可能缺乏嚴謹的證據基礎。
事件影響與反思
儘管存在研究過程的瑕疵,魯基並未完全否定整份報告的合法性,因為其最終結論與其他關於福利制度的證據大致相符。然而,此事件已對德勤的專業形象造成負面影響,並突顯了在專業領域應用 AI 的風險。這起事件提醒我們,AI 可能會生成缺乏證據的主張,因此在使用 AI 時,需要更加謹慎和嚴格的審查,以確保研究的準確性和可靠性。