【點評】
所謂AI幻覺,可以通俗地理解為AI也會像人產生心理幻覺一樣,遇到不熟悉或超出“知識儲備”的問題時,編造一些并不存在的細節,生成與事實相悖的答案。一項調研顯示,對于“公眾認為使用AI應用過程中有哪些突出問題”,反饋最多的是“內容不準確,或含虛假信息”,占比高達42.2%。
AI幻覺從何而來?可能得從源頭尋找答案。
大模型的工作原理,是基于概率生成內容。給它上半句,它就根據自己“學”過的海量知識,“算出”下半句該說什么。比如,當用戶輸入“今天天氣非常”,它大概率會接“不錯”“熱”“潮濕”等答案,而不會出現“甜”。同時,大模型又不是簡單地儲存所有事實,而會像人腦記東西那樣,進行大量壓縮和泛化——也就是“抓概要、找規律”。因此,當“喂給”大模型的訓練數據包含虛假信息時,它就會產生“幻覺”、給出錯誤答案。
有報告顯示,我國生成式人工智能產品用戶規模達2.49億人。用戶規模快速增長,AI幻覺潛藏的風險也隨之增加。比如,如果一些看似合理卻與現實相去甚遠的內容被AI反復學習,會形成“數據污染—算法吸收—再污染”的惡性循環。有效防范由此帶來的虛假信息泛濫,已成為不容回避的課題。
不過也有觀點認為,AI幻覺可被視作一種“發散思維”和“想象力”。理論上,如果把訓練一個大模型看作信息“壓縮”的過程,那么大模型經過推理、輸出答案就是一個信息“解壓”的過程。這種處理信息的方式,可能會出現謬誤,也可能觸發新的創造。對發展尚未定型的新事物,要保持開放心態,辯證看待其利與弊,在有效防范弊端的同時,給予足夠空間使之朝好的方向成長。
短時間內,AI幻覺問題難以被解決。各方都在努力降低其負面影響,相關部門也加大了對違規AI產品的處置力度,推動生成合成內容標識加速落地。一些大模型廠商在積極行動,比如文心大模型利用檢索到的信息來指導文本或答案的生成,提高了內容的質量和準確性;通義大模型加強訓練語料管理,通過“紅藍對抗”機制提升對虛假信息的識別能力。對廣大用戶而言,則要加快提升AI素養,學會“智慧”地運用“智慧工具”,既借助大模型破除思維定式、啟發創新思路,又提高自身有效獲取、理解、評估和使用信息的能力。
人類塑造工具,工具也影響人類生活。應對AI幻覺等問題挑戰的過程,既促使人們思考改進工作方法,也為AI不斷進化提供了源動力。激發新技術的正向價值,讓AI更好融入生產生活、賦能千行百業,我們邁向智慧時代之路才能走得更加穩當、更加順暢。
標簽:
  4月24日,由中國軟件行業協會主辦的第四屆中國國際軟件發展大會在京舉辦。本屆大會以人工智能與軟件變革為主題,深入探討人工
 無人駕駛公交車在城市中軸線上絲滑行駛,自動駕駛清掃車在街道上穿梭工作,無人售貨車在廣場上招手即停……近日,記者在鄂爾多斯市康
 工業和信息化部日前公布,1至5月,我國規模以上互聯網和相關服務企業互聯網業務收入穩定增長,完成互聯網業務收入7735億元,同比增長
為規范網信部門行政處罰行為,保護公民、法人和其他組織的合法權益,近日國家互聯網信息辦公室發布《網信部門行政處罰裁量權基準適用規定》
旗袍,中國和世界華人女性的傳統服裝,被譽為中國國粹和女性國服。雖然其定義和產生的時間至今還存有諸多爭議,但它仍然是中國悠久服飾文化
7月21日,北京市政府發布《北京市電影局關于在疫情防控常態化條件下有序推進電影院恢復開放的通知》,宣布全市低風險地區影院,可于7月24日
?武漢7·16渡江節組委會14日發布公告,由于長江武漢關水位超警戒水位,按照規定取消2020年第46屆武漢7·16渡江節。受近期持續強降雨影響,
過去一段時間,國家級非遺項目灰塑傳承人邵成村,多次在陳家祠等工作現場,向身邊那些帶著好奇目光的人們講解灰塑的種種技術細節:草根灰、
7月13日,位于璧山區南門唐城夜市街區的璧山冷酒夜市開街。這是璧山區打造夜間經濟消費載體、培育夜間經濟活動品牌的舉措之一。璧山市民一