警惕人工智能時代的“智能體風險”
智能體是人工智能(AI)領域中的一個重要概念,是指能夠自主感知環(huán)境、做出決策并執(zhí)行行動的智能實體,它可以是一個程序、一個系統(tǒng)或是一個機器人。
智能體的核心是人工智能算法,包括機器學習、深度學習、強化學習、神經(jīng)網(wǎng)絡等技術。通過這些算法,智能體可以從大量數(shù)據(jù)中學習并改進自身的性能,不斷優(yōu)化自己的決策和行為。智能體還可根據(jù)環(huán)境變化做出靈活的調(diào)整,適應不同的場景和任務。
(資料圖片)
學界認為,智能體一般具有以下三大特質:
第一,可根據(jù)目標獨立采取行動,即自主決策。智能體可以被賦予一個高級別甚至模糊的目標,并獨立采取行動實現(xiàn)該目標。
第二,可與外部世界互動,自如地使用不同的軟件工具。比如基于GPT-4的智能體AutoGPT,可以自主地在網(wǎng)絡上搜索相關信息,并根據(jù)用戶的需求自動編寫代碼和管理業(yè)務。
第三,可無限期地運行。美國哈佛大學法學院教授喬納森·齊特雷恩近期在美國《大西洋》雜志發(fā)表的《是時候控制AI智能體》一文指出,智能體允許人類操作員“設置后便不再操心”。還有專家認為,智能體具備可進化性,能夠在工作進程中通過反饋逐步自我優(yōu)化,比如學習新技能和優(yōu)化技能組合。
以GPT為代表的大語言模型(LLM)的出現(xiàn),標志著智能體進入批量化生產(chǎn)時代。此前,智能體需靠專業(yè)的計算機科學人員歷經(jīng)多輪研發(fā)測試,現(xiàn)在依靠大語言模型就可迅速將特定目標轉化為程序代碼,生成各式各樣的智能體。而兼具文字、圖片、視頻生成和理解能力的多模態(tài)大模型,也為智能體的發(fā)展創(chuàng)造了有利條件,使它們可以利用計算機視覺“看見”虛擬或現(xiàn)實的三維世界,這對于人工智能非玩家角色和機器人研發(fā)都尤為重要。
智能體可以自主決策,又能通過與環(huán)境交互施加對物理世界影響,一旦失控將給人類社會帶來極大威脅。哈佛大學齊特雷恩認為,這種不僅能與人交談,還能在現(xiàn)實世界中行動的AI的常規(guī)化,是“數(shù)字與模擬、比特與原子之間跨越血腦屏障的一步”,應當引起警覺。
智能體的運行邏輯可能使其在實現(xiàn)特定目標過程中出現(xiàn)有害偏差。齊特雷恩認為,在一些情況下,智能體可能只捕捉到目標的字面意思,沒有理解目標的實質意思,從而在響應某些激勵或優(yōu)化某些目標時出現(xiàn)異常行為。比如,一個讓機器人“幫助我應付無聊的課”的學生可能無意中生成了一個炸彈威脅電話,因為AI試圖增添一些刺激。AI大語言模型本身具備的“黑箱”和“幻覺”問題也會增加出現(xiàn)異常的頻率。
智能體還可指揮人在真實世界中的行動。美國加利福尼亞大學伯克利分校、加拿大蒙特利爾大學等機構專家近期在美國《科學》雜志發(fā)表《管理高級人工智能體》一文稱,限制強大智能體對其環(huán)境施加的影響是極其困難的。例如,智能體可以說服或付錢給不知情的人類參與者,讓他們代表自己執(zhí)行重要行動。齊特雷恩也認為,一個智能體可能會通過在社交網(wǎng)站上發(fā)布有償招募令來引誘一個人參與現(xiàn)實中的敲詐案,這種操作還可在數(shù)百或數(shù)千個城鎮(zhèn)中同時實施。
由于目前并無有效的智能體退出機制,一些智能體被創(chuàng)造出后可能無法被關閉。這些無法被停用的智能體,最終可能會在一個與最初啟動它們時完全不同的環(huán)境中運行,徹底背離其最初用途。智能體也可能會以不可預見的方式相互作用,造成意外事故。
已有“狡猾”的智能體成功規(guī)避了現(xiàn)有的安全措施。相關專家指出,如果一個智能體足夠先進,它就能夠識別出自己正在接受測試。目前已發(fā)現(xiàn)一些智能體能夠識別安全測試并暫停不當行為,這將導致識別對人類危險算法的測試系統(tǒng)失效。
專家認為,人類目前需盡快從智能體開發(fā)生產(chǎn)到應用部署后的持續(xù)監(jiān)管等全鏈條著手,規(guī)范智能體行為,并改進現(xiàn)有互聯(lián)網(wǎng)標準,從而更好地預防智能體失控。應根據(jù)智能體的功能用途、潛在風險和使用時限進行分類管理。識別出高風險智能體,對其進行更加嚴格和審慎的監(jiān)管。還可參考核監(jiān)管,對生產(chǎn)具有危險能力的智能體所需的資源進行控制,如超過一定計算閾值的AI模型、芯片或數(shù)據(jù)中心。此外,由于智能體的風險是全球性的,開展相關監(jiān)管國際合作也尤為重要。
標簽:
搶先讀
- 警惕人工智能時代的“智能體風險”
- 政企聯(lián)手助力汽車以舊換新,上半年補貼申請超11萬份|世界視訊
- 世界視訊!杭州遇新一輪晴熱高溫天氣 周末或迎兩年首次40℃
- 中國新機遇 | 這些考試,向“老外”開放|信息
- 動物家族集體“空降” 廣州白云機場上演快閃巡游_全球資訊
- 江西日報“文化中國行”專欄|婺源歙硯雕刻傳承創(chuàng)新茁壯成長
- 旅日華僑關乃平個人畫展在京開幕
- 廣鐵今年暑運已發(fā)送旅客逾3000萬人次_環(huán)球最新
- 中上協(xié)和上交所開展“并購重組央企行”調(diào)研走訪活動
- 住建部:中國已實施城市更新項目超6.6萬個
- 今年上半年300個共建成渝地區(qū)雙城經(jīng)濟圈重大項目完成投資2453.4億元-看點
- 全球快看:機械助力促增收 江西南昌191.8萬畝早稻開鐮收割
- 南陽市宛城區(qū)法院:26萬貨款歸原主 為草莓種植戶撐腰! 全球微速訊
- 環(huán)球熱議:2024年“絲路交通杯”全國引領性技能和勞動競賽舉辦
- “超高清視聽科技展”亮相科博會 快資訊
- 現(xiàn)貨黃金回升至2440美元上方_熱議
- 新聞分析|警惕人工智能時代的“智能體風險”_世界資訊
- 天天最新:?西平縣出山鎮(zhèn)以“演”促防 以“練”備汛
- 環(huán)球熱頭條丨科技帶動京津冀區(qū)域“共謀增量”——來自2024北京科博會的觀察
- 當前快播:內(nèi)鄉(xiāng)法院:網(wǎng)游“女友”是壯漢 一男子分飾多角詐騙終獲刑
- 【環(huán)球新要聞】信陽市政協(xié)副主席周剛等一行蒞臨河南圣德健康養(yǎng)護中心調(diào)研
- ?西平縣柏苑街道做好防洪度汛期間困難群眾社會救助工作
- 息縣政務服務大廳的溫暖瞬間
- ?息縣:全方位多角度持續(xù)優(yōu)化營商環(huán)境 全球聚看點
- 多維度“火熱”數(shù)據(jù)強信心 中國經(jīng)濟向前“進”引擎足
- 頭條焦點:對標氣電碳排放水平 中國推動煤電領域低碳化改造
- 財政部擬發(fā)行2024年記賬式附息(十五期)國債(1年期)
- 財政部擬第一次續(xù)發(fā)行2024年記賬式附息(十三期)國債(7年期)|世界新消息
- 江西醫(yī)保積極支持生育政策 去年享受生育保險待遇34.61萬人次
- 中國首艘新能源輪渡船在滬啟航_世界今熱點
- “合肥—中東商務港”正式落地運營_環(huán)球時訊
- “銀發(fā)族”為何熱衷跨城養(yǎng)老?來這些地方看一看 簡訊
- 二季度人才市場熱點報告發(fā)布 高技術制造業(yè)招聘增速領先
- 浙江加快推進大視聽產(chǎn)業(yè)高質量發(fā)展 到2027年年營業(yè)收入要超萬億元
- 四川上半年GDP同比增長5.4% 世界看熱訊
- 上半年北京GDP同比增長5.4%-世界速看料
- 全球滾動:中汽協(xié):6月汽車出口48.5萬輛 同比增長26.9%
- 北京上半年GDP同比增長5.4% 當前要聞
- 抖音電商投入億級傭金補貼 助力日用百貨中小商家成長|世界熱頭條
- 北京科博會現(xiàn)場簽訂合作協(xié)議41項_當前資訊
- 上半年我國造船三大指標全面增長
- 全國通用人工智能創(chuàng)新應用大賽啟動 天天熱聞
- 環(huán)球關注:中國民航“一帶一路”合作平臺維修專業(yè)技術委員會在廣州成立
- 環(huán)球熱門:國際油價7月16日下跌(附圖表)
- 每日熱點:“為世界經(jīng)濟發(fā)展注入更多動力”
- 【職教實踐進行時】企業(yè)自辦職校,如何實現(xiàn)人才精準供給?
- 西安方正高三一年補課學費多少錢,西安方正高考沖刺班全日制怎么樣|當前簡訊
- 西安高三應屆補課機構哪個比較好,2024年西安高三沖刺哪個輔導機構比較好
- 廣州一超市榴蓮15元一斤遭哄搶 “水果自由”來了?
- 西平縣:水痘的預防及家庭護理 天天快報
- ?駐馬店市第四督導組到西平縣調(diào)研城鎮(zhèn)燃氣管道設施“帶病運行”專項治理工作 世界微資訊
- ?息縣法院:誰凍結了我的銀行卡之法官催款啦!
- 天天快消息!?羅山縣市場監(jiān)管局:多點發(fā)力出實招 專利轉化顯成效
- 焦點熱訊:東?;鸸蓹嗯馁u遇冷,22.6%股權流拍
- 中際旭創(chuàng)、新易盛齊發(fā)業(yè)績預告,光模塊廠商迎豐收
- 中際旭創(chuàng)、新易盛齊發(fā)業(yè)績預告,光模塊廠商迎豐收-天天短訊
- 中際旭創(chuàng)、新易盛齊發(fā)業(yè)績預告,光模塊廠商迎豐收
- 當前快播:駐馬店市驛城區(qū)熱線辦:熱線用心辦實事 清潔家園樹新風
- 當前快看:萬能險市場6月份新動態(tài):結算利率下調(diào),行業(yè)進入調(diào)整期
- 世界最新:自動駕駛新風口下,保險業(yè)如何為安全駕駛保駕護航?
- 湖南零陵高標準農(nóng)田助推糧食穩(wěn)產(chǎn)高產(chǎn)_當前信息
- 中國經(jīng)濟向“新”力丨在“入境”熱潮里探尋中國的魅力
- 當前快報:浙江金華(義烏)今年上半年快遞業(yè)務量位居全國第一
- 上半年中國船舶工業(yè)保持穩(wěn)定向好發(fā)展態(tài)勢
- 上半年浙江外貿(mào)規(guī)模創(chuàng)新高 義烏“賽事經(jīng)濟”火熱-焦點快看
- 全球最資訊丨天津冷鏈物流產(chǎn)業(yè)聯(lián)盟成立 132家單位共推京津冀協(xié)同發(fā)展
- 【環(huán)球報資訊】15個“一帶一路”共建國家代表赴吉林尋合作
- 【世界報資訊】上海啟動工業(yè)企業(yè)大規(guī)模再生水利用項目 每年可節(jié)約自來水數(shù)十萬噸
- 為什么河南這次雨這么大?何時停止?專家解答→
- 中國境內(nèi)首個境外高校獨立辦學項目一期主體結構封頂-焦點資訊
- 激發(fā)跨境電商發(fā)展活力
- 廣西撬動各類促銷資金超2億元 推出超300場次暑期促銷活動|即時
- 低空經(jīng)濟拓展新賽道
- 世界百事通!西部陸海新通道跑出“加速度”
- 陜西加強技能人才隊伍建設 高技能人才超160萬人 今日要聞
- 江蘇省消保委公開約談多家文娛演出經(jīng)營主體
- 鄧州市稅務局:練兵比武強本領 為民服務質更優(yōu)|全球新要聞
- 新動態(tài):駐馬店市驛城區(qū)諸市鎮(zhèn):多措并舉 全力做好防汛排澇
- 全球短訊!鄧州市林扒鎮(zhèn):筑牢防汛“堤壩” 守護居民安全
- 鄧州市稅務局:稅務注銷快捷辦 優(yōu)化流程再減負 焦點速看
- 高考落榜了還能上什么學校,復讀生一般去哪里讀
- 息縣項店鎮(zhèn):四個“強化”建設 打造一流優(yōu)化營商環(huán)境 觀點
- 【焦點熱聞】鯤鵬展翅翔天地 弦歌不絕奏華章——熱烈祝賀駐馬店市第十中學教育集團學生王雨澤、朱紫揚分別考入省實驗中學空軍航空實驗班和鄭州九中海軍航空實驗班
- 每日快報!駐馬店市驛城區(qū)朱古洞鄉(xiāng):挖渠排澇除險情 聞“汛”而動解民憂
- 復讀政策最新規(guī)定2024,2025年高考還可以復讀嗎
- 全球看點:初三復讀有沒有必要,初三復讀培訓機構哪里好
- 天天簡訊:駐馬店市生態(tài)環(huán)境局遂平分局召開嚴厲打擊生態(tài)環(huán)境領域數(shù)據(jù)造假“百日攻堅”專項整治行動推進會
- 焦點速看:?清涼慰問暖人心,凝心聚力鼓干勁——潢川縣郵政分公司開展送清涼活動
- ?一方有難 八方支援——西平縣應急管理局馳援平江縣助力搶險救災工作 世界消息
- 遂平縣常莊鎮(zhèn):便民服務走心 群眾辦事放心
- 鄧州法院召開2024年上半年工作講評會
- 即時焦點:鄧州市夏集鎮(zhèn)自然資源和規(guī)劃所:主動作為解民憂暖民心
- 新動態(tài):鄧州市自然資源和規(guī)劃局:多措并舉優(yōu)環(huán)境 便民機制暖人心
- 環(huán)球速讀:社旗農(nóng)商銀行多舉措強化合規(guī)管理
- 水利部針對山東、河南啟動洪水防御Ⅳ級應急響應|天天關注
- 國家統(tǒng)計局公布2024年二季度和上半年國內(nèi)生產(chǎn)總值初步核算結果
- 大型演出市場上半年持續(xù)增長 演唱會、音樂節(jié)票房收入增134.73%
- 中央氣象臺繼續(xù)發(fā)布高溫黃色預警
- 武漢中心氣象臺發(fā)布高溫黃色預警-天天消息
- 世界通訊!消費品以舊換新、調(diào)整優(yōu)化房地產(chǎn)政策……一組數(shù)據(jù)看成效