警惕人工智能時(shí)代的“智能體風(fēng)險(xiǎn)”
智能體是人工智能(AI)領(lǐng)域中的一個(gè)重要概念,是指能夠自主感知環(huán)境、做出決策并執(zhí)行行動(dòng)的智能實(shí)體,它可以是一個(gè)程序、一個(gè)系統(tǒng)或是一個(gè)機(jī)器人。
智能體的核心是人工智能算法,包括機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、強(qiáng)化學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)等技術(shù)。通過(guò)這些算法,智能體可以從大量數(shù)據(jù)中學(xué)習(xí)并改進(jìn)自身的性能,不斷優(yōu)化自己的決策和行為。智能體還可根據(jù)環(huán)境變化做出靈活的調(diào)整,適應(yīng)不同的場(chǎng)景和任務(wù)。
(資料圖片)
學(xué)界認(rèn)為,智能體一般具有以下三大特質(zhì):
第一,可根據(jù)目標(biāo)獨(dú)立采取行動(dòng),即自主決策。智能體可以被賦予一個(gè)高級(jí)別甚至模糊的目標(biāo),并獨(dú)立采取行動(dòng)實(shí)現(xiàn)該目標(biāo)。
第二,可與外部世界互動(dòng),自如地使用不同的軟件工具。比如基于GPT-4的智能體AutoGPT,可以自主地在網(wǎng)絡(luò)上搜索相關(guān)信息,并根據(jù)用戶的需求自動(dòng)編寫(xiě)代碼和管理業(yè)務(wù)。
第三,可無(wú)限期地運(yùn)行。美國(guó)哈佛大學(xué)法學(xué)院教授喬納森·齊特雷恩近期在美國(guó)《大西洋》雜志發(fā)表的《是時(shí)候控制AI智能體》一文指出,智能體允許人類操作員“設(shè)置后便不再操心”。還有專家認(rèn)為,智能體具備可進(jìn)化性,能夠在工作進(jìn)程中通過(guò)反饋逐步自我優(yōu)化,比如學(xué)習(xí)新技能和優(yōu)化技能組合。
以GPT為代表的大語(yǔ)言模型(LLM)的出現(xiàn),標(biāo)志著智能體進(jìn)入批量化生產(chǎn)時(shí)代。此前,智能體需靠專業(yè)的計(jì)算機(jī)科學(xué)人員歷經(jīng)多輪研發(fā)測(cè)試,現(xiàn)在依靠大語(yǔ)言模型就可迅速將特定目標(biāo)轉(zhuǎn)化為程序代碼,生成各式各樣的智能體。而兼具文字、圖片、視頻生成和理解能力的多模態(tài)大模型,也為智能體的發(fā)展創(chuàng)造了有利條件,使它們可以利用計(jì)算機(jī)視覺(jué)“看見(jiàn)”虛擬或現(xiàn)實(shí)的三維世界,這對(duì)于人工智能非玩家角色和機(jī)器人研發(fā)都尤為重要。
智能體可以自主決策,又能通過(guò)與環(huán)境交互施加對(duì)物理世界影響,一旦失控將給人類社會(huì)帶來(lái)極大威脅。哈佛大學(xué)齊特雷恩認(rèn)為,這種不僅能與人交談,還能在現(xiàn)實(shí)世界中行動(dòng)的AI的常規(guī)化,是“數(shù)字與模擬、比特與原子之間跨越血腦屏障的一步”,應(yīng)當(dāng)引起警覺(jué)。
智能體的運(yùn)行邏輯可能使其在實(shí)現(xiàn)特定目標(biāo)過(guò)程中出現(xiàn)有害偏差。齊特雷恩認(rèn)為,在一些情況下,智能體可能只捕捉到目標(biāo)的字面意思,沒(méi)有理解目標(biāo)的實(shí)質(zhì)意思,從而在響應(yīng)某些激勵(lì)或優(yōu)化某些目標(biāo)時(shí)出現(xiàn)異常行為。比如,一個(gè)讓機(jī)器人“幫助我應(yīng)付無(wú)聊的課”的學(xué)生可能無(wú)意中生成了一個(gè)炸彈威脅電話,因?yàn)锳I試圖增添一些刺激。AI大語(yǔ)言模型本身具備的“黑箱”和“幻覺(jué)”問(wèn)題也會(huì)增加出現(xiàn)異常的頻率。
智能體還可指揮人在真實(shí)世界中的行動(dòng)。美國(guó)加利福尼亞大學(xué)伯克利分校、加拿大蒙特利爾大學(xué)等機(jī)構(gòu)專家近期在美國(guó)《科學(xué)》雜志發(fā)表《管理高級(jí)人工智能體》一文稱,限制強(qiáng)大智能體對(duì)其環(huán)境施加的影響是極其困難的。例如,智能體可以說(shuō)服或付錢(qián)給不知情的人類參與者,讓他們代表自己執(zhí)行重要行動(dòng)。齊特雷恩也認(rèn)為,一個(gè)智能體可能會(huì)通過(guò)在社交網(wǎng)站上發(fā)布有償招募令來(lái)引誘一個(gè)人參與現(xiàn)實(shí)中的敲詐案,這種操作還可在數(shù)百或數(shù)千個(gè)城鎮(zhèn)中同時(shí)實(shí)施。
由于目前并無(wú)有效的智能體退出機(jī)制,一些智能體被創(chuàng)造出后可能無(wú)法被關(guān)閉。這些無(wú)法被停用的智能體,最終可能會(huì)在一個(gè)與最初啟動(dòng)它們時(shí)完全不同的環(huán)境中運(yùn)行,徹底背離其最初用途。智能體也可能會(huì)以不可預(yù)見(jiàn)的方式相互作用,造成意外事故。
已有“狡猾”的智能體成功規(guī)避了現(xiàn)有的安全措施。相關(guān)專家指出,如果一個(gè)智能體足夠先進(jìn),它就能夠識(shí)別出自己正在接受測(cè)試。目前已發(fā)現(xiàn)一些智能體能夠識(shí)別安全測(cè)試并暫停不當(dāng)行為,這將導(dǎo)致識(shí)別對(duì)人類危險(xiǎn)算法的測(cè)試系統(tǒng)失效。
專家認(rèn)為,人類目前需盡快從智能體開(kāi)發(fā)生產(chǎn)到應(yīng)用部署后的持續(xù)監(jiān)管等全鏈條著手,規(guī)范智能體行為,并改進(jìn)現(xiàn)有互聯(lián)網(wǎng)標(biāo)準(zhǔn),從而更好地預(yù)防智能體失控。應(yīng)根據(jù)智能體的功能用途、潛在風(fēng)險(xiǎn)和使用時(shí)限進(jìn)行分類管理。識(shí)別出高風(fēng)險(xiǎn)智能體,對(duì)其進(jìn)行更加嚴(yán)格和審慎的監(jiān)管。還可參考核監(jiān)管,對(duì)生產(chǎn)具有危險(xiǎn)能力的智能體所需的資源進(jìn)行控制,如超過(guò)一定計(jì)算閾值的AI模型、芯片或數(shù)據(jù)中心。此外,由于智能體的風(fēng)險(xiǎn)是全球性的,開(kāi)展相關(guān)監(jiān)管?chē)?guó)際合作也尤為重要。
標(biāo)簽:
搶先讀
- 警惕人工智能時(shí)代的“智能體風(fēng)險(xiǎn)”
- 政企聯(lián)手助力汽車(chē)以舊換新,上半年補(bǔ)貼申請(qǐng)超11萬(wàn)份|世界視訊
- 世界視訊!杭州遇新一輪晴熱高溫天氣 周末或迎兩年首次40℃
- 中國(guó)新機(jī)遇 | 這些考試,向“老外”開(kāi)放|信息
- 動(dòng)物家族集體“空降” 廣州白云機(jī)場(chǎng)上演快閃巡游_全球資訊
- 江西日?qǐng)?bào)“文化中國(guó)行”專欄|婺源歙硯雕刻傳承創(chuàng)新茁壯成長(zhǎng)
- 旅日華僑關(guān)乃平個(gè)人畫(huà)展在京開(kāi)幕
- 廣鐵今年暑運(yùn)已發(fā)送旅客逾3000萬(wàn)人次_環(huán)球最新
- 中上協(xié)和上交所開(kāi)展“并購(gòu)重組央企行”調(diào)研走訪活動(dòng)
- 住建部:中國(guó)已實(shí)施城市更新項(xiàng)目超6.6萬(wàn)個(gè)
- 今年上半年300個(gè)共建成渝地區(qū)雙城經(jīng)濟(jì)圈重大項(xiàng)目完成投資2453.4億元-看點(diǎn)
- 全球快看:機(jī)械助力促增收 江西南昌191.8萬(wàn)畝早稻開(kāi)鐮收割
- 南陽(yáng)市宛城區(qū)法院:26萬(wàn)貨款歸原主 為草莓種植戶撐腰! 全球微速訊
- 環(huán)球熱議:2024年“絲路交通杯”全國(guó)引領(lǐng)性技能和勞動(dòng)競(jìng)賽舉辦
- “超高清視聽(tīng)科技展”亮相科博會(huì) 快資訊
- 現(xiàn)貨黃金回升至2440美元上方_熱議
- 新聞分析|警惕人工智能時(shí)代的“智能體風(fēng)險(xiǎn)”_世界資訊
- 天天最新:?西平縣出山鎮(zhèn)以“演”促防 以“練”備汛
- 環(huán)球熱頭條丨科技帶動(dòng)京津冀區(qū)域“共謀增量”——來(lái)自2024北京科博會(huì)的觀察
- 當(dāng)前快播:內(nèi)鄉(xiāng)法院:網(wǎng)游“女友”是壯漢 一男子分飾多角詐騙終獲刑
- 【環(huán)球新要聞】信陽(yáng)市政協(xié)副主席周剛等一行蒞臨河南圣德健康養(yǎng)護(hù)中心調(diào)研
- ?西平縣柏苑街道做好防洪度汛期間困難群眾社會(huì)救助工作
- 息縣政務(wù)服務(wù)大廳的溫暖瞬間
- ?息縣:全方位多角度持續(xù)優(yōu)化營(yíng)商環(huán)境 全球聚看點(diǎn)
- 多維度“火熱”數(shù)據(jù)強(qiáng)信心 中國(guó)經(jīng)濟(jì)向前“進(jìn)”引擎足
- 頭條焦點(diǎn):對(duì)標(biāo)氣電碳排放水平 中國(guó)推動(dòng)煤電領(lǐng)域低碳化改造
- 財(cái)政部擬發(fā)行2024年記賬式附息(十五期)國(guó)債(1年期)
- 財(cái)政部擬第一次續(xù)發(fā)行2024年記賬式附息(十三期)國(guó)債(7年期)|世界新消息
- 江西醫(yī)保積極支持生育政策 去年享受生育保險(xiǎn)待遇34.61萬(wàn)人次
- 中國(guó)首艘新能源輪渡船在滬啟航_世界今熱點(diǎn)
- “合肥—中東商務(wù)港”正式落地運(yùn)營(yíng)_環(huán)球時(shí)訊
- “銀發(fā)族”為何熱衷跨城養(yǎng)老?來(lái)這些地方看一看 簡(jiǎn)訊
- 二季度人才市場(chǎng)熱點(diǎn)報(bào)告發(fā)布 高技術(shù)制造業(yè)招聘增速領(lǐng)先
- 浙江加快推進(jìn)大視聽(tīng)產(chǎn)業(yè)高質(zhì)量發(fā)展 到2027年年?duì)I業(yè)收入要超萬(wàn)億元
- 四川上半年GDP同比增長(zhǎng)5.4% 世界看熱訊
- 上半年北京GDP同比增長(zhǎng)5.4%-世界速看料
- 全球滾動(dòng):中汽協(xié):6月汽車(chē)出口48.5萬(wàn)輛 同比增長(zhǎng)26.9%
- 北京上半年GDP同比增長(zhǎng)5.4% 當(dāng)前要聞
- 抖音電商投入億級(jí)傭金補(bǔ)貼 助力日用百貨中小商家成長(zhǎng)|世界熱頭條
- 北京科博會(huì)現(xiàn)場(chǎng)簽訂合作協(xié)議41項(xiàng)_當(dāng)前資訊
- 上半年我國(guó)造船三大指標(biāo)全面增長(zhǎng)
- 全國(guó)通用人工智能創(chuàng)新應(yīng)用大賽啟動(dòng) 天天熱聞
- 環(huán)球關(guān)注:中國(guó)民航“一帶一路”合作平臺(tái)維修專業(yè)技術(shù)委員會(huì)在廣州成立
- 環(huán)球熱門(mén):國(guó)際油價(jià)7月16日下跌(附圖表)
- 每日熱點(diǎn):“為世界經(jīng)濟(jì)發(fā)展注入更多動(dòng)力”
- 【職教實(shí)踐進(jìn)行時(shí)】企業(yè)自辦職校,如何實(shí)現(xiàn)人才精準(zhǔn)供給?
- 西安方正高三一年補(bǔ)課學(xué)費(fèi)多少錢(qián),西安方正高考沖刺班全日制怎么樣|當(dāng)前簡(jiǎn)訊
- 西安高三應(yīng)屆補(bǔ)課機(jī)構(gòu)哪個(gè)比較好,2024年西安高三沖刺哪個(gè)輔導(dǎo)機(jī)構(gòu)比較好
- 廣州一超市榴蓮15元一斤遭哄搶 “水果自由”來(lái)了?
- 西平縣:水痘的預(yù)防及家庭護(hù)理 天天快報(bào)
- ?駐馬店市第四督導(dǎo)組到西平縣調(diào)研城鎮(zhèn)燃?xì)夤艿涝O(shè)施“帶病運(yùn)行”專項(xiàng)治理工作 世界微資訊
- ?息縣法院:誰(shuí)凍結(jié)了我的銀行卡之法官催款啦!
- 天天快消息!?羅山縣市場(chǎng)監(jiān)管局:多點(diǎn)發(fā)力出實(shí)招 專利轉(zhuǎn)化顯成效
- 焦點(diǎn)熱訊:東?;鸸蓹?quán)拍賣(mài)遇冷,22.6%股權(quán)流拍
- 中際旭創(chuàng)、新易盛齊發(fā)業(yè)績(jī)預(yù)告,光模塊廠商迎豐收
- 中際旭創(chuàng)、新易盛齊發(fā)業(yè)績(jī)預(yù)告,光模塊廠商迎豐收-天天短訊
- 中際旭創(chuàng)、新易盛齊發(fā)業(yè)績(jī)預(yù)告,光模塊廠商迎豐收
- 當(dāng)前快播:駐馬店市驛城區(qū)熱線辦:熱線用心辦實(shí)事 清潔家園樹(shù)新風(fēng)
- 當(dāng)前快看:萬(wàn)能險(xiǎn)市場(chǎng)6月份新動(dòng)態(tài):結(jié)算利率下調(diào),行業(yè)進(jìn)入調(diào)整期
- 世界最新:自動(dòng)駕駛新風(fēng)口下,保險(xiǎn)業(yè)如何為安全駕駛保駕護(hù)航?
- 湖南零陵高標(biāo)準(zhǔn)農(nóng)田助推糧食穩(wěn)產(chǎn)高產(chǎn)_當(dāng)前信息
- 中國(guó)經(jīng)濟(jì)向“新”力丨在“入境”熱潮里探尋中國(guó)的魅力
- 當(dāng)前快報(bào):浙江金華(義烏)今年上半年快遞業(yè)務(wù)量位居全國(guó)第一
- 上半年中國(guó)船舶工業(yè)保持穩(wěn)定向好發(fā)展態(tài)勢(shì)
- 上半年浙江外貿(mào)規(guī)模創(chuàng)新高 義烏“賽事經(jīng)濟(jì)”火熱-焦點(diǎn)快看
- 全球最資訊丨天津冷鏈物流產(chǎn)業(yè)聯(lián)盟成立 132家單位共推京津冀協(xié)同發(fā)展
- 【環(huán)球報(bào)資訊】15個(gè)“一帶一路”共建國(guó)家代表赴吉林尋合作
- 【世界報(bào)資訊】上海啟動(dòng)工業(yè)企業(yè)大規(guī)模再生水利用項(xiàng)目 每年可節(jié)約自來(lái)水?dāng)?shù)十萬(wàn)噸
- 為什么河南這次雨這么大?何時(shí)停止?專家解答→
- 中國(guó)境內(nèi)首個(gè)境外高校獨(dú)立辦學(xué)項(xiàng)目一期主體結(jié)構(gòu)封頂-焦點(diǎn)資訊
- 激發(fā)跨境電商發(fā)展活力
- 廣西撬動(dòng)各類促銷(xiāo)資金超2億元 推出超300場(chǎng)次暑期促銷(xiāo)活動(dòng)|即時(shí)
- 低空經(jīng)濟(jì)拓展新賽道
- 世界百事通!西部陸海新通道跑出“加速度”
- 陜西加強(qiáng)技能人才隊(duì)伍建設(shè) 高技能人才超160萬(wàn)人 今日要聞
- 江蘇省消保委公開(kāi)約談多家文娛演出經(jīng)營(yíng)主體
- 鄧州市稅務(wù)局:練兵比武強(qiáng)本領(lǐng) 為民服務(wù)質(zhì)更優(yōu)|全球新要聞
- 新動(dòng)態(tài):駐馬店市驛城區(qū)諸市鎮(zhèn):多措并舉 全力做好防汛排澇
- 全球短訊!鄧州市林扒鎮(zhèn):筑牢防汛“堤壩” 守護(hù)居民安全
- 鄧州市稅務(wù)局:稅務(wù)注銷(xiāo)快捷辦 優(yōu)化流程再減負(fù) 焦點(diǎn)速看
- 高考落榜了還能上什么學(xué)校,復(fù)讀生一般去哪里讀
- 息縣項(xiàng)店鎮(zhèn):四個(gè)“強(qiáng)化”建設(shè) 打造一流優(yōu)化營(yíng)商環(huán)境 觀點(diǎn)
- 【焦點(diǎn)熱聞】鯤鵬展翅翔天地 弦歌不絕奏華章——熱烈祝賀駐馬店市第十中學(xué)教育集團(tuán)學(xué)生王雨澤、朱紫揚(yáng)分別考入省實(shí)驗(yàn)中學(xué)空軍航空實(shí)驗(yàn)班和鄭州九中海軍航空實(shí)驗(yàn)班
- 每日快報(bào)!駐馬店市驛城區(qū)朱古洞鄉(xiāng):挖渠排澇除險(xiǎn)情 聞“汛”而動(dòng)解民憂
- 復(fù)讀政策最新規(guī)定2024,2025年高考還可以復(fù)讀嗎
- 全球看點(diǎn):初三復(fù)讀有沒(méi)有必要,初三復(fù)讀培訓(xùn)機(jī)構(gòu)哪里好
- 天天簡(jiǎn)訊:駐馬店市生態(tài)環(huán)境局遂平分局召開(kāi)嚴(yán)厲打擊生態(tài)環(huán)境領(lǐng)域數(shù)據(jù)造假“百日攻堅(jiān)”專項(xiàng)整治行動(dòng)推進(jìn)會(huì)
- 焦點(diǎn)速看:?清涼慰問(wèn)暖人心,凝心聚力鼓干勁——潢川縣郵政分公司開(kāi)展送清涼活動(dòng)
- ?一方有難 八方支援——西平縣應(yīng)急管理局馳援平江縣助力搶險(xiǎn)救災(zāi)工作 世界消息
- 遂平縣常莊鎮(zhèn):便民服務(wù)走心 群眾辦事放心
- 鄧州法院召開(kāi)2024年上半年工作講評(píng)會(huì)
- 即時(shí)焦點(diǎn):鄧州市夏集鎮(zhèn)自然資源和規(guī)劃所:主動(dòng)作為解民憂暖民心
- 新動(dòng)態(tài):鄧州市自然資源和規(guī)劃局:多措并舉優(yōu)環(huán)境 便民機(jī)制暖人心
- 環(huán)球速讀:社旗農(nóng)商銀行多舉措強(qiáng)化合規(guī)管理
- 水利部針對(duì)山東、河南啟動(dòng)洪水防御Ⅳ級(jí)應(yīng)急響應(yīng)|天天關(guān)注
- 國(guó)家統(tǒng)計(jì)局公布2024年二季度和上半年國(guó)內(nèi)生產(chǎn)總值初步核算結(jié)果
- 大型演出市場(chǎng)上半年持續(xù)增長(zhǎng) 演唱會(huì)、音樂(lè)節(jié)票房收入增134.73%
- 中央氣象臺(tái)繼續(xù)發(fā)布高溫黃色預(yù)警
- 武漢中心氣象臺(tái)發(fā)布高溫黃色預(yù)警-天天消息
- 世界通訊!消費(fèi)品以舊換新、調(diào)整優(yōu)化房地產(chǎn)政策……一組數(shù)據(jù)看成效