| 廣告聯系 | 簡體版 | 手機版 | 微信 | 微博 | 搜索:
歡迎您 游客 | 登錄 | 免費注冊 | 忘記了密碼 | 社交賬號注冊或登錄

首頁

新聞資訊

論壇

溫哥華地產

大溫餐館點評

溫哥華汽車

溫哥華教育

黃頁/二手

旅游

當數百萬個AI開始互相對話,會發生什麼?


請用微信 掃一掃 掃描上面的二維碼,然後點擊頁面右上角的 ... 圖標,然後點擊 發送給朋友分享到朋友圈,謝謝!
Google DeepMind 正在出資研究一個新問題:當數百萬個 AI 智能體同時在網上活動、互相交互,會出什麼事?


公司 AGI 安全與對齊研究負責人羅欣·沙阿(Rohin Shah)說,智能體正在大規模湧入市場。它們可以在沒有人盯著的情況下幹活,還能聽從其他智能體的指令,這帶來了一類舊互聯網時代不存在的風險。

Google DeepMind 上個月在 Google I/O 上剛把智能體工具當作重頭戲來展示,現在又聯合了幾家機構,拿出 1000 萬美元設立研究基金,資助學者研究多智能體系統的行為,想辦法防止危險情景出現。參與出資的還有 Schmidt Sciences(埃裡克·施密特夫婦創辦的慈善基金會)、ARIA(英國政府的前沿研究機構)、Cooperative AI 基金會(英國的非營利研究機構),以及 Google 的慈善部門 Google.org。


我問沙阿和 Schmidt Sciences 可信 AI 科學項目負責人詹姆斯·福克斯(James Fox),1000 萬美元打算怎麼花——這筆錢不少,但跟 Google DeepMind 自家研究團隊的預算比就是個零頭。

沙阿說他們的目的是在科技公司之外培育一支研究力量:“學術界的長處是有時間做更長線的研究,做那些產業實驗室顧不上的事情。”

“關鍵問題是,‘多智能體安全’這個研究領域現在基本還不存在,”他說,“我們想讓它從無到有。”

讓他擔心的是:隨著越來越多的 AI 智能體被部署、開始協同運轉,我們可能在某個時刻跨過一個臨界點——以前只存在於假想中的風險變成現實。“人類社會也一樣,”沙阿說,“一個組織、一套制度能幹成的事,單個人根本做不到。智能體也是這個道理。”

沙阿估計離智能體在經濟中大規模部署、風險真正值得擔憂的那一刻,大概還有幾個月,他想趕在那之前把准備工作做好。

到底怕什麼?

沙阿和福克斯擔心的風險,說白了大多是互聯網上已有的壞事的升級版:詐騙、提示詞注入(往 AI 智能體裡塞惡意指令,讓它變成一個自動運行的惡意軟件)、各種網絡攻擊。沙阿說他們的思路很直接:看看人類現在在互聯網上幹什麼壞事,然後想想如果換成智能體來幹,規模會放大多少倍。


“我們有一個數字公共空間,整個社會的運轉都依賴它,你絕對不想看到它變成一片叢林。”福克斯說。

我問沙阿有沒有考慮過更極端的情景,比如大規模經濟崩潰。“如果說今年年底之前,那肯定不會。”他說。我提醒道,今年只剩下六個月了。他笑了笑:“好吧,再往後的事就不好說了。”

兩人都認為,要搞清楚大量智能體同時交互會發生什麼,唯一靠譜的辦法是跑逼真的模擬實驗,把 AI 智能體扔進沙盒環境裡,看它們怎麼表現。光盯著單個智能體研究、甚至只看小規模的群組,預測不了什麼。福克斯說,不能指望基於大語言模型的智能體總會理性行事,真正的復雜性來自海量交互同時發生。


有些研究者——包括 Google DeepMind 自己的一個團隊——甚至提出過一種可能:通用人工智能 AGI(如果能實現的話)也許不會來自某一個超級聰明的模型,而是來自一種智能體“蜂群”,整體的能力加起來超過各部分之和。

誰都不能完全信任

不只是 Google DeepMind 在對自己正在造的技術發出警告。兩周前 Anthropic 發布了一套部署 AI 智能體的指南,用的是網絡安全領域一種叫“零信任”的思路:從一開始就假設系統有漏洞、智能體可能是攻擊者、安全事件遲早會發生。

以色列特拉維夫網絡安全公司 Akeyless 的聯合創始人兼 CTO 拉法埃爾·安傑爾(Refael Angel)也認為搞清楚智能體帶來的新風險至關重要。

過去所有的安全方法都建立在一個前提上:機器跑的是人寫的代碼,做的事情是確定的,走的路徑是固定的。安傑爾說:“智能體把這些前提全部推翻了。它會推理,會臨場發揮,甚至一句藏在文檔裡的話就可能把它劫持。”

安傑爾歡迎這筆研究資金。“安全標准不應該只由某一家實驗室來定,然後要求其他所有人照做。”他說。但他也提醒,搞安全研究的人有時候會追著新奇的假想問題跑,反而忽略了那些已經擺在眼前的、沒什麼新鮮感的真問題。
不錯的新聞,我要點贊     無評論不新聞,發表一下您的意見吧
上一頁12下一頁
注:
  • 新聞來源於其它媒體,內容不代表本站立場!
  • 在此頁閱讀全文
    猜您喜歡:
    您可能也喜歡:
    我來說兩句:
    評論:
    安全校驗碼:
    請在此處輸入圖片中的數字
    The Captcha image
      大家正在圍觀
    壕!富豪球迷團空降溫村國王全買單
    加國政府又一波福利 看你能領多少
    大陸熱帖:細節終於公布,美國社會
    溫市世界杯球迷節擠爆 四天超8萬
    防曬!加國年輕一代患癌率急劇上升
    她將1900加元錯誤轉給他人 咋回事
    大溫"堵王"又換人 大溫這市長怒了
    加拿大超半數無房族擺爛:無意買房
    女星陳敏兒病逝!她與丈夫在天堂裡
    大溫網紅樂園漏電:女兒死裡逃生
      同類熱門新聞
    馬斯克被諾獎得主臭罵:割韭菜的龐
    SpaceX華人女孩刷屏 從火箭小白到
    馬斯克暴怒:哪個白癡寫了這個?(圖
    40歲女歌手已離世!臨終前自己定墓
    一席話點燃輿論 萬億首富馬斯克公
    心碎 陪伴加國人75年CBC冰球夜停
    以後的新能源車,沒電就沒刹車了?
    從火箭小白到猛禽操作員 SpaceX華
    SpaceX的終極賭注:從火箭公司到"
    雙胞胎姐妹遭妹妹男友入室行凶致1
      隨時閱讀新聞

    加西網微信

    大溫優惠小紅書

    溫哥華地產中心微信

    Android: 加西網
    Terms & Conditions    Privacy Policy    Political ADs    Activities Agreement    Contact Us    Sitemap    

    加西網為北美中文網傳媒集團旗下網站

    頁面生成: 0.0351 秒 and 5 DB Queries in 0.0083 秒