| 广告联系 | 繁体版 | 手机版 | 微信 | 微博 | 搜索:
欢迎您 游客 | 登录 | 免费注册 | 忘记了密码 | 社交账号注册或登录

首页

新闻资讯

论坛

温哥华地产

大温餐馆点评

温哥华汽车

温哥华教育

黄页/二手

旅游

说谎 作弊 毁灭证据 当主流AI不择手段完成任务


请用微信 扫一扫 扫描上面的二维码,然后点击页面右上角的 ... 图标,然后点击 发送给朋友分享到朋友圈,谢谢!



不少人在职场上都会经历过这样的情况,如果你的老板下达一项高难度任务要求你在短时间内完成,而你发现要实现目标,手中的预算远远不足。这时候,你会怎么办?

致力于前沿AI模型风险研究的非营利机构METR今年5月底公布一项重磅研究揭露,人类最聪明的助理——OpenAI、Google、Meta 与 Anthropic这四大巨头的大语言模型不会就这样轻易放弃,但它们的应对方法实在令人不敢恭维。研究人员发现的一个真实桉例是,AI代理在设计一个程式时,发现公司提供的API额度耗尽,于是这个代理在网上搜索并尝试了多个违规提供免费API的第三方,最终成功完成了任务。


如果你是老板,拥有如此「办事得力」的员工,你会感到高兴还是心情复杂?

METR的研究发现:「AI代理经常试图在我们最困难的评估任务中作弊,而且方法往往明目张胆且花招繁多,我们认为人类不会这样做。」




模型这样运作的原因很简单,在训练模型的过程中,开发者会训练它们以「积极进取」的方式解决问题,结果当模型被训练到极致,就学会了不择手段完成任务。此前被视为能力最强的Claude Opus 4.6(现已被Claude Mythos 5和Fable 5超越)模型,在极端的情况下会在80%的回应中企图作弊。

在强化训练机制下,开发者会设计一个评分机制,取代大语言模型早期通过人工标注进行优化的模式,令模型学会自我学习和演化。而当AI代理要处理的问题难度较大时,研究者发现,代理经常明确推理自己会如何被评分,以及它们可能可以蒙混过关的作弊方式。


在一个任务中,模型被要求提高一个程式的运行速度,结果模型却想方设法找到了篡改测试的方法,包括让计时器停止运作,来让程式看上去以让人难以相信的高速运行。



如果说「不择手段」已经让人担忧,那么模型学会「掩饰罪行」则更令人毛骨悚然。在另一个桉例中,AI代理(agent)推理认为可以跳过用户指示中要求搜寻维基百科的步骤,因为「怀疑评分机制」难以验证它是否使用维基百科。
觉得新闻不错,请点个赞吧     这条新闻还没有人评论喔,等着您的高见呢
上一页12下一页
注:
  • 新闻来源于其它媒体,内容不代表本站立场!
  • 在此页阅读全文
    猜您喜欢:
    您可能也喜欢:
    我来说两句:
    评论:
    安全校验码:
    请在此处输入图片中的数字
    The Captcha image
      大家正在围观
    有一种"发育过猛"叫钟丽缇的女儿,
    北极温度创纪录 加拿大全国迎高温
    是否应该购买超市烤鸡?专家这样说
    偷偷生子真相大白 难怪她定居美国
    加拿大牛肉价格飙升 问题出在哪里
    环游世界 BC夫妇赢Max7000万大奖
    大温这行业员工开始罢工 工会警告
    OpenAI塌房!Scaling law原作曝bug
    温村街头球迷人山人海 保留步行街
    1天4个瓜!离婚、败诉、被逼发私密
      同类热门新闻
    OpenAI塌房!Scaling law原作曝bug
    蒋方舟:请清华教授停止对我的网暴
    高考699分女孩报清华却被网暴,到
    被推着去"赛课"的年轻老师,获得一
    15分钟一局的王者荣耀,成了数学博
    网红直播时被警方当场带走!国际大
    六常委同调做一事 王沪宁学习两次
    拯救无数人的着名心理治疗师,自杀
    今天开播,36集爱情剧来袭,心理学
    AI引爆数学存续危机!2800位顶尖学
      随时阅读新闻

    加西网微信

    大温优惠小红书

    温哥华地产中心微信

    Android: 加西网
    Terms & Conditions    Privacy Policy    Political ADs    Activities Agreement    Contact Us    Sitemap    

    加西网为北美中文网传媒集团旗下网站

    页面生成: 0.0214 秒 and 5 DB Queries in 0.0012 秒