> 自媒体 > (AI)人工智能 > 电厂 | OpenAI 闹剧中被忽略的一部分——AI对齐
电厂 | OpenAI 闹剧中被忽略的一部分——AI对齐
来源:电厂
2023-12-12 14:59:40
598
管理

与此同时,Sam Altman 带着 GPT 进化,连续推动发布性能更强的 GPT 版本。

可以看到,两个工作团队即使不存在分歧,至少也存在张力,裂缝可能从这里开始产生。

Ilya Sutskever 指责 Sam Altman 在与董事会的沟通中始终不坦诚,阻碍了董事会履行职责的能力。而董事会的职责是确保 OpenAI 作为一家非营利组织能够开发造福全人类的「通用人工智能 AGI」。

在今年仅剩 6 人的董事会中,有 4 人更认可 AI 安全的重要性,Ilya Sutskever 因此能够使用投票权开除 Sam Altman。

Ilya Sutskever 曾提到,他参与创建 OpenAI 的动机之一,是为了探讨和解决 AGI 可能带来的问题,包括技术和道德方面的挑战。当他看到或者被告知这种挑战首先出现在公司内部而不是 AI 当中时,他有理由为了自己的信念行使权力,裂缝由此扩大。

可他始终没有给出具体的例证说明 Sam Altman 不坦诚在哪里,会带来哪些后果。Ilya Sutskever 挑起的风波就像 AI 对齐工作中被拿走的「对齐税」,他暂时限制了 OpenAI 的能力,又无法说明在他眼中这种限制的必要性。

房间里有一头大象,有少数人看到了,但只有更少数人行动。人们要做出符合自身角色和价值观的选择,因此分歧总是会不可避免地出现。

即便 Sam Altman 在很多时候是 OpenAI 安全政策的倡导者,但人们无法追问他的倡导是出于应对监管的需要,还是他真的看到了那头大象。即便 Ilya Sutskever 深知算力对 AI 的重要性,看到 AI 更远的未来的他只能把这种重要性放在价值排序的次席。

事件最后的焦点指向 OpenAI 的董事会,在复杂的矛盾中,董事会只支持做出 0 和 1 的选择,在功能上没有与这家公司的价值对齐。

闹剧以 Sam Altman 回归暂时结束,五天前罢免他的董事会解散,新的董事会雏形将由三人组成,Quora 首席执行官 Adam D'Angelo,Facebook 和 Salesforce 前高管 Bret Taylor,以及前美国财政部长 Lawrence H. Summers。

OpenAI 完成了它的对齐。

低垂的果实

AI 能力的「涌现」来自于训练量,扩大训练规模成了玩家们坚信的方向,结果是天文数字的训练成本投入。

GPT-3 把大模型训练参数提高到千亿规模,开启了大模型训练的规模竞赛。百度文心、阿里通义、华为盘古等头部公司的大模型训练量都同步来到千亿。而最新的 GPT-4 的参数规模又上一个台阶,到达了百万亿。

却有观点认为,训练规模给大模型带来的边际效益呈递减趋势,有人称为「数字泡沫」或者「AI 版摩尔定律」,在一定程度,AI 对齐工作成果支持了这种观点。

OpenAI 在博客中提到:安全与大模型能力息息相关。一方面强调在 AI 进化过程中安全问题的重要性。另一方面也指出,AI 对齐训练是提升 AI 能力的隐藏路径。

后一种情况在 InstructGPT 当中得到了验证。与 GPT-3 相比,经过对齐的 InstructGPT 在输出结果时更符合人类要求,InstructGPT 减少了生成有害内容的情况,也能给出更多真实可靠性的信息。

不仅如此,InstructGPT 比 GPT-3 使用更少的算力,它的训练参数减少了 100 多倍,仅 13 亿规模。

经历 OpenAI 的闹剧,赛道上的玩家或许会认识到,把所有的成本放在算力和规模之上过于奢侈,在追求超大规模、超高算力的路上存在未被发现的低垂的果实。

而面对将到来的淘汰赛,不同玩家将必须在 Ilya Sutskever 和 Sam Altman 之间选边站。

0
点赞
赏礼
赏钱
0
收藏
免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本网证实,对本文以及其中全部或者 部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。 凡本网注明 “来源:XXX(非本站)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对 其真实性负责。 如因作品内容、版权和其它问题需要同本网联系的,请在一周内进行,以便我们及时处理。 QQ:617470285 邮箱:617470285@qq.com
相关文章
微信又上线新功能,聊天突然变了!
近日,微信突然因内测“访客记录”功能,引发全网关注。被内测到的用户,..
元宝可以总结微信聊天记录了
作者 | 黄昱元宝终于拆掉了微信最高的围墙。5月13日,腾讯旗下AI原生应用..
刚刚,微信聊天记录能喂给AI了!我让它爬楼、砍价、整理信息..
智东西作者 | 陈骏达编辑 | 心缘智东西5月13日报道,今天,腾讯宣布,微..
微信聊天出新功能了,快试试!
但要求你的手机安装有元宝App,这时就会跳转到元宝中进行粘贴,你可以发..
不用登你的微信,也能看到你的聊天记录!这几个地方一定赶紧删除..
你知道吗?其实不用登你的微信,也能看到你的聊天记录,是不是太可怕了?..
刚刚,微信聊天记录能喂给AI了,我让它爬楼、砍价、整理信息..
智东西5月13日报道,今天,腾讯宣布,微信已经支持将消息一键转发至元宝..
聊天总把天聊死?这7个雷区,你可能正在踩。如何正确和女生聊天..
明明聊得火热,为什么突然被拉黑?你可能踩中了这七个聊天雷区“在吗?”..
用ChatGPT看病,80%误诊:AI医生的9秒奇迹和80%的残酷真相..
9秒出CT报告,1分钟完成心脏诊断——AI医疗看起来像魔法。但哈佛刚说完:..
突发!OpenAI高层巨震,ChatGPT与CodeX或合并,超级AI来了!..
根据《连线》5 月 15 日的独家报道,在最新一轮组织调整中,OpenAI 总裁 ..
关于作者
感恩的人(普通会员)
文章
2007
关注
0
粉丝
0
点击领取今天的签到奖励!
签到排行

成员 网址收录40418 企业收录2986 印章生成263660 电子证书1157 电子名片68 自媒体110233

0
0
分享
请选择要切换的马甲:

个人中心

每日签到

我的消息

内容搜索