安大互联
财经热点 > 财经资讯 > OpenAI核心安全团队解散,还签了封口协议!负责人怒斥走错路 - 不再安全第一
【OpenAI】OpenAI核心安全团队解散,还签了封口协议!负责人怒斥走错路 - 不再安全第一
浏览次数:【986】  发布日期:2024-5-20 7:42:40    文章分类:财经资讯   
专题:OpenAI】 【奥特曼】 【人工智能】 【负责人
 

  随着首席科学家伊尔亚的离开,OpenAI核心安全团队“超级对齐”被曝解散。同时,一份“封口协议”又把OpenAI推上风口浪尖。

  5月14日,OpenAI联合开创人、首席科学家伊尔亚·苏茨克维(Ilya Sutskever)宣布离职,几个钟头后,超级对齐团队责任人杨·莱克(Jan Leike)也宣布离职。

  据外媒报道,随着两位领导的离开,超级对齐团队已经被解散,将并入其它研究工作当中。知情人士透露,重视AI系统安全的员工已经对公司总裁山姆·奥特曼(Sam Altman)的领导失去信心。

  同时,OpenAI也被曝出让员工在离职时签署带有“不贬损承诺”的离职协议,如果拒绝签署就得放弃公司股权。

  5月19日,奥特曼发文承认这一条款并道歉称已在更改,“如果任何签署过这些旧协议的前员工对此感到担忧,可以联系我,我们也会解决这个问题。”

  OpenAI被曝出的“不贬损协议”

  奥特曼回应称:“我们从未收回任何人的既得权益,如果人们不签署协议(或不答应不贬损协议),我们也不会这样做。既得权益就是既得权益。”

  他表示,文件中有一项关于潜在股权取消的条款,“尽管我们从未收回任何东西,但这绝不应该是我们在任何文件或通信中提及的内容。这个事是我的错,也是我为管理OpenAI而感到的少数尴尬之一;我不晓得发生了这种事,但我应该知道。大约在过去30天的时间里,该团队已经开始修复标准离职文书……对此我深感抱歉。”

  “封口协议”之外,安全有关人员的相继离开,引发人们的更大担忧。OpenAI的超级对齐团队主要任务是对研发的AI进行评估并监督,防止AI走向失控局面。

  莱克在宣布离职后,也在X(推特)发帖怒斥OpenAI及领导层“重视光鲜的产品,安全文化和流程不再受到重视”。

  他强调:“OpenAI务必成为一家安全第壹的AGI(通用 人工智能 )公司……辞去这份工作是我做过最艰难的事之一,因为我们迫切需要理清楚如何引导和控制比我们聪明得多的 人工智能 系统。然而,我与OpenAI领导层在公司的核心优先事项上存在不答应见已经有一段时期,直到我们最终达到了临界点。”

  杨·莱克的推文

  莱克还表示:“我相信我们应该投入更多的精力来为下一代模型做好准备,关注安全性,监控,做好准备,让AI具有对抗性的鲁棒性、(超级)对齐,关注保密性、社会影响等相关主题。这些问题很难做对,我很担忧我们没有朝着正确的方向前进。”

  马斯克也在莱克的推文下回复称:“安全问题在OpenAl其实不是重中之重。”

  彼时,OpenAI总裁格雷戈里·布罗克曼(Greg Brockman)曾发布与奥特曼共同署名的回应表示,“始终在为安全部署功能日益强大的系统奠基基础”,尔后将根据部署进程中吸取的教训,不断改进模型行为和滥用监控,“未来将比过去更加艰难。我们需要不断提升安全工作,以适应每种新模式的危险。”

  文中提到:“我们还不确定何时会达到发布的安全标准,如果这会推迟发布时间表也没关系……我们将继续针对不一样的时间范围进行安全研究。我们还将继续与政府和许多利益相关者就安全问题展开合作。”

  回应中也坦言:“目前还没有行之有效的策略指导如何走向AGI,我们认为经验理解可以助推指引前进的方向。我们相信我们既能实现巨大的优势,又能努力降低严峻的危险。我们非常认真地对待我们在这里所饰演的角色,并仔细权衡对行动的反馈。”

  此前的2023年底,奥特曼曾被OpenAI董事会解雇。据外媒报道称,导火索是几名科研人员致信警告称一项强大的AI( 人工智能 )发现可能要挟到人类。不过在700多名员工要挟辞职和微软公司等多方压力下,奥特曼很快便重返OpenAI担任总裁,并组建了新董事会。

  据知情人士透露,OpenAI首席技术官米拉·穆拉蒂(Mira Murati)曾告诉员工,一封关于Q*(发音为Q-Star)AI取得突破的信件促使董事会采取了解雇行动。

  OpenAI在Q*上取得的进展,让部分公司内部人士相信,这可能是他们找到“超级智能(即AGI)”的突破。OpenAI将AGI定义为“比人类更聪明的AI系统”。

手机扫码浏览该文章
 ● 相关资讯推荐
2024-7-1【人工智能】如何以善-管-促善-智-
2024-7-1【人工智能】打造吸收外资-强磁场- 稳外资举措将加码
2024-7-1【AIPC】AI PC是否预示-个人智算-即将涌现
2024-6-30【大模型】大模型市场洗牌-价格战-开打 头部企业以-深耕行业+出海-尝试破局
2024-6-30【东风本田】东风本田联动奥特曼发布新车 高管为何频频喊出-相信光-
2024-6-30【浩瀚深度】专访浩瀚深度董事长张跃 - 迭代数智治理技术 筑牢业务基本盘
2024-6-30【大模型】价值研究所 - 国产大模型 烧出个未来?
2024-6-30【英伟达】AI周报-OpenAI将终止对国内提供API服务;黄仁勋涨薪近六成
2024-6-30【元宇宙】人工智能+元宇宙 - 更精准干预管理泛血管疾病! - 全球心脏病学巨擘齐聚上海 - 展开心脏健康的未来图景
2024-6-30【人工智能】半年考收官,-半程-冠军花落谁家?
 ● 相关资讯专题
人工智能】  【消费者】  【外商投资】  【强磁场】  【AIPC】  【微软公司】  【个人智算】  【大模型】  【周鸿祎】  【OpenAI】  【价格战】  【东风本田】  【奥特曼】  【杨忠华】  【相信光】  【浩瀚深度】  【董事长】  【研究所】  【英伟达】  【AI芯片】  【API】  【元宇宙】  【葛均波】  【心脏病】  【内蒙古】  【东数西算】  【数据中心】 
  • 网络建设业务咨询

   TEl:13626712526