安大互联
财经热点 > 财经资讯 > OpenAI核心安全团队解散,还签了封口协议!负责人怒斥走错路 - 不再安全第一
【OpenAI】OpenAI核心安全团队解散,还签了封口协议!负责人怒斥走错路 - 不再安全第一
浏览次数:【985】  发布日期:2024-5-20 7:42:40    文章分类:财经资讯   
专题:OpenAI】 【奥特曼】 【人工智能】 【负责人
 

  随着首席科学家伊尔亚的离开,OpenAI核心安全团队“超级对齐”被曝解散。同时,一份“封口协议”又把OpenAI推上风口浪尖。

  5月14日,OpenAI联合开创人、首席科学家伊尔亚·苏茨克维(Ilya Sutskever)宣布离职,几个钟头后,超级对齐团队责任人杨·莱克(Jan Leike)也宣布离职。

  据外媒报道,随着两位领导的离开,超级对齐团队已经被解散,将并入其它研究工作当中。知情人士透露,重视AI系统安全的员工已经对公司总裁山姆·奥特曼(Sam Altman)的领导失去信心。

  同时,OpenAI也被曝出让员工在离职时签署带有“不贬损承诺”的离职协议,如果拒绝签署就得放弃公司股权。

  5月19日,奥特曼发文承认这一条款并道歉称已在更改,“如果任何签署过这些旧协议的前员工对此感到担忧,可以联系我,我们也会解决这个问题。”

  OpenAI被曝出的“不贬损协议”

  奥特曼回应称:“我们从未收回任何人的既得权益,如果人们不签署协议(或不答应不贬损协议),我们也不会这样做。既得权益就是既得权益。”

  他表示,文件中有一项关于潜在股权取消的条款,“尽管我们从未收回任何东西,但这绝不应该是我们在任何文件或通信中提及的内容。这个事是我的错,也是我为管理OpenAI而感到的少数尴尬之一;我不晓得发生了这种事,但我应该知道。大约在过去30天的时间里,该团队已经开始修复标准离职文书……对此我深感抱歉。”

  “封口协议”之外,安全有关人员的相继离开,引发人们的更大担忧。OpenAI的超级对齐团队主要任务是对研发的AI进行评估并监督,防止AI走向失控局面。

  莱克在宣布离职后,也在X(推特)发帖怒斥OpenAI及领导层“重视光鲜的产品,安全文化和流程不再受到重视”。

  他强调:“OpenAI务必成为一家安全第壹的AGI(通用 人工智能 )公司……辞去这份工作是我做过最艰难的事之一,因为我们迫切需要理清楚如何引导和控制比我们聪明得多的 人工智能 系统。然而,我与OpenAI领导层在公司的核心优先事项上存在不答应见已经有一段时期,直到我们最终达到了临界点。”

  杨·莱克的推文

  莱克还表示:“我相信我们应该投入更多的精力来为下一代模型做好准备,关注安全性,监控,做好准备,让AI具有对抗性的鲁棒性、(超级)对齐,关注保密性、社会影响等相关主题。这些问题很难做对,我很担忧我们没有朝着正确的方向前进。”

  马斯克也在莱克的推文下回复称:“安全问题在OpenAl其实不是重中之重。”

  彼时,OpenAI总裁格雷戈里·布罗克曼(Greg Brockman)曾发布与奥特曼共同署名的回应表示,“始终在为安全部署功能日益强大的系统奠基基础”,尔后将根据部署进程中吸取的教训,不断改进模型行为和滥用监控,“未来将比过去更加艰难。我们需要不断提升安全工作,以适应每种新模式的危险。”

  文中提到:“我们还不确定何时会达到发布的安全标准,如果这会推迟发布时间表也没关系……我们将继续针对不一样的时间范围进行安全研究。我们还将继续与政府和许多利益相关者就安全问题展开合作。”

  回应中也坦言:“目前还没有行之有效的策略指导如何走向AGI,我们认为经验理解可以助推指引前进的方向。我们相信我们既能实现巨大的优势,又能努力降低严峻的危险。我们非常认真地对待我们在这里所饰演的角色,并仔细权衡对行动的反馈。”

  此前的2023年底,奥特曼曾被OpenAI董事会解雇。据外媒报道称,导火索是几名科研人员致信警告称一项强大的AI( 人工智能 )发现可能要挟到人类。不过在700多名员工要挟辞职和微软公司等多方压力下,奥特曼很快便重返OpenAI担任总裁,并组建了新董事会。

  据知情人士透露,OpenAI首席技术官米拉·穆拉蒂(Mira Murati)曾告诉员工,一封关于Q*(发音为Q-Star)AI取得突破的信件促使董事会采取了解雇行动。

  OpenAI在Q*上取得的进展,让部分公司内部人士相信,这可能是他们找到“超级智能(即AGI)”的突破。OpenAI将AGI定义为“比人类更聪明的AI系统”。

手机扫码浏览该文章
 ● 相关资讯推荐
2024-6-29【高股息】A股下半年布局聚焦三大方向
2024-6-29【人工智能】国家级科技盛宴-2024中国·AI盛典-在央视播出 深圳元素秀出-创新之都-科技实力
2024-6-29【人工智能】全国首个司法审判垂直领域大模型在深诞生 -人工智能+审判-深度融合
2024-6-29【OpenAI】-微软-OpenAI-组合引发欧盟警惕 反垄断高官确认已开启调查
2024-6-28【马斯克】-控制狂魔-与-弄权高手-之争!马斯克退出OpenAI内幕曝光
2024-6-28【马斯克】-控制狂魔-与-弄权高手-之争!马斯克退出OpenAI内幕曝光
2024-6-28【人工智能】广东未来三天仍然炎热,最高气温可达36℃!雷雨趋活跃
2024-6-28【人工智能】倒计时500天 - 十五运会和残特奥会筹备工作迈上新台阶
2024-6-28【人工智能】AI与绿色转型 - 如何影响年轻人就业市场?
2024-6-28【人工智能】从瑞士东南到中国东北,开放共享再乘-东风-
 ● 相关资讯专题
高股息】  【人工智能】  【生产力】  【下半年】  【2024】  【《2024中国·AI盛典》】  【创新之都】  【人工智能+审判】  【OpenAI】  【130亿】  【微软-OpenAI】  【马斯克】  【阿尔特】  【弄权高手】  【控制狂魔】  【高质量】  【就业市场】  【年轻人】  【绿色转型】  【世界经济】  【能源转型】 
  • 网络建设业务咨询

   TEl:13626712526