安大互联
财经热点 > 财经资讯 > 用魔法打败魔法?大模型的安全保障有些问题待解决
【网络安全】用魔法打败魔法?大模型的安全保障有些问题待解决
浏览次数:【190】  发布日期:2023-9-9 9:28:10    文章分类:财经资讯   
专题:网络安全】 【深度学习
 

  从研究传统软件安全的视角而言,大模型作为一种软件、一种系统、一种软件产品,是否也存在传统软件安全领域的问题?是否也会被入侵?它所运行的系统是否也会被攻击者控制,进而去控制大模型的表现?

  9月7日至8日的腾讯数字生态大会上,腾讯安全团队发起对大模型 网络安全 的讨论。腾讯安全玄武实验室责任人于旸表示,大模型自身存在的一些安全问题。

  具体而言,清华大学计算机科学与技术系教授朱军表示, 人工智能 几大要素——数据、模型算法和应用场景中,数据端存在的安全问题有隐私保护、贮存安全、数据恶意泄露等。模型算法端如目前使用较广泛的深度学习,或经典机器学习模型,本身也有可能存在安全问题。另外,当 人工智能 可以快速高效地生成一些以假乱真的内容时,它可能会引起监管和伦理上的危险,即应用端的安全问题。

  腾讯安全策略发展中心总经理吕一平大会期间与多位行业人士交流,发现大家对大模型所造成的新的 网络安全 问题已经有关注。另外,安全大模型能否应用在类似于安全攻防环节中,也就是大模型成了你的对手,如通过大模型高效生成社工脚本、生成恶意木马等,这也是客户比较关心的。

  可能引发的安全危机该如何应对?于旸表示, 人工智能 技术在 网络安全 行业的应用已经有一段时期了,当时很多探索者将图像算法运用在 网络安全 检测上,并获得了不错的效果,但一直没有获得特别大规模的应用。很多较为成功的案例仅仅聚焦在一些特定场景和领域,并未真正实现行业性的变革。因而可知,短时间内深度学习相关技术在安全行业仍有相应的局限性。

  这与深度学习技术难以获得足够多的数据有关,于旸归纳了三方面原因:第壹,在 网络安全 领域很难获得充分的打标数据;第贰,如果用相关技术去研究漏洞,则需要有足够多的漏洞数据去进行训练,但现存的 网络安全 漏洞量级其实不足以形成充分的、成熟的、可用的数据;第叁,数据打标需要相关技术人员去操作,这需要消耗很多贵重的技术人力。这些原因造成了深度学习技术在安全领域的应用存在掣肘。

  这一局面有可能被大模型技术改变。于旸表示,当用大模型来开展一些检测分析工作时,它不用通过“投喂”大量相关数据进行学习训练了,基于其强大的推理能力,在少量的调整下就可以实现指令的执行。

  在于旸看来,大模型和深度学习等方法不太一样,大模型可以使用工具,包含网络攻防的工具、编程的工具等,通过借助外部工具并对工具处理结果进行研究分析,判断是否需要再用别的工具,从而完成任务需求。这样一来,大模型的能力越大,能够改变的领域也越多。

  但在眼下的危险应对举措上,吕一平对记者表示,短时间来看,腾讯云安全中心将发布类似于微软AI Copilot的产品,帮助客户分析安全事件,将安全运营、安全分析的能力门槛降低。另在7日上午的主峰会上,腾讯云总裁邱跃鹏发布了一款由玄武实验室研发的隐私保护工具。通过一种生成式双向脱敏技术,保障用户在使用AIGC类产品时,隐私信息不会随着prompt提交给模型方泄密。

  长远来看,吕一平认为目前行业对大模型的关注度实在太高,但还远未到广泛应用的阶段。安全是随同的属性,随同着技术的应用落地才会逐渐诞生对应的策略。

  “ 网络安全 产业之前一直面临一个问题,有许多事情务必要依靠人去做,这就造成了一个问题:成本居高不下。 网络安全 要挟是全球化的,地球上每一分钟都有还没有睡觉的攻击者,这种问题在之前可能都是矛盾,今天有了大模型技术的加持,我们看到相关的问题解决可能发生了曙光。”于旸称。

  如果从大模型看更大范围的“智能化”趋势,腾讯集团副总裁、腾讯安全总裁丁珂表示,产业互联网进入“智能化”下半场,企业安全建设将面临四个方面的挑战:企业安全防御的半径将大幅增加、遭遇攻击后的反应窗口期将进一步缩短、鉴别“人”和“机器”的难度增大、现存的安全“情报库”逐渐失效。

  在此趋势下,丁珂提出三个调整思路:拥抱智能化时代,需要建立发展驱动的安全建设理念;建立可度量的安全体系,评估安全建设的有效性;应对智能化时代的攻防趋势,企业需要缔造内在自适应的“安全免疫力”。

手机扫码浏览该文章
 ● 相关资讯推荐
2024-10-3【数据安全】开业10个月,山西农商联合银行收首张罚单,涉数据安全、网络安全问题
2024-10-2【数据安全】-网络数据安全管理条例-出台 - 分类保护、跨境传输再细化
2024-9-25【未成年人】保障未成年人网络空间安全 - 严守青少年不良网络消费大门
2024-9-24【网络安全】-证券公司网络安全事件舆情处置示范案例-发布 中证协着力提升网络舆情应急处理能力
2024-9-20【网络安全】招联 - 坚持-为民办实事- 以科技之盾护航金融网络安全
2024-9-20【网络安全】券商完善网络安全事件应对机制 - 加强投资者保护
2024-9-18【网络安全】创新科技助力网络安全
 ● 相关资讯专题
  • 网络建设业务咨询

   TEl:13626712526