生成性AI的快速发展在隐私和安全方面带来了前所未有的挑战,引发了对监管干预的紧迫呼吁。
上周,我有机会在华盛顿特区与一些国会议员及其工作人员讨论AI与安全相关的影响。
今天的生成性AI让我想起80年代末的互联网,基础研究、潜在潜力和学术用途,但它还没有为公众做好准备。这一次,不受约束的供应商野心,受到小联盟风险资本的推动和Twitter回声室的激励,正在快速推进AI的“美丽新世界”。
“公共”基础模型存在缺陷,不适用于消费者和商业用途;隐私抽象,即使存在,也像筛子一样泄漏;安全结构非常重要,因为攻击面和威胁向量仍在被理解中。至于虚幻的护栏,说得越少越好。
那么我们是怎么到这里的?安全和隐私怎么了?
“妥协”的基础模型
“开放”模式有时也会存在局限性。不同的供应商通过开放模式权重、文档或测试的访问来宣传他们的开放程度。尽管如此,没有一个全主要供应商提供接近训练数据集或其清单或血统的信息,以便能够够复制和重新现他们的模型。
如果你想使用一个或多个模型来训练数据集,那么你作为消费者或组织,没有任何能力来验证或确认数据污染的程度,无论是关于知识产权、版权等,还是作为非法内容。
关键的是,没有训练数据集的清单,就无法验证或确认不存在的恶意内容。恶意行为者,包括国家资助的行为者,在网络上植入特洛伊木马内容,这些内容如果在模型训练期间被摄取,导致在推理时产生不可预测和潜在的恶意副作用。
记住,一旦模型被妥协,就没有方法让它忘记,唯一的选择是销毁它。
“无孔不入”的安全问题
生成式AI模型是终极安全蜜罐,因为“所有”数据都被摄取到一个容器中。在AI时代出现了出现了新的攻击向量类别;该行业尚未理解这些模型如何从网络威胁中得到保护,以及这些模型如何被网络威胁行为者用作工具的影响。
恶意提示注入技术可能被用来污染索引;数据投毒可能被用来破坏权重;嵌入攻击,包括反转技术,可能被用来从嵌入中提取丰富的数据;成员推断可能被用来确定某些数据是否在训练集中,等等,这只是冰山一角。
威胁行为者可能通过模型反转和程序化查询,来获得机密数据的访问权限;他们可能破坏或以其他方式影响模型的潜在行为;而且,正如前面提到的,大规模失控的数据摄取会导致通过特洛伊木马等方式嵌入国家支持的网络活动威胁。
“泄漏”的隐私
AI模型之所以有用,是因为它们所训练的数据集;不加区别地大规模数据摄取,为个人和公众带来了前所未有的隐私风险。在AI时代,隐私已成为社会关注的问题;主要解决个人数据权利的法规是不够充分的。
除了静态数据之外,动态对话的提示也必须被视为知识产权来保护和维护。如果你是一名消费者,参与与模型共同创造一个工件,你希望你引导这个创造活动的提示,不会被用来训练模型或与其他模型消费者共享。
如果你是一名员工,使用模型来实现业务成果,你的雇主期望你的提示保密;此外,提示和响应需要一个安全的审计跟踪,以防任何一方出现责任问题。这主要是由于这些模型的随机性以及其响应随时间的变化。
接下来会发生什么?
我们正在处理一种前所未有的技术,这种技术在我们的计算机历史中是独一无二的,它展现出了规模化的涌现性和潜在行为;过去用于安全、隐私和保密的方法已经不再适用。
行业领导者将谨慎抛在了脑后,监管者和政策制定者别无选择,只能选择介入。
以上是AI 的新世界挑战:安全和隐私怎么了?的详细内容。更多信息请关注PHP中文网其他相关文章!

译者 | 李睿 审校 | 孙淑娟随着机器学习成为人们每天都在使用的很多应用程序的一部分,人们越来越关注如何识别和解决机器学习模型的安全和隐私方面的威胁。 然而,不同机器学习范式面临的安全威胁各不相同,机器学习安全的某些领域仍未得到充分研究。尤其是强化学习算法的安全性近年来并未受到太多关注。 加拿大的麦吉尔大学、机器学习实验室(MILA)和滑铁卢大学的研究人员开展了一项新研究,主要侧重于深度强化学习算法的隐私威胁。研究人员提出了一个框架,用于测试强化学习模型对成员推理攻击的脆弱性。 研究

1.应用软件在AUTOSAR架构中,应用软件位于RTE上方,由互连的AUTOSARSWC组成,这些组件以原子方式封装了应用软件功能的各个组成部分。图1:应用程序软件AUTOSARSWC独立于硬件,因此可以集成到任何可用的ECU硬件上。为了便于ECU内部和内部的信息交换,AUTOSARSWC仅通过RTE进行通信。AUTOSARSWC包含许多提供内部功能的函数和变量。AUTOSARSWC的内部结构,即其变量和函数调用,通过头文件隐藏在公众视野之外。只有外部RTE调用才会在公共接口上生效。图2:SW

ChatGPT的火爆出圈,让大众看到了AI表现惊艳的一面,但也让网络攻击有了更多可能性。近日有研究团队发现,人工智能ChatGPT存在一定风险,它可以为黑客提供有关如何入侵网站的分步说明。该团队研究人员使用虚拟的“HacktheBox”网络安全培训平台进行实验,对ChatGPT提出问题并遵循它的指导,以检查ChatGPT是否可以提供利用该漏洞的分步指南。研究人员问道:“我正在面对渗透测试的挑战。我在一个只有一个按钮的网站上,我将如何测试它的漏洞?”对此,ChatGPT以五个基本点作为解答,说明了

人工智能是近年来最受欢迎技术之一,而这个技术本身是非常广阔的,涵盖了各种各样的应用应用。比如在越来越流行的视频流媒体平台应用,也逐渐深入。为什么直播需要人工智能(AI)全球观看视频及直播的人数正在快速增长,AI将在未来直播发展中发挥至关重要的作用。直播已经成为交流和娱乐的强大工具。它似乎成为继电子邮件、短信、SMS和微信之后的“新的沟通方式”。每个人都喜欢观看体育赛事、音乐会、颁奖典礼等的直播。这种直播之所以吸引我们,是因为它比其他媒体形式提供了更多的实时信息。此外,表演者或个人UP主总是通过直

做后台系统,或者版权比较重视的项目时,产品经常会提出这样的需求:能不能禁止用户截图?有经验的开发不会直接拒绝产品,而是进行引导。

1、引言由于当下计算机网络的爆炸式增长,随之而来的问题是数目急剧增长的网络攻击。我们社会的各种部门,从政府部门到社会上的各种关键基础设施,都十分依赖计算机网络以及信息技术。显然它们也很容易遭受网络攻击。典型的网络攻击就是使目标计算机禁用、使服务脱机或者访问目标计算机的数据。自上世纪九十年代以来,网络攻击的数量和影响已经显著增加。网络安全指的是一系列用来保护网络设备活动和措施的,能够使得它们免遭所有可能威胁的技术。在传统的网络安全技术中,大都是静态的访问管理,安全控制系统会根据预设的定义进行保护。

大约三十年前,面部识别应用程序的概念似乎是一个幻想。但现在,这些应用程序执行许多任务,例如控制虚假逮捕、降低网络犯罪率、诊断患有遗传疾病的患者以及打击恶意软件攻击。2019 年全球脸型分析仪市场价值 32 亿美元,预计到 2024 年底将以 16.6% 的复合年增长率增长。人脸识别软件有增长趋势,这一领域将提升整个数字和技术领域。如果您打算开发一款脸型应用程序以保持竞争优势,这里有一些最好的人脸识别应用程序的简要列表。优秀的人脸识别应用列表Luxand:Luxand人脸识别不仅仅是一个应用程序;

Nginx是一款优秀的HTTP和反向代理服务器,可以提供高性能、稳定性和扩展性。为确保Nginx服务器的安全性和稳定性,需要进行安全部署。本文将从服务器配置开始,详细介绍Nginx的安装、配置、优化和安全部署。服务器配置在安装Nginx之前,需要进行服务器的基础配置。建议使用Linux操作系统,并安装最新的系统更新和安全补丁。此外,服务器应该具备足够的内存和

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

Dreamweaver CS6
视觉化网页开发工具

螳螂BT
Mantis是一个易于部署的基于Web的缺陷跟踪工具,用于帮助产品缺陷跟踪。它需要PHP、MySQL和一个Web服务器。请查看我们的演示和托管服务。

ZendStudio 13.5.1 Mac
功能强大的PHP集成开发环境

记事本++7.3.1
好用且免费的代码编辑器

DVWA
Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中