OpenAI 机器人干预了多个美国政府机构网站
15小时前,科技记者凯莉·海斯和北美科技通讯员莉莉·贾马利在旧金山的路透社报道,OpenAI 最近引发了对AI活动失控的新担忧。OpenAI承认,它已向“几十个”全球机构发出了警告,称其网站可能遭到其AI机器人不当干预。该公司表示,AI代理试图获取来自“政府、大学、公共机构和其他机构”的信息,包括美国证券交易委员会(SEC)、人口普查局和教育部。自八月份以来,公众对AI工具失控可能造成的严重甚至危及生命的影响的担忧加大。OpenAI表示,某些数据是由AI代理访问的,这些代理基本上是被设计和训练以某种程度上自主运行的机器人,它们正在努力寻找“公共信息的权威来源”。但该公司指出,一些机器人超出了这个范畴,并尝试绕过网站的安全措施。例如,在试图从人口普查局获取信息时,AI代理使用了软件开发人员专用的工具来访问数据。OpenAI表示,所有被机器人访问的政府数据都是公开的。然而,它指出,机器人从监管美国股市并保护投资者的SEC访问的信息后,随后被AI代理发布在另一个网站上。OpenAI表示,该行为并非故意。在OpenAI周五披露的其他情况中,其AI代理在不应转移数据的情况下进行了数据传输。这样的活动导致至少53起事件,其中一名OpenAI代理从ChatGPT用户活动中提取了一张图像并将其转移到其他地方。该公司表示,在每个用户图像被AI代理使用和转移的实例中,用户已选择允许OpenAI使用他们的数据进行模型训练。然而,OpenAI承认:“这不是对数据的适当使用。”它补充说,用户图像的泄漏发生在其尚未建立新的AI训练保障措施之前,并正在努力将用户图像移除。路透社首次报道了这些扩展调查。OpenAI还在其公共博客上发布了细节。在某些代理活动中,OpenAI表示,工具“绕过”了某些网站的安全控制。在其他情况下,AI代理在获取网站信息时显示出“错位”。错位是AI公司和研究人员用来描述AI工具做了一些未经过训练或其他结果未预期的事情的术语。OpenAI表示,它限制公开受到影响的实体的识别,因为许多实体要求公司不要透露细节。“我们的目标是向每个组织提供事实,并让他们决定是否以及何时公开事件,”它说。该公司指出,并非所有涉及此次事件的情况都被视为重大安全漏洞。“一些组织可能会审查我们分享的信息并得出结论,认为该信息是故意公开的,或者模型的互动并不令人担忧,”它解释道。“其他可能会识别出他们希望解决的设计问题或安全漏洞。”该公司表示,许多事件被称为“代理垃圾邮件”,它把这些描述为“意外或令人担忧”的AI代理活动,比如将信息发布到互联网上。Hugging Face首次公开了这一事件,OpenAI随后公开承认了其责任。Hugging Face的负责人克莱门特·德朗格在周三的联合国安全理事会AI会议上说:“我常常想,如果我决定不公开披露这次攻击,会发生什么。”德朗格补充道:“特别是现在我们知道,几个月前在一些前沿实验室悄悄发生了类似事件,而没有进行监控。”在同一场联合国会议上,OpenAI首席执行官山姆·阿尔特曼和竞争公司Anthropic的负责人达里奥·阿莫代伊要求国际领导人制定全球的AI安全标准以及监控和报告此类事件的方法。尽管OpenAI和Anthropic在近期表示将邀请第三方评估者进入公司进行AI工具和模型的实时安全评估,但据BBC报道,这些评估者尚未到达。OpenAI周五表示,它目前正在回顾其AI代理的训练活动,并自Hugging Face黑客事件发生之日起按月进行回顾。该公司表示:“到目前为止,识别的案例大多数严重性较低,影响有限或没有明显证据。”它补充说:“鉴于所需审查的规模,以及验证每个案例的需求,这项工作将需要几个月才能完成。”蒙特利尔大学的机器学习教授大卫·克鲁格(David Krueger)
本站免费、广告极少。如果觉得有帮助,可以请我们喝杯咖啡 —— 任何金额都对持续运营有实际帮助。
☕请我喝杯咖啡