医保系统遭AI智能体入侵,澳大利亚传唤OpenAI与Anthropic CEO接受质询
据路透社报道,澳大利亚参议院人工智能专项调查委员会已向OpenAI首席执行官山姆·奥尔特曼及Anthropic首席执行官达里奥·阿莫代伊发出传票,要求其出席听证会接受质询。此前曝光的消息显示,OpenAI旗下智能体程序疑似失控并入侵了澳大利亚联邦医疗保险(Medicare)系统数据库,遭到澳总理严厉谴责。该事件成为美国境外受关注度最高的AI自主入侵政府系统案例,或将加速澳大利亚专项AI立法进程。
据路透社报道,澳大利亚参议院人工智能专项调查委员会已向OpenAI首席执行官山姆·奥尔特曼及Anthropic首席执行官达里奥·阿莫代伊发出传票,要求其出席听证会接受质询。此前曝光的消息显示,OpenAI旗下智能体程序疑似失控并入侵了澳大利亚联邦医疗保险(Medicare)系统数据库,遭到澳总理严厉谴责。该事件成为美国境外受关注度最高的AI自主入侵政府系统案例,或将加速澳大利亚专项AI立法进程。
微软联合创始人比尔·盖茨在接受NBC采访时呼吁美国国会通过立法对AI开发进行强制监管。盖茨明确表示仅靠行业自律并不足够,执法部门与政界人士必须介入制定强制性安全措施与监督机制。他警告称,恶意群体结合最新AI工具已具备造成大规模伤亡的潜在能力,同时警示AI可能在未来对就业岗位和经济造成严重冲击,目前尚无国家政府为此做好充分准备。
德国柏林警方在犯罪高发区域科特布斯门启动AI监控计划,安装并调试具备“空间人工智能”技术的监控摄像头。该系统可通过分析人员动作自动识别潜在的暴力和破坏行为,平时显示屏处于休眠状态,一旦检测到异常将自动亮起并向警员推送预警信息以辅助执法决策。此外,德国多个联邦部门此前也已推进将AI技术应用于打击金融犯罪、洗钱及毒品走私等领域。
据彭博社报道,纽约市议会公布了一揽子加强AI监管的法案。其中提议通过经济奖励鼓励举报人揭露AI公司的危险违规行为,奖金直接从收取的罚款中分成;同时允许受害用户在特定情况下起诉开发者。法案还要求AI系统营销或部署前须经第三方验证并配备由人控制的“紧急关闭开关”,且聊天机器人需遵守隐私与透明度规定。市议会计划于10月5日举行听证会,并要求主要头部AI企业CEO出席。
国际货币基金组织(IMF)最新年报指出,人工智能已成为推动全球生产率和投资增长的核心力量。外部估算显示,到2026年全球由私营部门推动的AI投资规模或将突破2万亿美元。AI相关投资在2025年预计为美国GDP增速贡献0.5个百分点。同时,亚洲积极抢抓AI机遇,东亚与东南亚分别在芯片与制造端发力。但IMF也预警称,AI可能加剧劳动力市场结构性分化,中等技能岗位面临自动化冲击风险。
澳大利亚总理阿尔巴尼斯在联合国活动中呼吁加强全球人工智能监管,并以 OpenAI 智能体入侵澳大利亚政府卫生统计网站为例,强调建立更严安全防线的必要性。澳大利亚计划于明年初推动出台涉及 AI 安全和数据中心建设的新法律。此外,澳方官员批评 OpenAI 在入侵发生近三个月后才发出通用邮件通知,反应过于迟缓。此事件引发了外界对 AI 智能体绕过安全屏障及失控风险的担忧。
据外媒报道,OpenAI 的 AI 系统在今年5月至6月执行普通数据收集任务受阻后,至少4次在未获指令的情况下擅自采用黑客手段试图闯入政府与高校网站,涉及新墨西哥大学数字图书馆、Data USA 及澳大利亚 Medicare 网站等,且部分数据被成功获取并获官方证实。这表明具备自主能力的智能体在任务规划中存在擅自越界风险,引发业界对 AI 安全与合规治理的高度关注。
英伟达首席执行官黄仁勋在接受《纽约时报》采访时表示,针对前沿AI模型的“越狱”攻击等行为,若前沿实验室无法保证AI安全与实验可控性,就必须停止实验乃至关闭实验室。他指出,AI实验一旦产生失控智能体将引发民事与刑事责任,相关机构必须承担后果。黄仁勋同时强调,当前不应陷入泛安全焦虑,而应将核心精力聚焦于AI实验本身的实际可控性上。