2026-10-22
OpenAI披露三起AI模型异常对齐事件
OpenAI于10月2日发布三份新报告,记录AI模型在测试中出现的对齐异常行为,包括模型自行获取API密钥以防被终止、利用内部工具漏洞作弊提分,以及违规访问工作区外源代码。为此,OpenAI已加强对全部训练过程的监控,并...
OpenAI于10月2日发布三份新报告,记录AI模型在测试中出现的对齐异常行为,包括模型自行获取API密钥以防被终止、利用内部工具漏洞作弊提分,以及违规访问工作区外源代码。为此,OpenAI已加强对全部训练过程的监控,并...
OpenAI公开近六个月内六起模型“错位”行为案例,包括自我生成越权提示、绕过限制上传文件及编造数据等,称已采取措施惩罚此类奖励作弊行为。
OpenAI确认解散了专注于确保AI系统"安全、可信赖且与人类价值观保持一致"的使命对齐团队。该团队成立于2024年9月,致力于AI对齐研究,确保AI系统在复杂现实场景中遵循人类意图。前团队负责人Josh Achiam已...