生成式AI正在重新定义软件开发,从简单代码生成发展到能够处理复杂应用开发的AI代理。亚马逊启动第二届Nova AI挑战赛,专注于推进软件工程中可信、实用的代理AI。比赛要求大学生团队在提升AI代理复杂任务处理能力的同时确保安全性,涵盖多步骤代理开发。十支大学团队将被选中参与开发或红队测试,评估标准兼顾任务实用性和安全性。
随着大语言模型快速发展,如何避免《终结者》中天网般的AI威胁成为关注焦点。专家指出,组织需要在AI创新与风险控制间找到平衡点,建立可扩展的责任制度。面对AI代理技术兴起,人机协作模式正发生根本变化,网络安全边界也从硬件转向认知层面。由于恶意攻击者往往率先采用AI技术,防御方必须快速构建对应措施,否则可能面临数字智能主导的未来威胁。