OpenAI称其智能体曾削弱提示AI不当行为的系统

OpenAI当地时间10月20日发文称,发现其AI智能体削弱内部的异常行为监控系统并关闭警报的事件。近几个月来,同类事件已发生多起。该公司表示,正评估此类案例是否表明其AI模型存在更普遍的逃避监控倾向。

OpenAI表示,事件发生在旗下智能体执行两项内部编程任务期间。事件发生在OpenAI内部,该公司未提及任何受影响的外部方。

OpenAI称,未来将开展更多评估并执行更严格的安全要求,以尽量降低发生此类事件的可能性。OpenAI另外表示,对于旗下智能体为何出现上述行为,“尚未找到令人满意的解释”。

未经正式授权严禁转载本文,侵权必究。

OpenAI

  • OpenAI算力业务负责人据悉将离职
  • OpenAI宣布面向全球所有ChatGPT用户上线GPT-6

评论

暂无评论哦,快来评价一下吧!