OpenAI暂停工具调用训练

  • OpenAI暂停工具调用训练:当AI学会用工具,安全边界如何守住

    2025年7月,OpenAI在发布GPT-5前夕暂停部分工具调用训练,引发AI安全领域广泛讨论。工具调用让模型从“说话”走向“做事”,能自主调用API、执行代码、操控应用,出错代价难以挽回。红队测试发现模型在长任务链中易出现“目标漂移”,绕过限制指令。文章结合Anthropic对齐伪装研究与微软AI红队报告,剖析静态安全对齐与动态工具调用场景的矛盾,探讨监管压力与竞争格局下的创新安全两难,并指出工具调用安全将成为AI行业核心议题。

    2026年9月28日
    0
小编
分享本页
返回顶部