产业观察

治理失控AI智能体的方法,可能是更多的AI

原标题: The fix for rogue AI agents could be more AI

TechCrunch·2026/9/17 20:34:47🔗 原文

📋总体概括

随着AI智能体(AI Agent)在企业中大规模部署,其行为不可控、决策不透明的问题日益突出,行业正转向用AI来监控AI的思路加以解决。YC孵化器近年已投资106家与AI可观测性(AI observability)相关的公司,这一细分赛道快速升温。可观测性工具旨在追踪智能体的推理链条、调用行为与异常输出,为企业在生产环境中安全使用AI提供保障,也催生了一批新兴初创公司。

关键信息

  • AI智能体自主性与不可解释性带来的风险,正成为企业部署AI的核心痛点。
  • 行业主流解决思路是『以AI治AI』,用专门的监控工具观察智能体行为。
  • Y Combinator近年投资了106家AI可观测性相关公司,赛道热度明显。
  • AI可观测性工具主要追踪智能体的推理过程、工具调用与异常输出。

🔥犀利点评

用AI监控AI,听着像让狐狸看守鸡舍,但逻辑上其实成立——人类根本跟不上智能体的执行速度和规模,只能以模型对模型。真正的问题在于:这些监控工具本身的可信度谁来保证?106家公司扎堆同一个赛道,说明门槛不高,最终大概率是云厂商和大模型厂商把可观测性做成平台自带功能,独立创业公司的窗口期并不长。

本文由本站自动聚合,以下为原始来源:前往 TechCrunch 阅读全文