到2030年,Gartner预测,Guardian Adents(确保安全,值得信赖的互动)将占代理AI市场的10%至15%,有助于任务,监视和自主决策。
卫报代理是基于AI的技术,旨在支持和确保与AI系统的可信赖互动。它们既可以用作助手,包括内容审查,监视和分析 – 以及能够构建和执行行动计划的半自治或完全自主的代理。这些代理还可以重定向或阻止特定的措施,以使其与预定的目标保持一致。
随着代理AI的使用增长,Gartner强调了对强大保障措施的迫切需求。 2025年5月19日举行的Gartner网络研讨会的调查结果对147个CIO进行了调查,IT运作领导者,表明24%的受访者已经部署了几个AI代理,而另外4%的受访者已部署了十几个。
同时,有50%的受访者表示,他们仍在研究和实验这项技术。另有17%的人表示,他们尚未与AI代理商合作,但计划在2026年底之前实施它们。Gartner指出,这种不断扩大的AI特工的采用使对自动信任,风险和安全控制的迫切需求加速了对监护人的需求。
Gartner副总裁杰出分析师Avivah Litan说:“如果不使用正确的护栏控制,Agesic AI将导致不必要的结果。” “监护人的代理人利用了广泛的代理AI功能和基于AI的确定性评估来监督和管理各种代理能力,从而平衡运行时决策与风险管理平衡。”
这些代理商的风险随着其能力和达到增长而增加。根据同一民意调查,在125名受访者中,有52%说他们的AI代理人或将主要用于内部管理职能,例如IT,HR和会计。另有23%的人将它们部署为面向外部客户的角色。
随着AI代理用例的快速扩展,威胁类别也有所增加。 Gartner强调了新兴威胁的几个示例:由于未经授权的控制,凭证劫持和数据盗窃;代理商与假或恶意网站互动,导致行动妥协;内部缺陷或外部触发因素导致代理人行为不可预测,这可能导致操作中断和声誉伤害。
Litan说:“ AI代理商的快速加速和增加的代理需要超越传统的人类监督。” “随着企业朝着以惊人的速度进行通信的复杂的多机构系统,人类无法跟上错误和恶意活动的潜力。这种不断升级的威胁景观强调了对监护人的迫切需求,后者为AI应用程序提供了自动化的监督,控制和安全性。”
为了保护AI互动,Gartner建议CIOS和AI和安全领导者应专注于监护人的三个主要功能。这些是:评论者,他们评估了AI生成的内容的准确性和可接受的用途;监视者,跟踪AI和代理商采取的行动以进行进一步审查;以及使用自动工具阻止或修改操作过程中的AI操作的保护者。