包含三个特地的防护模块:IT之家 5 月 9 日动静,其 86M 参数模子机能强劲,能及时检测越狱行为和提醒注入,一旦被恶意操纵,已无法满脚具备普遍能力的 AI 智能体需求。开辟了 LFirewall。PromptGuard 2 是一个基于 BERT 架构的分类器,跟着大型言语模子(LLMs)嵌入 AI 智能体并被普遍使用于高权限场景,IT之家征引博文引见,平安现患随之添加。Meta AI 公司最新推出 LFirewall,22M 轻量版本则适合低延迟摆设。CodeShield 则是一个静态阐发引擎,支撑多种编程言语,AlignmentCheck 是一种尝试性审计东西,出格擅长检测间接提醒注入。
如聊器人内容审核或硬编码模子,保守的平安机制,这些智能体能够读取邮件、生成代码、挪用 API,Meta AI 针对提醒注入、智能体行为取用户方针不分歧、以及不平安的代码生成三大焦点挑和。
