Trust Layer: Languages, Masking & Toxicity

DEX801 - Action Responses

📄 第 264 页 🎬 视频课程

课程章节介绍

同学们,我们来看这张Slide,它讲的是Agentforce信任层的三个关键功能,这些功能就像是给AI套上了一层安全防护罩,确保每次交互都合规、安全。 第一个功能,是关于语言和区域设置的规范。为什么这很重要呢?因为掩蔽敏感数据和检测有害内容的准确度,很依赖对语言的理解。信任层在处理用户输入时,会先判断语言。如果整个提示是单一语言,它就用一个“默认语言环境”来优化后处理;如果提示里包含混合语言,它会用概率估计出一个“输入语言环境”。这样,无论是掩蔽还是毒性检测,都能更精准。 第二个功能,是自动化的数据屏蔽。这里的屏蔽,专门针对PRI(个人隐私信息)和PC(受保护类别)数据。想象一下,用户可能在对话框里不小心写了自己的邮箱、病例,或者提到种族、宗教等敏感信息。在把提问发给大语言模型之前,信任层会自动把这些真实数据替换成占位符,比如换成“姓名_1”、“邮箱_1”之类的标签。等大模型生成回复后,再在返回给用户前,把占位符原样替换回真实数据,这叫解屏蔽。整个过程对用户几乎无感知,但数据安全了。需要留意的是,开启数据屏蔽时,能处理的上下文窗口上限是65536个令牌,超过这个长度的对话可能会被截断。 第三个功能,是自动化的毒性评分。每次大模型生成回答后,信任层都会立即给这个回答打分,检测有没有不妥内容。评分是0到1之间的数值,分数越高,表示某一类毒性内容可能性越大。同时还会返回一个“是否检测到毒性”的标记。它会检查六大类毒性:身份攻击、仇恨言论、亵渎、暴力、性内容和身体相关的不良内容。所有的屏蔽记录和毒性评分数据,都会存储到Data 360后台,方便后续做审计审查,确保一切操作可追溯、合规。 简单总结,这三个功能让Agentforce在输出精准的同时,牢牢守住了安全底线:语言适配提升准确性,数据屏蔽保护隐私,毒性评分过滤有害内容,并且全程留痕可审计。这样,企业就可以放心地在各类业务场景中使用AI了。

关键词

Agentforce Salesforce