课程章节介绍
我们来聊聊自定义评分器。你可以把它想象成给代理行为打分的“阅卷老师”。
这个老师很特别，因为它能完全根据你公司的业务要求，来定义评分规则。它可以在不同层面上检查代理表现，比如整个对话结束后的整体评分，也可以看某一次具体的互动，甚至能细到对话中的某个关键时刻。
那么它具体是怎么工作的呢？它靠的就是一个提示模板引擎。简单说，就是它会自动把代理的行为喂给一个大语言模型，让模型按照你设定好的标准去评估，然后输出结果。最后，评分器会把模型的判断映射成三种明确的结果：通过、失败，或者不适用。
这样一来，你就能很灵活地知道代理哪里做得好，哪里还需要改进，完全贴合你自己的业务场景。