AgentOptimizationEvaluationConfiguration interface
可重复使用质量测量配置。
属性
| evaluation_model | 模型配置用于基于模型的评估器和会话模拟。 |
| evaluators | 评估者推荐人用于评分候选人质量。 |
| max_concurrent_agent_runs | 每个单回合评估中同时执行的最大目标-代理运行次数。 如果省略,服务默认为1。 对话评估只支持1. |
| training_set | 用于指导优化搜索的评估集。 当提供独立的验证集时,内联数据支持最多2,000个测试用例;否则也用于验证,且限制为500个。 |
| validation_set | 保留的评估集用于完整候选人评估,限量500个在线测试用例。 训练集被重复使用,且在省略时仍受同样500个测试案例验证限制。 |
属性详细信息
evaluation_model
模型配置用于基于模型的评估器和会话模拟。
evaluation_model: EvaluationModelConfiguration
属性值
evaluators
max_concurrent_agent_runs
每个单回合评估中同时执行的最大目标-代理运行次数。 如果省略,服务默认为1。 对话评估只支持1.
max_concurrent_agent_runs?: number
属性值
number
training_set
用于指导优化搜索的评估集。 当提供独立的验证集时,内联数据支持最多2,000个测试用例;否则也用于验证,且限制为500个。
training_set: AgentOptimizationEvaluationSetUnion
属性值
validation_set
保留的评估集用于完整候选人评估,限量500个在线测试用例。 训练集被重复使用,且在省略时仍受同样500个测试案例验证限制。
validation_set?: AgentOptimizationEvaluationSetUnion