Skip to main content
根据运行、编排、汇总、分析和检查评测等需求选择 AgentCompass 命令。 AgentCompass 提供一个统一的 agentcompass 命令。请在已激活的 AgentCompass 环境中直接运行,或通过uv run 调用:

命令列表

选择 run 还是 launch

agentcompass run 使用命令行和配置文件指定的 Benchmark、Harness、Model 和 Environment 执行一次评测。Benchmark、Harness 和 Model 按此顺序通过位置参数选择,Environment 通过 --env 选择;组件参数、并发、重试、输出和复用设置则由同一条命令或其加载的配置文件提供。 agentcompass launch 从 YAML 或 JSON 文件读取多个显式命名的评测请求,并交给同一个全局调度器。需要比较多个 Model、运行多个 Benchmark,或混合不同 Harness、Environment 时使用 launch。它不会自动生成组件的笛卡尔积,每一种组合都需要在编排文件中明确声明。 两个命令共享并发、超时、重试、输出和调试设置。各项参数的作用范围和使用建议见运行控制