dmsobtl/dsh-agent-eval0

dsh-agent-eval

DSH plugin: evaluate agent performance on defined tasks — run benchmarks, score outcomes, track improvement over prompt/model changes.

AI 분석

核心用途是量化评估智能体任务执行能力。适合需要对智能体进行基准测试、调优提示词或对比模型效果的开发者。

패키지
dsh-agent-eval
버전
0.1.0
최근 업데이트
2026. 8. 14.

설치

검증된 bundle이 없거나 호환성 검사에 실패했습니다. 먼저 저장소 설명을 읽어 주세요. 전체 README 읽기 ↗

配置

- id: agent-eval
  plugin: dsh-agent-eval
  config:
    fixturesDir: ./eval/tasks
    resultsDir: ./eval/results
    defaultTimeout: 120000    # 每个任务最长 2 分钟