Yardstick은 순서대로 도입할 수 있는 세 가지 스위트로 구성됩니다.
Observe(측정): 개발 도구의 merge된 PR당 비용, 지원 부서의 해결율처럼 각 영역이 중요하게 여기는 단위로 AI를 실제 결과물 기준으로 측정합니다. 활동 지표는 거짓말을 하지만 결과물은 거짓말을 하지 않습니다.
Optimize(개선): 점수는 움직일 수 있어야 쓸모가 있습니다. Optimize는 Observe가 측정한 데이터를 읽어 점수를 높이는 방법(조정할 프롬프트, 교체할 모델, 실행할 실험)을 알려주고 루프를 마무리합니다.
Treasury(관리): 결과물이 측정되고 나면 자금이 그 결과물을 따라갈 수 있습니다. 팀별 할당량을 설정하고, 사용하지 않은 예산을 회수해 가장 많은 가치를 창출하는 팀에 재배분하세요.
장기적인 비전인 Autopilot은 정책 범위 내에서 전체 루프를 직접 운영하는 에이전트로, 모든 과정이 완전히 기록되고 되돌릴 수 있습니다.