提供中
Tuner.
スコアを動かす変更をランク付け。
Tuner は、Observe があるエージェントについて把握している内容を読み取り、そのドルあたり成果スコアを上げる可能性が最も高い変更をランク付けします。より引き締まったプロンプト、基準を保ちつつより安価なモデル、別のツール、より良いコンテキスト。すべての推奨は説明可能で、それが動かすべき正確な指標に紐付いています。
+0.6x top lift
Tuner · ranked by liftvalue/$
1Route triage to Haiku+0.6x
2Add a verify step+0.3x
3Trim the system prompt+0.1x
ranked per $ spent
仕組み
Read, rank, apply.
01
Read
Tuner reads what Observe knows about the agent and its task.
02
Rank
The highest-impact changes, ranked by predicted outcome-per-dollar lift.
03
Apply
Make the change, then watch the exact metric it was meant to move.
動かすレバー
改善するもの。
01
インパクト順の変更
当て推量ではなく、成果指標の予測される向上で並べ替えた推奨。
02
モデルの適合
このタスクで成果の基準を保てるモデルを、最も低いコストで。
03
計算ではなく、根拠
すべての変更について、自社の実験で裏づけが取れたのか、まだ定価計算にすぎないのかを明示します。
04
否定された変更も残す
実験で否定された切り替えはラベル付きで残ります。来月また同じ提案が出てこないためです。
05
Auto-Engineer ループ
評価器がリグレッションすると、Tuner が候補となる修正を生成し、データセットに対して検証し、ビフォーアフターの指標とともにPRを開きます。スコアボードではなく、コーチ。
対象となる人
Tuner を使うのは誰か。
- ·エージェントを反復改善するチーム
- ·プロンプトとモデルをチューニングするエージェントビルダー
- ·ドルあたり成果を追い求めるエンジニアリングリーダー
同じスイート
Optimize の他のツールと組み合わせて使えます。
Tuner をあなたのスタックに加えませんか?
現在、デザインパートナーをオンボーディング中です。ウェイトリストに登録して Tuner のコホートに参加しましょう。
メールアドレスだけで登録できます。 Tuner が公開されたら、メールを1通だけお送りします。それ以外は何も送りません。