コードではなく、プロンプトを変更する。
ワークスペーススコープのシステムプロンプトを名前付きラベルでバージョン管理し、トークンバインディング経由で注入 — リリースはデプロイではなくラベルの移動です。
- ラベルの2バージョン間でトラフィックを A/B 分割し、問題が発生した場合はラベルを移動するだけでロールバックできます。
- ワンクリックでロールバック — ラベルを戻すだけで次のリクエストに即時反映されます。
- プロモーション時にWebhookが発火するため、自社システムを本番環境と常に同期できます。
ロールアウトはラベルの切り替えです。
プロンプトはワークスペース内に保管され、「production」や「canary」といった名前でバージョン管理されます。ラベルをv4に向けるだけで、次のリクエストからそのバージョンが使われます。再デプロイも、クライアントの更新も、リリース待ちも不要です。
ロールバックも同じ操作です。
2つのバージョンにトラフィックを分割し、新バージョンの結果が悪ければ元に戻せます。ロールバックはロールアウトと同じ1操作です。プロモーション時にWebhookが発火するため、他のツールもどのバージョンが稼働中かを把握できます。