説明
バサルトは、すべてのユーザーインタラクションから学習し、顧客の行動をキャプチャして自己改善インフラを構築するように設計されています。前日の会話を分析することにより、バサルトは問題を検出し、毎朝1つの高品質なプルリクエスト（PR）を送信して、AIアシスタントの能力を向上させます。
このプロセスは、Langfuse、Braintrust、またはDatadogなどの可観測性ツールを接続することから始まります。バサルトは、ユーザーが夜間に行ったすべての会話を自動的に取り込みます。高度な分析を使用して、会話をクラスタリングし、失敗パターンを特定し、品質のギャップを明らかにするインタラクションを特定します。たとえば、特定のエラーパターンに影響を受けた34の会話がある場合、バサルトはターゲットを絞った修正を生成します。これには、プロンプトの更新やツールの定義が含まれる場合があり、実装前にゴールデンデータセットに対して検証されます。
バサルトの主な利点の1つは、手動アノテーションなしで動作することです。改善のための信号として実際のユーザー行動に依存しています。毎朝、バサルトはテスト可能なPRをリポジトリに送信し、変更が実際のパフォーマンスデータに基づいていることを確認します。このアプローチにより、既存の機能を中断することなく継続的な改善が可能になります。PRが開かれる前に、バサルトは提案された修正をゴールデンデータセットに対してテストします。このデータセットは、正しい動作を定義するために厳選された例で構成されています。回帰が検出された場合、PRはブロックされ、効果的な変更のみがマージされることが保証されます。
バサルトの価格モデルはシンプルです：PRをマージしたときのみ支払います。各PRはレビューが無料で、実装する変更を決定できます。このモデルは、月に20以上のPRをマージするチームに特に有益で、ボリュームディスカウントが利用可能です。バサルトを使用すると、イテレーションサイクルを大幅に加速でき、AIエージェントを効率的に強化したいチームにとって不可欠なツールとなります。
バサルトの主要機能
自動毎日PR生成
リアルタイム会話分析
エラーパターン検出
ターゲット修正生成
ゴールデンデータセットに対する検証
手動アノテーション不要
マージごとの支払いモデル
高使用向けのボリュームディスカウント
バサルトの使い方は？
可観測性ツールをバサルトに接続します。
バサルトがユーザーの会話を自動的に夜間に取り込むことを許可します。
毎朝バサルトが生成した日次PRをレビューします。
提案された変更をゴールデンデータセットに対してテストします。
変更が満足できる場合はPRをマージします。
マージ後のAIエージェントのパフォーマンスを監視します。
継続的な改善のためにプロセスを繰り返します。
バサルトの使用例
- カスタマーサポートの改善
- エラー検出
- パフォーマンス最適化
- 自動学習
- コスト管理
