説明
Tavusは、自社を人間コンピューティング企業と位置付け、テキストチャットではなく、リアルタイムで対面のビデオ会話を行うAIエージェント(PALと呼ばれる)を構築しています。最新のレンダリングモデルであるPhoenix-4.5は、同社がリリースした中で最も速く、表現力豊かなリアルタイム人間レンダリングモデルとして紹介されています。
続きを読む
Tavusは、開発者アカウントとPALアカウントの2つの方法を提供しています。開発者アカウントは、APIやツールを使用してPALを製品に組み込むチーム向けであり、PALアカウントは、個人が直接パーソナルAIコンパニオンと会話したい場合に使用します。開発者向けには、PALメーカーがノーコードでPALを数分で作成・起動できる方法を提供し、開発者API(TavusがCVI、つまり会話型ビデオインターフェースと呼ぶものに基づいて構築)は、チームがコードでより深くカスタマイズされたPAL体験を構築できるようにします。
PALは、リアルな表情とマイクロモーションを持つ顔のレンダリング、話すべきか聞くべきかを知るための音声とターンテイキング、フレーム内の実際の内容に反応する音声視覚認識、そして以前の会話からの文脈を保持するメモリという4つの機能が連携して構築されています。Tavusは、これらを3つの研究モデルに帰属させています。レンダリング用のPhoenix(134msのレイテンシーで、単一の画像からゼロショットで新しいアイデンティティをレンダリング可能)、認識用のRaven(音声、ビデオ、画面のコンテキストを一緒に読み取る)、会話のターンテイキング用のSparrow(TavusがTurnBenchベンチマークで1位とするモデル)です。
PALは、単なる会話だけでなく、実際の作業を目的とした機能もサポートしています。プレゼンテーションモードでスライドデッキを通じて話す、ブラウザモードで製品を共有しながらライブでクリックする、企業の文書から回答するナレッジベース、会話中にインタラクティブなビジュアル(チャートやスケジュールページなど)を生成するマジックキャンバス、Google MeetやZoomのライブコールに参加者として参加する能力などです。
Tavusは、ウェブサイトやライブセールスコールで製品に関する質問に答える販売アシスタント、大規模に候補者をスクリーニングする面接官、患者の受付と教育のためのHIPAA準拠の医療エージェント、トレーニングシミュレーションのための学習・開発エージェントなど、事前構築されたユースケースをリストしています。同社は、100,000人以上の開発者のためにPALを提供していると述べています。開発者向けの料金はAPIプラットフォームを通じて使用量に基づいており、大規模な展開はTavusのチームによって構築された完全管理型のエンタープライズソリューションとして提供されます。
- カテゴリーAI エージェントビルダー
- 料金モデル従量課金
- デプロイクラウド
- プラットフォームWeb
Tavusの主要機能
リアルタイムの対面ビデオAIエージェント(PAL)で、テキストのみのチャットではない
エンジニアリングなしでPALを作成・起動するためのノーコードPALメーカー
深くカスタマイズされたPAL構築のための開発者API(CVI)
Phoenixレンダリングモデル:134msのレイテンシー、単一の参照画像からのゼロショットレンダリング
音声、ビデオ、画面のコンテキストを一緒に読み取るRaven認識モデル
自然な会話のタイミングのためのSparrowターンテイキングモデル
企業の文書から回答するナレッジベースのグラウンディング
ライブ会話中にインタラクティブなビジュアルを生成するマジックキャンバス
Google MeetやZoomコールへのライブ参加
販売、医療の受付、面接、トレーニングのための事前構築されたソリューション
Tavusの使い方は?
アカウントタイプを選択:APIを使用して構築するための開発者アカウント、またはパーソナルAIコンパニオンと会話するためのPALアカウントを選択します。
PALを構築:ノーコードのPALメーカーを使用するか、完全にカスタムビルドのために開発者APIを使用します。
顔と声を与える:PALが使用する外見と声を選択または生成します。
知識とツールを追加:必要に応じてナレッジベース、プレゼンテーションモード、またはマジックキャンバスを接続します。
展開する:PALをウェブサイト、販売コール、またはライブのGoogle MeetやZoomセッションに埋め込みます。
エンタープライズ向けに営業に相談:大規模な展開のために完全管理されたカスタムビルドのPALソリューションをリクエストします。
Tavusの使用例
- 販売アシスタントエージェント
- 候補者スクリーニング
- 医療患者受付
- トレーニングシミュレーション








