説明
Expandは、AIエージェントが人間のようにウェブにアクセスし理解するためのツールを構築する応用研究ラボです。従来のウェブスクレイピングツールは、生のHTMLを解析することに依存していることが多く、レンダリングされたブラウザページでのみ明らかになる重要な視覚的コンテキスト、レイアウト、隠れたデータを見逃す可能性があります。Expandは、与えられたURLを実際のブラウザで開くことでこれに対処し、そのIrisモデルが完全にレンダリングされたページを分析できるようにします。
続きを読む
コア製品であるFetchは、URLを受け取り、ページコンテンツを構造化されたMarkdownとして返し、テーブル、アイコン、全体のレイアウトを保持します。重要なのは、動的ウェブアプリケーションを支える基盤データを含む隠れたJSONデータ(State JSONとも呼ばれる)を抽出することです。Markdown出力の各行は、元のページの正確なソースにリンクされており、エージェントに検証可能なコンテキストを提供します。
Expandは、Fetch以外にもさまざまなビルディングブロックを提供します。IrisとX-Rayはブラウザページで動作し、Wayback Machineは取得したページの再生可能なスナップショットを作成します。Highlightsは、特定の質問に答えるためにページ上の関連スニペットを特定し、エージェントが全体の文書を処理する必要を減らします。Searchは、エージェントが取得する価値のあるページを見つけるのを助け、Crawlはエージェントがウェブサイト全体を処理できるようにします。WebSyncは、サイトの変更を継続的に監視し、エージェントを最新の状態に保ちます。
このプラットフォームは、開発者とエージェントのために設計されており、CLI、TypeScript SDK、および直接APIを介して統合を提供します。一般的なボットチェックやCAPTCHA(Cloudflare、Turnstile、reCAPTCHAなど)を自動的に処理しますが、サインインやペイウォールを回避することはありません。料金はクレジットベースで、1,000クレジットが1ドルです。標準のFetch操作は1クレジットで、Highlights、変換された文書、ビジョンモデル、ビデオ、文字起こしされた音声などの機能には追加料金がかかります。システムは、失敗した試行ではなく、配信されたコンテンツに対してのみ料金を請求します。
Expandは、AIエージェントにウェブのより完全で正確な理解を提供することを目指しており、単純なHTML解析を超えて、レンダリングされたページの視覚的およびデータに富んだコンテキストを解釈できるようにします。この能力は、エージェントが複雑なタスクを実行し、オンライン情報と効果的に対話するために不可欠です。
- カテゴリーAI エージェントビルダー
- 料金モデルクレジット制
- デプロイクラウド
- プラットフォームWeb
Expandの主要機能
実際のブラウザレンダリング:URLを実際のブラウザで開き、HTMLだけでなくレンダリングされたページを処理します。
構造化されたMarkdown出力:ウェブページをMarkdownとして返し、テーブル、アイコン、レイアウトを保持します。
隠れたJSON抽出(State JSON):動的ウェブページから基盤データを抽出します。
ソースリンク:各出力行は元のページの正確な位置にリンクされています。
APIアクセス:エージェントがウェブコンテンツと対話するための堅牢なAPIを提供します。
SDKおよびCLI:統合のためにTypeScript SDKとコマンドラインインターフェースを提供します。
ボットおよびCAPTCHA回避:公共ページのために一般的なボットチェックやCAPTCHAを自動的に処理します。
ページスナップショット:取得したブラウザページの再生可能なスナップショットを作成します。
コンテンツハイライト:特定の質問に答える関連スニペットを特定し抽出します。
ウェブサイトクロール:エージェントが包括的なデータ収集のためにウェブサイト全体をクロールできるようにします。
ウェブ変更監視(WebSync):ウェブサイトの更新や変更を継続的に監視します。
クレジットベースの請求:配信された出力に対して前払いのクレジットに基づいて請求します。
プログレッシブディスクロージャー:効率のためにメインコンテンツを最初に返し、保持されたデータへのポインタを提供します。
引用リンク:検証のためにハイライトされたスニペットの引用URLを提供します。
エージェント設定ガイド:簡単なエージェント構成のために/start.mdを提供します。
Expandの使い方は?
エージェント接続:/start.md、CLI、TypeScript SDK、またはAPIを使用してExpandをエージェントに統合します。
URL送信:ページのURLをExpandのFetch APIに送信します。
構造化出力を受け取る:レンダリングされたページをMarkdown、State JSON、およびスナップショットとして受け取ります。
コンテンツ処理:構造化出力をエージェントタスクに利用し、コンテキストのためにソースリンクを活用します。
特定の情報を抽出:Highlightsを使用して質問に答えるスニペットを見つけるか、JSONモードを使用して別々のフィールドを取得します。
ウェブサイトを監視:Crawlを実装してサイト全体を処理するか、WebSyncを使用して継続的な変更検出を行います。
Expandの使用例
- AIエージェントのウェブアクセス
- 構造化データ抽出
- 自動ウェブスクレイピング
- コンテンツ要約
- ウェブサイト変更監視
- 歴史的ウェブコンテンツ分析
- 開発者ツール統合
- エージェントコンテキストの強化
- 研究およびデータ収集
- 競争情報





