Descrição
Expand é um laboratório de pesquisa aplicada que desenvolve ferramentas que permitem que agentes de IA acessem e compreendam a web de maneira semelhante aos humanos. Ferramentas tradicionais de raspagem da web costumam depender da análise de HTML bruto, o que pode perder o contexto visual crucial, o layout e os dados ocultos que só são aparentes em uma página renderizada em um navegador. Expand aborda isso abrindo qualquer URL em um navegador real, permitindo que seu modelo Iris analise a página totalmente renderizada.
Ler mais
O produto principal, Fetch, recebe uma URL e retorna o conteúdo da página como Markdown estruturado, preservando tabelas, ícones e layout geral. Crucialmente, ele também extrai dados JSON ocultos, referidos como State JSON, que frequentemente contêm os dados subjacentes que alimentam aplicações web dinâmicas. Cada linha da saída em Markdown está vinculada ao seu local exato na página original, fornecendo aos agentes um contexto verificável para suas leituras.
Expand oferece vários blocos de construção além do Fetch. Iris e X-Ray trabalham em páginas de navegador, enquanto a Wayback Machine cria Snapshots replays de páginas obtidas. Highlights identifica trechos relevantes em uma página para responder a perguntas específicas, reduzindo a necessidade de os agentes processarem documentos inteiros. Search ajuda os agentes a encontrar páginas que valem a pena serem obtidas, e Crawl permite que os agentes processem sites inteiros. WebSync monitora continuamente sites em busca de mudanças, mantendo os agentes atualizados.
A plataforma é projetada para desenvolvedores e agentes, oferecendo integração via CLI, SDK TypeScript e uma API direta. Ela lida automaticamente com verificações comuns de bots e CAPTCHAs como Cloudflare, Turnstile e reCAPTCHA para páginas públicas, embora não contorne logins ou paywalls. A precificação é baseada em créditos, com 1.000 créditos custando $1. Uma operação padrão de Fetch custa 1 crédito, com custos adicionais para recursos como Highlights, documentos convertidos, modelos de visão, vídeo e áudio transcrito. O sistema cobra apenas pelo conteúdo entregue, não por tentativas falhadas.
Expand visa capacitar agentes de IA com uma compreensão mais completa e precisa da web, indo além da simples análise de HTML para interpretar o contexto visual e rico em dados das páginas renderizadas. Essa capacidade é vital para que os agentes realizem tarefas complexas e interajam com informações online de forma tão eficaz quanto os humanos.
- CategoriaCriadores de agentes de IA
- Modelo de preçosBaseado em créditos
- ImplantaçãoNuvem
- PlataformasWeb
Recursos principais de Expand
Renderização em Navegador Real: Abre URLs em um navegador real para processar páginas renderizadas, não apenas HTML.
Saída em Markdown Estruturado: Retorna páginas da web como Markdown, preservando tabelas, ícones e layout.
Extração de JSON Oculto (State JSON): Extrai dados subjacentes de páginas web dinâmicas.
Vinculação de Fonte: Cada linha de saída está vinculada ao seu local exato na página original.
Acesso à API: Fornece uma API robusta para os agentes interagirem com o conteúdo da web.
SDKs e CLI: Oferece SDK TypeScript e Interface de Linha de Comando para integração.
Contorno de Bot e CAPTCHA: Lida automaticamente com verificações comuns de bots e CAPTCHAs para páginas públicas.
Snapshots de Página: Cria Snapshots replays de páginas de navegador obtidas.
Destaque de Conteúdo: Identifica e extrai trechos relevantes que respondem a perguntas específicas.
Raspagem de Sites: Permite que os agentes rastreiem sites inteiros para coleta abrangente de dados.
Monitoramento de Mudanças na Web (WebSync): Monitora continuamente sites em busca de atualizações e mudanças.
Cobrança Baseada em Créditos: Cobra com base em créditos pré-pagos para saída entregue, não por tokens.
Divulgação Progressiva: Retorna o conteúdo principal primeiro, com apontadores para dados retidos para eficiência.
Links de Citação: Fornece URLs de citação para trechos destacados para verificação.
Guias de Configuração de Agentes: Oferece /start.md para fácil configuração de agentes.
Como usar Expand?
Conectar Agente: Use /start.md, CLI, SDK TypeScript ou API para integrar Expand ao seu agente.
Enviar URL: Envie uma URL de página para a API Fetch do Expand.
Receber Saída Estruturada: Receba a página renderizada de volta como Markdown, State JSON e um Snapshot.
Processar Conteúdo: Utilize a saída estruturada para tarefas do agente, aproveitando os links de fonte para contexto.
Extrair Específicos: Use Highlights para encontrar trechos que respondem a perguntas ou Modo JSON para campos separados.
Monitorar Websites: Implemente Crawl para processamento completo do site ou WebSync para detecção contínua de mudanças.
Casos de uso de Expand
- Acesso à Web por Agente de IA
- Extração de Dados Estruturados
- Raspagem Web Automatizada
- Sumarização de Conteúdo
- Monitoramento de Mudanças em Websites
- Análise de Conteúdo Web Histórico
- Integração de Ferramentas para Desenvolvedores
- Contexto Aprimorado para Agentes
- Pesquisa e Coleta de Dados
- Inteligência Competitiva





