Descrição
lakeFS é um sistema de controle de versão de dados de código aberto projetado para transformar seu armazenamento de objetos em repositórios semelhantes ao Git. Isso permite que os usuários gerenciem seus lagos de dados com a mesma precisão e controle que gerenciam o código, utilizando branches, commits e merges. A plataforma é particularmente benéfica para equipes de IA e engenharia de dados, fornecendo um plano de controle que garante a governança de dados, reprodutibilidade e redução da fricção de acesso.
Ler mais
Com lakeFS, os usuários podem realizar operações semelhantes ao Git em dados, como branching e merging, o que facilita a criação de pipelines de dados reprodutíveis e a imposição de controles de qualidade de dados. Este sistema é construído sobre uma arquitetura altamente escalável que gerencia o ciclo de vida dos dados, a proveniência e o acesso unificado, tornando-o ideal para equipes de IA e engenharia de dados.
lakeFS suporta uma ampla gama de integrações com ferramentas e tecnologias populares de engenharia de dados, incluindo Spark, Delta Lake, AWS CLI, Airflow e mais. É compatível com todos os principais provedores de nuvem, como AWS, Azure e GCP, garantindo que os dados e metadados permaneçam armazenados com segurança dentro da VPC do usuário.
A plataforma oferece uma versão gratuita de código aberto, bem como um serviço gerenciado em nuvem. Ela é projetada para simplificar auditorias regulatórias, fornecendo evidências integradas e controles de dados preventivos, reduzindo os riscos de conformidade. lakeFS também aumenta a produtividade ao permitir que as equipes testem alterações em pipelines e modelos de forma isolada, sem duplicação de dados, e revertam instantaneamente de incidentes de dados.
No geral, lakeFS capacita as organizações a desbloquear a gestão de dados em escala, acelerando iniciativas de IA e ML ao aplicar práticas comprovadas de engenharia à gestão de dados.
- CategoriaMLOps e implantação de modelos
- Modelo de preçosFreemium
- ImplantaçãoNuvem
- PlataformasAWS, Azure, GCP
Recursos principais de lakeFS
Controle de versão de dados de código aberto
Operações semelhantes ao Git para dados
Branch e merge de dados
Pipelines de dados reprodutíveis
Controles de qualidade de dados
Integra-se com ferramentas de dados populares
Suporta AWS, Azure, GCP
Branching sem cópia
Controle de acesso baseado em funções
Logs de auditoria
Como usar lakeFS?
Configurar: Configure lakeFS com seu armazenamento de objetos
Usar: Realize operações semelhantes ao Git em seus dados
Integrar: Conecte-se com suas ferramentas de dados existentes
Otimizar: Melhore a governança de dados e a reprodutibilidade
Casos de uso de lakeFS
- Governança de Dados
- Treinamento de IA
- Versionamento de Dados
- Teste de Pipeline
- Prontidão para Auditoria
