Eventual

A Eventual está revolucionando a forma como desenvolvedores e cientistas de dados trabalham com dados complexos e em grande escala. Em seu cerne está o Daft, um inovador motor de consulta distribuído de código aberto, projetado especificamente para a era da IA multimodal. Apoiada por uma rodada de financiamento Série A de US$ 30 milhões, a Eventual visa fornecer a tecnologia fundamental que torna o processamento de dados multimodais simples e confiável uma realidade, assim como o SQL fez para dados tabulares décadas atrás.

A plataforma aborda um gargalo crítico no desenvolvimento de IA: os engenheiros muitas vezes gastam até 70% de seu tempo lutando com a infraestrutura em vez de construir modelos. A Eventual, com seu motor Daft, os liberta dessa luta. Permite o processamento de petabytes de diversos tipos de dados — incluindo imagens, vídeos, áudio, texto e tabelas estruturadas — usando consultas declarativas simples que escalam perfeitamente de um laptop para um cluster massivo.

Como usar o Eventual

A tecnologia principal da Eventual, o Daft, foi projetada para a acessibilidade do desenvolvedor. Veja como começar:

1. Instalação: Como uma biblioteca nativa de Python, o Daft pode ser facilmente instalado via pip: pip install daft.
2. Conexão de Dados: Conecte-se aos seus dados onde quer que eles residam, seja em armazenamento em nuvem (AWS S3, GCS, Azure Blob Storage), formatos modernos de data lakehouse (Delta Lake, Apache Iceberg, Hudi) ou catálogos empresariais (AWS Glue, Unity Catalog).
3. Consulta de Dados: Use a API intuitiva e semelhante ao Pandas do Daft para escrever consultas. A API é declarativa, o que significa que você define o que quer fazer, e o poderoso motor do Daft, baseado em Rust, otimiza a execução. Ele suporta operações familiares para filtrar, juntar e transformar dados em diferentes modalidades.
4. Aplicação de Modelos de IA: Integre suas funções e modelos Python de frameworks como PyTorch, NumPy e HuggingFace diretamente em seus pipelines de dados usando Funções Definidas pelo Usuário (UDFs). O mecanismo de cópia zero do Daft garante que seu código seja executado eficientemente ao lado de seus dados, minimizando a sobrecarga.
5. Escalonamento: Desenvolva seu código localmente em seu laptop. Quando precisar processar conjuntos de dados maiores, o mesmo código pode ser executado em um cluster distribuído usando um executor como o Ray, sem nenhuma modificação.
6. Serviço Gerenciado: Para empresas que buscam uma experiência totalmente gerenciada e sem servidor, a Eventual oferece uma versão comercial. Os usuários podem se inscrever para acesso antecipado através do site oficial para delegar completamente o gerenciamento da infraestrutura.

Recursos principais do Eventual

• Processamento Unificado de Dados Multimodais: Um único framework coeso para lidar com tabelas estruturadas, texto não estruturado, imagens, vídeos, áudio e tensores.
• Desempenho Alimentado por Rust: Construído em Rust para velocidade excepcional, execução vetorizada e gerenciamento eficiente de memória. Ele supera consistentemente os sistemas tradicionais, usando até 5x menos memória.
• Nativo de Python, Sem JVM: Evita a complexidade, os tempos de inicialização lentos (20x mais rápido) e as dores de cabeça de ajuste de memória associadas a sistemas baseados em Java como o Spark.
• Escalonamento Contínuo: Escreva o código uma vez e execute-o em qualquer lugar — de uma única máquina a um grande cluster distribuído — sem alterações.
• Conectividade Universal de Dados: Conecta-se nativamente a uma ampla gama de fontes e formatos de dados, incluindo os principais provedores de nuvem e tecnologias de data lakehouse.
• Integração sem Fricção com o Ecossistema de ML: Funciona diretamente com bibliotecas populares de ML como PyTorch, Pandas, NumPy e HuggingFace.
• Inteligente e Confiável: Apresenta gerenciamento de memória inteligente para evitar erros de falta de memória e padrões sensatos para eliminar dores de cabeça de configuração, garantindo implantações confiáveis.

Casos de uso para o Eventual

A Eventual e seu motor Daft são confiáveis por empresas líderes como Amazon, Anthropic e CloudKitchens para cargas de trabalho de dados críticas.

• Processamento de Documentos em Larga Escala: Crie embeddings de texto a partir de coleções massivas de documentos para aplicações como busca semântica, RAG (Geração Aumentada por Recuperação) e classificação de texto.
• ETL de IA Multimodal: Construa pipelines robustos de ETL (Extração, Transformação, Carga) que processam e enriquecem tipos de dados mistos, como anotar imagens com texto gerado por um modelo de visão.
• Deduplicação de Conteúdo: Realize deduplicação fuzzy em escala em terabytes de dados de texto ou imagem, como demonstrado pela Together AI, que alcançou uma aceleração de 10x.
• Gerenciamento de Catálogo de Dados: Gerencie e processe eficientemente catálogos de dados em escala de exabytes, como provado pela Amazon, que economizou mais de 40.000 anos de tempo de computação de vCPU anualmente em um trabalho crítico.
• Alternativa ao Spark para Plataformas de ML: Sirva como uma alternativa mais performática e amigável ao desenvolvedor ao Apache Spark, unificando a infraestrutura e melhorando tanto o desempenho da consulta quanto a produtividade.

Vantagens do Eventual

A principal vantagem do Eventual é sua capacidade de aumentar drasticamente a produtividade do desenvolvedor e desbloquear novas capacidades de IA. Ao abstrair a complexa engenharia de sistemas distribuídos, permite que as equipes se concentrem na inovação. A arquitetura baseada em Rust oferece desempenho e eficiência inigualáveis, levando a economias de custo significativas na infraestrutura em nuvem. Sua abordagem unificada para dados multimodais quebra os silos de dados, permitindo a criação de sistemas de IA mais sofisticados e poderosos que antes eram impraticáveis de construir.

Preços e planos

A Eventual opera em um modelo freemium. Seu motor principal, Daft, é totalmente de código aberto e está disponível gratuitamente. Os desenvolvedores podem instalá-lo e usá-lo sem nenhum custo. Para organizações que procuram uma solução gerenciada, sem servidor e de nível empresarial, a Eventual oferece um produto comercial. Esta versão gerenciada está atualmente disponível através de um programa de acesso antecipado, e as partes interessadas podem se inscrever no site da Eventual. Detalhes específicos de preços para o serviço gerenciado ainda não foram divulgados publicamente.