Starburst

Starburst est une plateforme de data lakehouse sophistiquée conçue pour libérer la valeur des données distribuées pour l'analyse et l'intelligence artificielle. Construite sur le puissant moteur de requête open-source Trino (anciennement PrestoSQL), Starburst fournit un point d'accès unique et unifié aux données, quel que soit leur emplacement — que ce soit dans des data lakes cloud, des entrepôts de données sur site ou des environnements multi-cloud hybrides. Le principe fondamental de Starburst est d'amener la requête aux données, et non l'inverse. Cela élimine le besoin de processus de déplacement de données et d'ETL coûteux, complexes et lents, permettant aux organisations d'analyser leurs données sur place, en temps quasi réel.

La plateforme est conçue pour une haute performance et une scalabilité massive, capable d'exécuter des requêtes SQL complexes sur des ensembles de données à l'échelle du pétaoctet avec des milliers d'utilisateurs simultanés. Elle sert de couche de requête et d'accès dans les architectures de données modernes comme le data lakehouse et le data mesh, permettant aux équipes de données de construire des modèles d'IA plus rapides et plus précis et de fournir des informations de business intelligence plus rapidement.

Comment utiliser Starburst

Démarrer avec Starburst est conçu pour être flexible et s'aligner sur la stratégie d'infrastructure de votre organisation. Le processus implique généralement ces étapes :

1. Choisissez votre modèle de déploiement : Choisissez parmi deux offres principales. Starburst Galaxy est une plateforme SaaS entièrement gérée, idéale pour les équipes souhaitant démarrer rapidement dans le cloud sans gérer l'infrastructure. Starburst Enterprise est un progiciel autogéré pour un déploiement dans vos propres centres de données sur site ou cloud privé, offrant un contrôle et une personnalisation maximum.
2. Connectez vos sources de données : Utilisez la vaste bibliothèque de plus de 50 connecteurs de Starburst pour vous lier à vos diverses sources de données. Cela inclut les data lakes (Amazon S3, Google Cloud Storage, Azure Data Lake Storage), les entrepôts de données (Snowflake, Redshift), les bases de données relationnelles (PostgreSQL, MySQL), les bases de données NoSQL (MongoDB, Cassandra), et plus encore.
3. Découvrez et gouvernez les données : Utilisez les outils de découverte de données de la plateforme pour rechercher et comprendre les ensembles de données disponibles sur toutes les sources connectées. Mettez en œuvre des politiques de sécurité et de gouvernance robustes en utilisant les fonctionnalités intégrées de contrôle d'accès basé sur les rôles (RBAC) et de contrôle d'accès basé sur les attributs (ABAC) pour garantir un accès sécurisé et conforme aux données.
4. Interrogez et analysez : Les data scientists, les analystes et les applications d'IA peuvent désormais utiliser le SQL ANSI standard pour exécuter des requêtes sur n'importe quelle combinaison de sources de données connectées. Les requêtes sont exécutées par le moteur distribué Trino, fournissant des résultats rapides pour l'analyse ad-hoc, les tableaux de bord BI et la préparation des données pour l'apprentissage automatique.

Fonctionnalités principales de Starburst

• Moteur de requête haute performance : Propulsé par Trino, il offre un traitement massivement parallèle (MPP) pour des requêtes SQL ultra-rapides sur de grands ensembles de données.
• Fédération de données : Une seule requête peut joindre des données de plusieurs sources disparates (par exemple, un data lake et une base de données relationnelle) sans déplacement de données.
• Connectivité étendue : Une vaste bibliothèque de plus de 50 connecteurs pour accéder aux données où qu'elles se trouvent, avec un support natif pour les formats de table ouverts comme Apache Iceberg, Delta Lake et Apache Hudi.
• Warp Speed : Une technologie propriétaire d'indexation et de mise en cache intelligente qui accélère considérablement les requêtes (jusqu'à 7x) et réduit les coûts de calcul en créant et en gérant automatiquement des vues matérialisées.
• Sécurité de niveau entreprise : Propose un contrôle d'accès fin, une sécurité au niveau des colonnes, le masquage des données et un audit complet pour répondre aux exigences de conformité strictes.
• Déploiement flexible : Disponible en tant que service cloud entièrement géré (Starburst Galaxy) ou en tant que plateforme autogérée pour les environnements sur site et hybrides (Starburst Enterprise).
• Découverte et catalogage de données : Des outils intégrés pour aider les utilisateurs à trouver, comprendre et faire confiance facilement aux données dont ils ont besoin pour leur analyse.

Cas d'utilisation pour Starburst

Starburst est polyvalent et répond à plusieurs défis de données critiques :

• IA et Apprentissage Automatique : Fournit aux modèles d'IA un accès rapide et unifié à toutes les données de l'entreprise, réduisant considérablement le temps consacré à la préparation des données et à l'ingénierie des fonctionnalités.
• Analyse de Data Lakehouse : Permet aux organisations de construire et d'interroger un data lakehouse haute performance sur un stockage d'objets cloud abordable, atteignant des performances similaires à celles d'un entrepôt de données pour une fraction du coût.
• BI et Analyse Interactive : Alimente les tableaux de bord interactifs et les requêtes ad-hoc pour les utilisateurs métier, fournissant des informations en quelques secondes ou minutes, et non en heures ou en jours.
• Implémentation de Data Mesh : Sert de plan de requête et d'accès aux données universel dans une architecture de data mesh, permettant aux équipes de domaine de découvrir et de consommer facilement des produits de données de toute l'organisation.
• Analyse Multi-Cloud et Hybride : Permet d'interroger et d'analyser des données réparties sur différents fournisseurs de cloud (AWS, Azure, GCP) et systèmes sur site sans transferts de données coûteux.

Avantages de Starburst

Les principaux avantages de l'adoption de Starburst incluent :

• Vitesse : Réduit considérablement les temps de requête, permettant une prise de décision et une innovation plus rapides.
• Rentabilité : Élimine la duplication coûteuse des données et réduit la dépendance aux entrepôts de données traditionnels coûteux et aux pipelines ETL complexes.
• Simplicité : Fournit un point d'accès unique et un dialecte SQL unique pour toutes les données, simplifiant la pile de données et démocratisant l'accès aux données.
• Flexibilité : Fonctionne avec vos données et votre infrastructure existantes, évitant le verrouillage par le fournisseur et soutenant une architecture ouverte et pérenne.
• Gouvernance améliorée : Centralise la sécurité des données et le contrôle d'accès, facilitant la gestion de la conformité et la réduction des risques.

Tarification et plans

Starburst propose une structure de tarification flexible adaptée à différents besoins :

• Starburst Galaxy : Fonctionne sur un modèle freemium et basé sur la consommation. Il comprend un essai gratuit avec jusqu'à 500 $ de crédits d'utilisation pour permettre aux nouveaux utilisateurs d'explorer les capacités de la plateforme. Après l'essai, la tarification est basée sur l'utilisation, offrant une scalabilité rentable.
• Starburst Enterprise : Cette option autogérée est tarifée via des licences d'entreprise personnalisées. Les parties intéressées sont encouragées à contacter l'équipe de vente de Starburst pour un devis personnalisé et pour demander une clé de licence d'essai.