Lakehouse Manager
Datasets, tables, buckets, lineage et accès au niveau des colonnes, dans un seul store.
Qu'est-ce que le Lakehouse Manager ?
Le Lakehouse Manager est l'endroit où vivent les données d'un projet. C'est un lakehouse serverless construit sur Apache Iceberg, unifiant le stockage data lake et data warehouse dans un seul service : aucun cluster à dimensionner, et un format de table ouvert unique pour les fichiers bruts comme pour les tables analytiques.
Les données sont organisées en datasets, qui regroupent des tables de la même façon qu'un schéma regroupe des relations. Les tables portent des attributs avec leurs propres types et contraintes, et chaque écriture est versionnée, de sorte que Time Travel peut lire une table telle qu'elle se présentait à un instant antérieur. Les buckets contiennent des fichiers non structurés et semi-structurés aux côtés de ces tables, et l'Explorer permet de parcourir les deux.
Deux capacités s'appliquent à l'ensemble du store. Le lineage cartographie la façon dont les données circulent dans le projet, depuis les pipelines qui alimentent une table jusqu'aux tables construites à partir d'elle. Les policy tags appliquent un contrôle d'accès jusqu'au niveau de l'attribut individuel, évalué via des conditions CEL par rapport à l'identité IAM de l'appelant.
Les tables sont alimentées par le Data Processing Engine à partir de sources enregistrées dans Connectors, et lues par l'Analytics Manager.
Découvrez les concepts clés du Lakehouse Manager
Concepts clés→
Datasets, tables et le modèle Iceberg qui les sous-tend.
Datasets→
Regroupez des tables et contrôlez ce qu'une requête peut atteindre.
Tables→
Créez des tables, définissez des champs d'identifiant et des partitions.
Attributs→
Types, contraintes et valeurs par défaut sur les colonnes de table.
Buckets→
Stockage objet pour les fichiers aux côtés des tables.
Explorer→
Parcourez directement les tables et le contenu des buckets.
Lineage→
Voyez ce qui alimente une table et ce qui en est construit.
Policy tags→
Contrôle d'accès au niveau de l'attribut via des conditions CEL.
Aller plus loin
Si vous avez besoin d'une formation ou d'une assistance technique pour la mise en oeuvre de nos solutions, contactez votre commercial ou cliquez sur ce lien pour obtenir un devis et demander une analyse personnalisée de votre projet à nos experts de l’équipe Professional Services.
Posez vos questions, faites-nous part de vos commentaires et interagissez directement avec l’équipe qui développe la Data Platform sur le canal Discord dédié.
Si vous avez besoin d'une assistance concernant vos services OVHcloud, créez une demande depuis notre centre d'aide.
Rejoignez notre communauté d'utilisateurs.