Connectors Analyzer
Détectez les problèmes de structure et de typage avant qu'ils n'atteignent une table.
Qu'est-ce que l'Analyzer ?
L'Analyzer est le premier contrôle qualité appliqué aux données entrantes. Il s'exécute sur une source enregistrée avant que ces données n'atteignent une table de projet, de sorte que les problèmes de structure, de typage et de formatage sont détectés à l'entrée plutôt qu'après qu'un chargement les a écrits dans le Lakehouse.
Il remplit deux fonctions.
L'extraction des métadonnées lit la forme des objets sources : les champs qu'ils exposent, leurs types et les volumes concernés. Chaque action de chargement en aval s'appuie sur ces métadonnées, une source doit donc être analysée avant que ses objets puissent être chargés.
Les règles de blueprint constituent la couche de nettoyage appliquée par-dessus. Un blueprint est un ensemble nommé de conditions et de transformations appliqué à un objet source au fil du passage de ses données, afin que les formats de date, la casse, la précision numérique et la gestion des valeurs nulles suivent un standard unique pour chaque source alimentant le projet.
Extrayez d'abord les métadonnées. Les règles de blueprint s'écrivent sur des champs que l'Analyzer a déjà trouvés.
Extraire les métadonnées→
Lisez les champs, types et volumes qu'un objet source expose.
Règles de blueprint→
Normalisez les valeurs entrantes à l'aide de conditions et de transformations.
Aller plus loin
Si vous avez besoin d'une formation ou d'une assistance technique pour la mise en oeuvre de nos solutions, contactez votre commercial ou cliquez sur ce lien pour obtenir un devis et demander une analyse personnalisée de votre projet à nos experts de l’équipe Professional Services.
Posez vos questions, faites-nous part de vos commentaires et interagissez directement avec l’équipe qui développe la Data Platform sur le canal Discord dédié.
Si vous avez besoin d'une assistance concernant vos services OVHcloud, créez une demande depuis notre centre d'aide.
Rejoignez notre communauté d'utilisateurs.