Connectors Analyzer
Détectez les problèmes de structure et de typage avant qu'ils n'atteignent une table.
Qu'est-ce que l'Analyzer ?
L'Analyzer est le premier contrôle qualité appliqué aux données entrantes. Il s'exécute sur une source enregistrée avant que ces données n'atteignent une table de projet, de sorte que les problèmes de structure, de typage et de formatage sont détectés à l'entrée plutôt qu'après qu'un chargement les a écrits dans le Lakehouse.
Il remplit deux fonctions.
L'extraction des métadonnées lit la forme des objets sources : les champs qu'ils exposent, leurs types et les volumes concernés. Chaque action de chargement en aval s'appuie sur ces métadonnées, une source doit donc être analysée avant que ses objets puissent être chargés.
Les règles de blueprint constituent la couche de nettoyage appliquée par-dessus. Un blueprint est un ensemble nommé de conditions et de transformations appliqué à un objet source au fil du passage de ses données, afin que les formats de date, la casse, la précision numérique et la gestion des valeurs nulles suivent un standard unique pour chaque source alimentant le projet.
Extrayez d'abord les métadonnées. Les règles de blueprint s'écrivent sur des champs que l'Analyzer a déjà trouvés.
Extraire les métadonnées→
Lisez les champs, types et volumes qu'un objet source expose.
Règles de blueprint→
Normalisez les valeurs entrantes à l'aide de conditions et de transformations.
Aller plus loin
Pour une formation ou une assistance technique sur la mise en œuvre de nos solutions, contactez votre commercial ou consultez la page Professional Services pour obtenir un devis et faire analyser votre projet par nos experts.
Posez vos questions, faites-nous part de vos commentaires et interagissez directement avec l’équipe qui développe la Data Platform sur le canal Discord dédié.
Si vous avez besoin d'une assistance concernant vos services OVHcloud, créez une demande depuis notre centre d'aide.
Rejoignez notre communauté d'utilisateurs.