Self-service contrôlé des données pour les utilisateurs.
Pour les utilisateurs, il peut s'avérer frustrant de devoir attendre que de nouveaux jeux de données passent par un processus de mise à disposition long, complexe et coûteux avant de pouvoir les explorer. Plus ce délai est long, plus cela retarde l'exploitation par l'entreprise des informations dissimulées dans ces données. C'est ici qu'entre en jeu le provisionnement des données en self-service.
Ab Initio fournit des frameworks d'injection de données pilotés par les métadonnées pour offrir en self-service aux utilisateurs autorisés (data scientists...) l'utilisation de nouvelles sources de données sans recourir aux équipes de développement D'un simple clic, les data scientists peuvent placer des jeux de données dans des zones ayant fait l'objet d'une mise en conformité ou dans des projets dans le cloud avec des dispositifs appropriés de protection des données. La solution Ab Initio peut masquer ou anonymiser par jeton les données personnelles dans les flux avant qu'elles ne soient disponibles dans ces environnements. Lorsque les données arrivent sur AWS, Google Cloud ou Azure, elles sont masquées et protégées en fonction des habilitations spécifiques du data scientist sur ces données, ainsi que des classifications et règles de protection attribuées automatiquement à chaque champ. En cas de besoin, il est possible d'ajouter des workflows d'approbation accompagnés d'une piste d'audit exhaustive des actions réalisées par tous les utilisateurs. Ce processus permet aux entreprises de fournir un accès agile aux données tout en assurant les contrôles et vérifications nécessaires.
Parfois, contrôler les données ne suffit pas.
Pour une grande institution financière américaine, les données inutilisables posaient problème. Ses capacités de gestion des données étaient dispersées dans l'entreprise, et différents services de la banque utilisaient des systèmes distincts.
Nombre de ces systèmes avaient été développés en interne à l'aide de logiciels open source et de divers produits de gestion de données. Un service entier disposait même d'un système informatique totalement distinct. Sans système ou méthode standard de gestion de la qualité des données, les résultats n'étaient pas fiables et l'institution n'était pas en mesure de répondre aux questions des autorités de régulation.
En travaillant avec Ab Initio, l'institution financière a commencé à normaliser ses opérations, et à éliminer toutes les interfaces point à point et les entrepôts de données obsolètes. Elle a créé un data lake en tirant parti des capacités d'Ab Initio en matière de gouvernance, de qualité des données et de lignage des données. Ab Initio propose une interface intuitive, de type tableur, pour développer des règles métier qui a grandement simplifié le processus d'élaboration des règles de qualité des données et leur mise en production.
Mais une fois les anomalies identifiées, il fallait pouvoir les traiter. Les quantités de données gérées par les institutions financières sont telles, que même lorsqu'un pourcentage infime de ces données présente des problèmes, cela représente beaucoup de travail. Les équipes chargées de corriger ces problèmes peuvent être vite dépassées devant l'ampleur de la tâche.
Là encore, Ab Initio a pu intervenir. Avec Ab Initio, l'institution financière a conçu une solution complète de gestion de la qualité des données. Le nouveau système ne se contente pas d'appliquer les règles de qualité des données : il lui a permis de gérer l'ensemble du processus d'identification, de suivi et de correction des problèmes liés à ses données et à ses règles de validation sans solliciter les développeurs.
Lorsqu'un enregistrement n'est pas conforme à une règle de validation, le système vérifie s'il existe déjà un ticket pour cette anomalie spécifique. Si c'est le cas, l'enregistrement est ajouté au ticket existant. Sinon, un nouveau ticket est créé. Celui-ci inclut tous les enregistrements qui ont échoué pour ce test de validation. Ab Initio attribue ce ticket à une personne en fonction des données de référence. Celle-ci examine les enregistrements joints et détermine si les données présentent un problème ou si la règle contenait une erreur.
Si le problème concerne la règle de validation le ticket est réaffecté. S'il concerne les données, le propriétaire des données est responsable de leur correction et en est immédiatement informé. Les corrections doivent être consignées et vérifiées. Avant que l'institution financière adopte la solution Ab Initio, il était impossible d'affecter des responsabilités à un niveau aussi granulaire. Désormais, c'est possible.
Avec son nouveau système en place, l'institution peut identifier les problèmes de qualité des données, les corriger, puis vérifier la correction, le tout sans surcharger les équipes concernées. Les problèmes liés aux données sont transmis à leur propriétaire, et les erreurs de règles sont transmises aux experts métier qui testent et déboguent les règles. Grâce à Ab Initio, cette institution financière a ainsi pu faire l'expérience d'une gestion de la qualité des données de premier ordre.