Tout ce qu’il faut savoir sur l’enrichissement des données

La plupart des données brutes générées par les entreprises sont souvent difficiles à utiliser dans leur format d’origine, en particulier si elles sont partagées en dehors de l’équipe qui les a créées. Par exemple, elles peuvent ne pas répondre aux exigences de gouvernance en matière d’exactitude, d’exhaustivité, de fiabilité, d’actualité ou de cohérence/standardisation. Tous ces éléments ont une incidence sur la qualité des données, entraînant des erreurs qui empêchent leur compréhension et leur utilisation généralisées, ce qui réduit considérablement leur valeur.

L’enrichissement des données permet de relever ce défi, en garantissant que les données sont de haute qualité, fiables et qu’elles ajoutent de la valeur, par exemple en les recoupant avec d’autres sources de données. Qu’est-ce que l’enrichissement des données et comment l’intégrer dans vos initiatives en matière de données ? Ce blog explique comment enrichir vos données et maximiser leur valeur.

Les entreprises produisent et consultent aujourd’hui de plus en plus de données. Cependant, les données en elles-mêmes ne créent pas de valeur – ce n’est que lorsqu’elles sont partagées, comprises et réutilisées qu’elles maximisent leur impact.

À la base, les données brutes peuvent être simplement un tableau de chiffres sans contexte. Il est donc difficile pour les non-spécialistes de comprendre à quoi les chiffres font référence, quelle est la fréquence de collecte et comment ils sont liés à d’autres ensembles de données. 

Il en résulte quatre problèmes :

• Un manque de confiance dans les données qui empêche leur utilisation
• Un manque de contexte qui rend les données plus difficiles à comprendre
• Une mauvaise gouvernance des données, qui entraîne des incohérences et un manque d’efficacité
• Des problèmes potentiels de conformité, car la confidentialité n’est pas respectée. 

Pour combler ce fossé, les organisations doivent améliorer la qualité des données et les rendre plus faciles à comprendre grâce à des outils et des services d’enrichissement des données. En d’autres termes, l’enrichissement des données est un processus de gestion des données qui améliore la qualité des données existantes en y ajoutant des informations supplémentaires.

Les données enrichies offrent un large éventail d’avantages clés :

• Une prise de décision mieux informée, car les employés comprennent exactement ce que les données couvrent et ce qu’elles signifient pour eux.
• Une plus grande utilisation des données en dehors des spécialistes, car les gens font confiance aux données et se sentent en confiance pour les utiliser dans le cadre de leur travail.
• Une connaissance plus détaillée des clients, car les données peuvent être recoupées pour fournir une image plus complète des besoins des clients, tout en respectant la confidentialité et en assurant la conformité réglementaire.
• La capacité de créer de nouveaux produits et services de données, générant de nouvelles innovations internes et de nouveaux flux de revenus potentiels avec les clients existants et futurs.
• Des opérations plus efficaces, car les données sont automatiquement enrichies, sans intervention manuelle, ce qui permet de gagner du temps et d’économiser des ressources.   
• Réduction des erreurs/duplications, car les données sont croisées et vérifiées pour mettre en évidence et corriger les erreurs et supprimer les données dupliquées, ce qui permet d’économiser sur les coûts de stockage.

L’enrichissement des données améliore le patrimoine de données en y ajoutant de nouvelles informations qui corrigent les erreurs, ajoutent du contexte et garantissent la conformité :

Correction des erreurs

L’enrichissement des données corrige les erreurs courantes et standardise les formats de données en appliquant des processeurs automatiques au cours de la phase d’enrichissement. Il s’agit notamment de s’assurer que les champs, tels que les adresses et les dates, sont formatés de manière cohérente afin de respecter les règles de gouvernance d’entreprise et les normes ISO. Par exemple, les organisations peuvent s’assurer que les dates sont toutes écrites dans le même format ou que les prénoms et les noms sont toujours dans le bon ordre. Outre le respect des normes de gouvernance, les processeurs permettent de gagner du temps, notamment en reconnaissant automatiquement ce qu’un type de champ (tel qu’une valeur de commande) devrait contenir, et en corrigeant ou en signalant toute anomalie.

Ajouter du contexte

Les données brutes peuvent être difficiles à comprendre, en particulier pour les non-spécialistes. Enrichir les données avec des informations supplémentaires, telles que des emplacements géographiques, ajoute un contexte et aide à approfondir la compréhension et à créer des visualisations convaincantes. Les références croisées et l’ajout de données externes (telles que les bases de données nationales de codes postaux ou les classifications d’entreprises approuvées) garantissent également la normalisation, à la fois pour l’usage interne et pour le partage des données avec l’extérieur.

Garantir la conformité

Les données doivent être protégées en toute sécurité et les informations confidentielles doivent être protégées en permanence contre tout accès non autorisé. L’enrichissement des données contribue donc à la conformité, car les processeurs peuvent être utilisés pour rendre automatiquement anonymes des champs de données spécifiques, tels que les emplacements, s’ils sont sensibles. Cela permet non seulement de protéger les informations, mais aussi de respecter les obligations réglementaires et de préserver la réputation de l’entreprise. 

L’enrichissement des données est un élément clé du pipeline de données, qui fait suite à l’étape d’ingestion/collecte. Une fois enrichies, les données sont ensuite stockées ou mises à disposition via des outils tels que les portails de données ou les data warehouses.

L’enrichissement des données peut être réalisé de deux manières, en utilisant des données internes ou externes :

Utilisation de sources internes pour l’enrichissement des données

Les références croisées avec les sources de données internes sont particulièrement importantes pour la gouvernance des données et le respect des normes de l’entreprise. En appliquant les mêmes processus et le même formatage à toutes les données, les organisations garantissent la cohérence et s’assurent que tout le monde comprend à quoi se réfère un ensemble de données ou un champ qui s’y trouve.

Le recoupement de plusieurs ensembles de données similaires permet également aux organisations de valider leurs analyses et de tirer des conclusions plus approfondies et plus fiables. Par exemple, en enrichissant les informations de votre CRM avec des données de vente, vous pouvez réellement montrer lequel de vos produits génère les bénéfices les plus élevés lorsque les coûts sont soustraits des revenus.

L’enrichissement des données par des informations internes ajoute de la valeur, crée un climat de confiance et garantit une version unique de la vérité, tant dans les différents services qu’à l’extérieur, lorsque l’on travaille avec des partenaires.

Par exemple, la société de distribution d’électricité UK Power Networks travaille en étroite collaboration avec les autorités locales pour les aider à passer à une consommation nette zéro lors de la planification de leurs futurs besoins énergétiques locaux.

Dans ce cadre, une page dédiée à la planification énergétique locale (Local Area Energy Planning – LAEP) a été créée. Elle permet d’accéder à une série d’ensembles de données enrichis d’informations complémentaires provenant de diverses sources afin de faciliter la compréhension. Construite à partir de 153 ensembles de données, la page est divisée en six thèmes communs identifiés par les autorités locales, à savoir la production d’énergie, l’utilisation des sols et l’environnement, l’énergie thermique et les bâtiments, ainsi que la mobilité. Les utilisateurs peuvent cliquer pour explorer 30 cas d’utilisation pertinents, tels que les meilleurs endroits pour implanter de nouvelles installations de recharge de véhicules électriques ou les contraintes de réseau susceptibles d’avoir un impact sur les projets d’énergie renouvelable.

Utilisation de sources externes pour l’enrichissement des données

L’enrichissement des ensembles de données à l’aide d’informations externes/de tiers présente toute une série d’avantages. Au niveau le plus élémentaire, il permet la normalisation des données (par le biais de normes ISO, par exemple), garantissant la cohérence avec des formats largement utilisés et reconnus. Elle permet d’approfondir la compréhension, par exemple en ajoutant des informations sur l’emplacement ou les conditions météorologiques pour donner un meilleur contexte et rendre les données plus faciles à visualiser.

Elle accroît également l’efficacité, car il n’est pas nécessaire de créer et d’entretenir ses propres sources de données si elles sont disponibles à l’extérieur. Par exemple, les gouvernements et les tiers tiennent à jour des répertoires de noms d’entreprises enregistrées, qui peuvent être recoupés pour enrichir vos propres données. 

Il existe aujourd’hui un large éventail de sources de données externes, qui ne cesse de s’élargir :

• Données gouvernementales officielles (données de recensement, bases de données sur l’enregistrement et l’activité/les finances des entreprises, limites électorales/municipales/de l’État et du pays)
• Données géospatiales (météo, température, cartographie)
• Données commerciales (telles que les informations relatives à la vérification du crédit)
• Données sur les partenaires (concernant les ventes ou l’utilisation des produits, par exemple)
• Données des médias sociaux (avis des clients sur un produit, par exemple)

Certaines de ces données externes sont disponibles gratuitement, en tant que données ouvertes, comme celles des organismes du secteur public, tandis que d’autres sources sont collectées et vendues par des entreprises spécialisées. Par exemple, le Data Hub d’Opendatasoft est un catalogue gratuit de plus de 33 000 jeux de données et données de référence qui ont été collectés et vérifiés par notre équipe, aidant les organisations à enrichir leurs actifs et à atteindre leurs objectifs plus rapidement. 

Notre blog, L’utilisation de données externes : un levier indispensable pour générer tout le potentiel de valeur de vos données explique plus en détail les avantages spécifiques de l’application de données externes à votre patrimoine de données.

L’Office of State Budget and Management (OSBM) de Caroline du Nord collecte et met à disposition sur son portail LINC d’énormes volumes de données statistiques provenant de 20 départements de l’État et d’agences fédérales. Ces données couvrent des domaines aussi divers que la population (y compris les données de recensement), la main-d’œuvre, l’éducation et l’agriculture. L’OSBM utilise des informations telles que les données de recensement pour enrichir ses propres données, ce qui leur confère une plus grande profondeur et permet aux utilisateurs, tels que les élus locaux, de bénéficier d’une vue plus complète de leur comté ou de leur municipalité.

L’enrichissement des données est une étape clé pour maximiser la valeur des données d’une entreprise. Il constitue la base d’un partage efficace des données en améliorant la qualité, la précision et la facilité d’utilisation des données. 

Pour tirer pleinement parti des données enrichies, celles-ci doivent être mises à la disposition de tous les utilisateurs concernés par le biais d’un portail de données intuitif. Cela permet d’accroître le partage en donnant accès à une gamme complète de données, avec un contexte clair, des métadonnées et des explications sur ce que l’ensemble de données couvre, afin de renforcer la confiance des utilisateurs. Un portail de données efficace permet aux utilisateurs de découvrir les données grâce à des visualisations enrichies, telles que des cartes, des histoires de données contenant plusieurs sources de données ou des tableaux de bord interactifs, et leur permet de combiner eux-mêmes différents ensembles de données pour créer leurs propres visualisations. Tout cela contribue à accroître l’utilisation et à maximiser la valeur de vos données.

Vous voulez savoir comment enrichir vos données et les diffuser via un portail de données intuitif ? Réservez une démo de notre solution pour en savoir plus !