L'intégration de données consiste à combiner des données provenant de diverses sources en une seule vue unifiée. Il s'agit d'un processus à la fois technique et commercial, utilisé pour gérer efficacement les données et les mettre à la disposition de ceux qui en ont besoin. Avec une solution d'intégration de données, les silos de données peuvent être éliminés et les données peuvent être rassemblées qui, autrement, resteraient inutilisées et leurs informations perdues. L'intégration des données permet aux outils analytiques de produire des informations pratiques en matière de business intelligence. Il fait partie du processus de gestion des données et son utilisation continue de croître à mesure que les besoins d'intégration et de partage de données du Big Data augmentent.
Techniques d'intégration de données
Un système d'intégration de données impliquera un réseau de sources de données, un serveur maître et des clients accédant aux données du serveur maître. Une bonne solution d'intégration de données fournira des données provenant de sources fiables en temps opportun pour soutenir les processus métier analytiques. Les informations fournies ont été nettoyées et transformées en informations précieuses. L'intégration des données peut être effectuée à l'aide de diverses techniques:
- Extraire, transformer, charger (ETL): Les données sont extraites de la source, transformées et chargées dans un entrepôt de données.
- Modifier la capture de données: Les changements de données dans une base de données sont identifiés en temps réel et appliqués à un entrepôt de données.
- Réplication des données: Les données d'une base de données sont répliquées dans une autre pour maintenir la synchronisation des informations.
- Intégration de données en streaming: Différents flux de données sont continuellement intégrés et introduits dans les systèmes d'analyse et les magasins de données.
Avantages et solutions d'intégration de données
Ce processus est utile pour deux entreprises qui fusionnent des systèmes ou pour consolider des applications au sein d'une même entreprise afin de fournir une vue unique des actifs de données de l'entreprise. Il peut être utilisé pour créer un entrepôt de données pour effectuer une analyse basée sur les données de l'entrepôt.
L'intégration des données réduit les erreurs car la saisie manuelle et la mise à jour des données ne doivent plus être effectuées. Bien que l'utilisation d'une solution d'intégration de données prenne du temps au départ, le temps gagné sur la préparation et l'analyse des données en vaut l'investissement. De plus, chacun peut accéder en toute sécurité à ces données via le libre-service pour des projets individuels ou partagés.
Les solutions d'intégration de données populaires incluent:
- Intégration TIBCO Cloud
- Matillion
- SSIS de Microsoft
- Oracle GoldenGate
- Astera Centerprise