L’intégration des Big Data dans le processus ETL (Extrat, Transform, Laod)

Abstract

Les Big Data, littéralement de données massives sont un terme anglais employé pour décrire les ensembles de données qui deviennent si grands qu'il devient difficile les travailler avec la gestion de bases de données conventionnelle d'outils. Quand nous parlons il y a peu de gigaoctets (109 octets), là est maintenant des Terabyte d'entretien plutôt (1012 octets), des petabytes (1015 octets) des exabytes (1018 octets) et même des zettabytes (1021 octets). Dans ces nouveaux ordres de grandeur, la capture, le stockage, la recherche, partager, l'analyse et la visualisation des données doivent être redéfinie. Les perspectives traitant des données massives sont énormes, en particulier pour l'opinion ou l'analyse politique des tendances industriels, la génomique, le combat contre la sécurité. Nous avons travaillé sur la conception d’une méthode de solution pour l’intégration de Big Data, ainsi, nous avons présenté une architecture qui repose sur un processus ETL traditionnel basé sur le schéma XML au niveau de l’extraction.