Migration de la plus grande plateforme de données sur site au monde vers AWS/EMR

Notre client, une grande banque australienne de premier plan comptant plus de 17 millions de clients, s’est associé à HCLTech et AWS pour réaliser la plus importante migration mondiale d’une plateforme de données locale vers le nuage.

4 min de lecture

À propos

Avec un écosystème complexe comprenant 65 000 pipelines de données, 257 systèmes sources et 25 pétaoctets de stockage—en expansion de plus de 300 To chaque mois—l’organisation s’est lancée dans la modernisation de son environnement Cloudera Hadoop en migrant vers une architecture entièrement cloud native utilisant AWS EMR. Après avoir évalué 13 fournisseurs mondiaux de services TI, la banque a sélectionné HCLTech pour notre stratégie de migration exceptionnelle et notre expertise approfondie du domaine, notant que la “proposition d’HCLTech n’était pas simplement meilleure mais exceptionnelle par rapport aux autres fournisseurs.”

Le défi

Réaliser une migration infonuagique à grande échelle sans interruption

Une importante institution financière a entrepris de moderniser l’un des plus vastes environnements de données sur site de l’industrie. Avec des dizaines de milliers de pipelines de données et des volumes massifs de données structurées et non structurées, la plateforme Hadoop héritée du client avait atteint ses limites en matière d’évolutivité et de performance.

Pour permettre l’innovation axée sur l’infonuagique, l’organisation devait migrer cet écosystème complexe vers le nuage—sans compromettre la continuité des activités ni la conformité. Cela exigeait un partenaire en mesure non seulement de réarchitecturer la plateforme, mais aussi d’assurer la stabilité, d’automatiser les flux de travail et d’intégrer l’observabilité tout au long de la transition.

Les principaux défis comprenaient :

Limites d’évolutivité des systèmes Hadoop hérités
Difficulté croissante à optimiser et à maintenir des charges de travail de données volumineuses
Dizaines de milliers de pipelines de données
Nécessitaient précision, orchestration et essais pour garantir une migration transparente
Risque élevé d’interruption
Les opérations critiques et les exigences de conformité nécessitaient un service ininterrompu
Besoins en refonte architecturale
Pour soutenir l’évolutivité infonuagique, l’intégration et une infrastructure prête pour l’avenir
Manque d’observabilité et d’automatisation
Les flux de travail manuels et les capacités d’essai limitées augmentaient les risques d’exécution

La solution

Migration automatisée d’une des plus grandes plateformes de données sur site au monde

Pour répondre à la complexité et à l’ampleur de la migration, le client s’est associé à HCLTech afin de mettre en œuvre une stratégie de migration vers le cloud en plusieurs phases, axée sur l’automatisation. L’engagement a débuté par une évaluation détaillée de l’environnement actuel, suivie d’un plan directeur d’architecture sur mesure et d’un plan d’atténuation des risques.

Une approche unique basée sur la simulation a été mise en place pour tester la stabilité et la performance de la plateforme avant la mise en production. Grâce à des capacités intégrées de GenAI et à une solide collaboration avec AWS, HCLTech a assuré une transition sans heurts vers un environnement infonuagique natif, évolutif et à haute performance.

Les fonctionnalités et caractéristiques de notre solution comprenaient :

Évaluation de l’état actuel et cartographie de l’architecture
Organisation d’ateliers avec les parties prenantes pour identifier les interdépendances et les écarts de capacités
Environnement de production simulé
Permis de tester les charges de travail en temps réel afin de prévoir les défaillances et d’optimiser la stabilité
Observabilité améliorée par GenAI
Utilisation d’outils d’IA pour identifier les anomalies, faciliter l’analyse de code et automatiser les cycles de tests
Fondation infonuagique native (Tranche 1)
Comprend la mise en place de l’infrastructure, l’activation de la gestion des identités et le replatforming avec une équipe dédiée de 55 membres
Exécution complète de la migration (Tranche 2)
Migration de 65 000 pipelines de données et de 25 PB de données vers AWS avec une équipe maximale de plus de 230 ingénieurs
Modèle de co-livraison avec les équipes AWS et client
Assure une coordination sans faille entre la banque comme intégrateur de systèmes et HCLTech comme partenaire stratégique de livraison

L'impact

Migration infonuagique révolutionnaire qui a permis l’envergure, la rapidité et l’innovation

L’approche progressive axée sur l’automatisation, livrée par HCLTech, a permis l’une des initiatives de modernisation des données les plus vastes et transparentes dans les services financiers mondiaux. Cette collaboration n’a pas seulement minimisé les perturbations, elle a aussi accéléré la capacité du client à innover, à développer l’analytique et à stimuler l’efficacité opérationnelle.

Feuille de route architecturale claire
Établissement d’une base structurée avec interdépendances définies et contrôles des risques
Validation de la performance à chaque étape
L’exécution progressive a assuré la stabilité de la plateforme et la préparation de la charge de travail avant la mise en service
Transition AWS sans heurts
Migration réussie de l’un des plus grands environnements sur site de l’industrie vers l’infonuagique
Modernisation rapide et globale de la plateforme
Plus de 65 000 pipelines de données et 25 PB de données transférés sans perturbation
Plateforme infonuagique prête pour l’avenir
Analytique haute performance, évolutivité accrue et accélération de l’innovation
Efficacité opérationnelle améliorée
Élimination des limites des systèmes hérités et autonomisation des unités d’affaires avec une infrastructure moderne de données