Au service de 23 millions d’usagers en France, Veolia Water France est un poids-lourd français spécialisé dans la gestion des services de l’eau et de dépollution des eaux usées. Pour permettre à ses clients de tirer le meilleur parti de leurs ressources en eau, la DSI de Veolia a entrepris la migration de son système d’information sur le cloud d’Amazon Web Services (AWS) et Talend Data Platform.
Tous les flux vitaux dans le fonctionnement quotidien de Veolia reposent sur Talend: la gestion des engagements, l’intégration de tous les flux financiers, les processus clientèle, l’intégration des points de présence, la GMAO, la cartographie, l’accès aux référentiels techniques, l’archivage…
Progreo accompagne Véolia dans toutes les composantes de ce challenge:
1-L’architecture:
-Conception de l’architecture des plateformes Talend (production et hors-production DI, ESB et MDM) en Haute disponibilité (cluster TAC, cluster de jobservers et de runtime). 550 jobs divisés en 13 projets.
-Élaboration des normes de développement, de livraison et d’intégration, support et formation aux développeurs Talend.
-Migration des différents éléments des plateformes Talend dans le cloud Amazon : utilisation d’ELB, EFS, EC2, S3, RDS.
2-Le développements Talend :
-Développement de job (ESB/DI) pour des renforts ponctuels sur des projets à risques.
-Établissement d’un P.O.C d’interconnexion entre Talend MDM platform 6.1 et google bigquery.
4-La mise à jour et la migration de version Talend
-Migration Talend 5.6 vers talend 6.1 (DI, ESB, MDM) .
-Réception, installation et tests des patchs mise à disposition par Talend
3-Le recrutement:
Véolia fait également confiance à l’expertise de Progreo pour l’assister au recrutement de développeurs Talend. (Préparation des évaluations entretien et délibération)
4-L’exploitation et le suivi des éxécution
Il s’agit de surveiller les 500 000 exécutions de flux ETL par mois:
-Mise en place et développement d’un système de supervision des flux avec systèmes de suivis par email
et génération de rapports automatisés.
5-La gestions des incidents :
-Remontés et suivis des alertes, développement et intégration de correctifs en urgence (ECAB)
-Échanges (téléphoniques, mails, Webex) avec le support Talend.
-Suivis des corrections et des évolutions avec l’account Manager chez Talend.
6-La mise en place et développement d’un système de supervision de la plateforme Talend :
-Mise en place de sondes Nagios et Zabix
-Mise en place d’alarme Cloud Watch AWS
-Développement de jobs de contrôle des différents services Talend (TAC, MetaServlet, JobServer, command line etc…)
A l’occasion du Talend connect 2016, Véolia eau reçoit un « Talend Data Masters Award ».
Progreo étant un acteur majeur de la réussite de l’intégration de Talend au sein de la DSI de Véolia Eau, c’est non sans fierté que nous assistons à la remise de ce prix.