Objet de la prestation En 2023 la DSI de la Retraite Complémentaire ajuste son organisation et déploie une solution Big Data basée sur Hadoop. Au sein du pôle Support au pilotage opérationnel - pilotage de programmes , la mission consiste à accompagner le responsable de la gouvernance de la donnée afin d’identifier les cas d’usage qui devront être fonctionnellement instanciés dans cette filière Big Data.

Les expertises attendues

- Maitrise de l’architecture Hadoop- Expérience en gestion de projet- Expérience dans la mise en œuvre d’une filière Data Science- Capacité à communiquer et impulser une dynamique d’équipe, à partager son savoir faire

La prestation consiste à contribuer à/au(x)

- Référencer les cas d’usage- Décliner opérationnellement les modèles organisationnels en fonction des cas d’usage à instancier- Etre le point d’entrée vis-à-vis de la direction technique informatique. Cette direction a en charge d’établir les modèles d’architecture technique ainsi que de provisionner l’infrastructure physique et logicielle nécessaire au fonctionnement de la plate-forme Hadoop.- Etre le point d’entrée de l’équipe informatique Décisionnel & Big Data . Cette équipe a en charge la gestion opérationnelle de la plate-forme Big Data.- Assurer le change management inhérent à la mise en oeuvre- Organiser / Structurer une filière Data Science au sein de la plate-forme Hadoop.Durant la mission, des déplacements seront à prévoir à Lyon, site sur lequel est situé l’équipe Décisionnel & Big Data . La majorité es accès seront toutefois à distance.

Environnement technique Cloudera Private Cloud 7.1.7 : HDFS, YARN, Cloudera Manager, Hive, Hue, Impala, Spark, Zeppelin, Ranger, Knox, SQL, Zookeeper, Teradata

Contexte de la mission Les applications décisionnelles permettent de générer et de fournir auprès des équipes de direction et de gestion de la retraite complémentaire des états de restitutions sous la forme de reporting opérationnel et de tableaux de bord. Les indicateurs produits permettent d’assurer un suivi opérationnel des processus de la Retraite Complémentaire à des fréquences adaptées au besoin, soit quotidienne (par exemple pour le suivi des corbeilles de tâches), hebdomadaires ou mensuelles.

Depuis décembre 2018 une première plate-forme Big Data s’appuyant sur la technologie Hadoop a été mise en place pour répondre à d’autres cas d’usage non couverts et nécessitant plus d’agilité pour explorer, croiser les données et manipuler de gros volumes de données. La première distribution logicielle basée sur la distribution logicielle Hortonworks a migré en octobre 2021 vers la distribution Cloudera CDP . Cette distribution logicielle est un framework d’applications distribuées doté de mécanismes de scalabilité, de tolérance aux pannes et de distribution des traitements de données.

L’objectif fonctionnel de ce socle est de pouvoir répondre à différents cas d’usages tels que : Pour les équipes DSI Etudes :o Dans le cadre de phases d’études amont être en capacité d’explorer, croiser et analyser des données provenant de différents contextes, afin de formaliser des points structurants relatifs à la gestion des informations. Par exemple : transfert du recouvrement, cadrage des travaux avec la CNAV, RNGD/RGCU, DSN, etc. ;o Dans le cadre de phases de spécifications savoir adapter la solution aux enjeux de volumétrie d’un cas d’usage ; Pour les équipes DSI Supports Fonctionnels :o Participer au suivi de Production pour explorer, croiser analyser les données inter-applications dans le but de piloter les opérations d’exploitation et être en mesure d’adresser aux éditeurs des demandes d’intervention pertinentes. Pour les équipes DSI Centre National de Recette et d’Intégration :o Préparer les jeux de données en explorant et en identifiant les données des applications qui constitueront les jeux d’essais en lien avec les critères métier. Pour les équipes DSI Système d’Information Décisionnel , envisager une bascule vers Hadoop d’une partie des données stockées dans Teradata, dans l’objectif de réduire l’impact Teradata. Pour la Direction Technique (Actuaires) qui s’oriente vers les métiers de la Data-Science ; Pour d’autres besoins tels que la lutte contre la fraude ;