INGENIEUR CONSEIL GRANDS COMPTES F/H

Environnement professionnel : Le Lac de données agricoles est une plateforme de données massives (Big data), souhaitée par l’ASP pour anticiper les changements de la réforme de la Politique Agricole Commune 2023-2027 axée sur la performance. Cette plateforme a vocation à recueillir la grande majorité des données de la PAC, à des fins de suivi, d’évaluation et d’audit, et à terme, d’autres données de la sphère administrative agricole. Cette plateforme Big Data est désormais en production, depuis le 1er janvier 2023. Vous serez amené(e) à construire et évaluer des chaînes de traitement de données (préparation, modélisation, agrégation, exploration, analyse, prédiction) en collaboration avec les chargés de mission de Valorisation de données et les data scientists, puis assurer leur industrialisation. S'assurer que la collecte, le stockage et la transformation des données se déroulent efficacement et en toute sécurité, pour l’ensemble des projets applicatifs du Lac de données agricoles. Orchestrer l'architecture de données et mettre en place des flux de données (au sein du lac ou depuis l'externe) Veiller à ce que les données soient aisément accessibles et exploitables pour l'analyse par les Data Scientists et les chargés de mission de valorisation de données. Identifier les difficultés rencontrées par les équipes projet et les partager avec la MOE pour les solutionner. Diplôme d'ingénieur, avec au moins 5 à 8 ans d'expérience dans le domaine du développement, et au moins 2 ans d’expérience sur un poste d’architecture applicative Data Engineering : Maîtrise de python, PySpark et de SQLPlus ( Connaissance fonctionnelle et technique (administration) souhaitée des produits Microstrategy/Dataiku Maitrise des SGBDR PostgreSQL et Oracle (sauvegarde, restauration, miroitage) Architecture data : Solide connaissance des technologies Big Data (Cloudera, Apache Kafka, Apache Spark, Hadoop, Hive, Atlas) Capacité à challenger une architecture technique Maîtrise opérationnelle des éléments clés de l'architecture informatique (système, réseau, bases de données, stockage, middleware, chaîne CI/CD) Compétences/expériences avérées en modélisation de données Savoir rédiger un document technique Savoir argumenter les propositions techniques et aptitude à partager les connaissances avec les équipes d'architecture et de développement Une connaissance du monde agricole du secteur public serait un plus

Location: Montreuil, FR

Posted Date: 9/27/2024