et la scalabilité des flux de données, en temps réel et batch. Mettre en place et superviser des mécanismes d'orchestration de données...
et des campagnes d'exécution Connaissance technique permettant de suivre l'exécution d'un plan batch, d'analyser les résultats...
que d'optimisation et de migration. Vous avez une excellente connaissance de Spark, que ce soit pour le traitement batch ou streaming...
des traitements batch. Vous participerez à la coordination et aux déploiements des projets techniques et métie. /p p... aux équipes AppOps et aux projets métiers sur les incidents liés au plan batch /li li Compléter et maintenir les backlogs...
une architecture de donnée avec des systèmes de traitement de données en temps réel et en batch, en utilisant Kafka, Spark, Hudi... en temps réel et en batch. Développer des pipelines de données pour traiter les données en utilisant Spark, Hudi et Airflow...
des pipelines de traitement batch, orchestrés avec Airflow. Faire évoluer et opérer notre Data Warehouse sur BigQuery en t...
du produit via les bonnes pratiques (clean code, refactoring, ?). · Participer à l?exploitation en production : suivi des batch...
) La maintenance évolutive et corrective Une participation aux orientations techniques Stack technique JAVA (Spring Boot/Batch.../JavaScript. Nous recherchons principalement des développeurs qui ne craignent pas les mots Api, Rest, Micro-Service, Batch...
métier pour comprendre les champs clés et les logiques business. Automatiser la fraîcheur des données (batch minimal... dans la construction de pipelines batch est attendue. La connaissance des patterns lakehouse (Delta ou Iceberg) constitue un réel avantage...
), et en scripting (Python, perl, batch …) est un plus. Anglais niveau C1, la pratique courante de l'anglais technique est indispensable...