Data Engineer - Niort (H/F)
, …) Ingestion des données (structurées, semi-structurées ou non-structurées) selon différentes fréquences : batch, micro-batch...
, …) Ingestion des données (structurées, semi-structurées ou non-structurées) selon différentes fréquences : batch, micro-batch...
des applications back-end sur environnement Mainframe / Host. Intervenir sur des traitements batch et transactionnels. Analyser...
, Artifactory etc..) - Docker & Kubernetes (Helm) - Java, le framework Spring et son écosystème (batch, boot, security, cloud...
(Configuration, programmation en FBD, SFC, mise en œuvre de Batch, diagnostic). Compétences souhaitées : Connaissance des normes...
connaissances des services Azure pour le traitement de données batch et streaming (Data Factory, Synapse), ainsi que des requêtes...
dans l'outil interne et les soumettre aux équipes d'exploitation pour la planification et la reprise des traitements batch... ou des reprises de données. - Lancer les traitements batch sur les environnements d'intégration. - Dupliquer ou restaurer...
automatisation et optimiser les flux avec des scripts (batch, powershell, Ansible, iPXE) - Animer et former techniquement...
des outils comme Airflow, dbt, Apache Spark ou KaWa. Implémenter et gérer des pipelines de traitement des données en batch...
sur des progiciels du marché et des développements internes qui s'inscrivent aussi bien dans une architecture Batch que de services...
pour la détection précoce de difficultés d’écriture âœï¸, la mise en place de pipelines batch pour un système HTR, avec un fort enjeu...