Consultant Senior/Tech Lead Data - H/F - CDI
. Expérimenté(e) dans le traitement des données massives (Batch, Streaming), vous avez de solides compétences en Data Engineering...
. Expérimenté(e) dans le traitement des données massives (Batch, Streaming), vous avez de solides compétences en Data Engineering...
technique : Big Data & Frameworks : Spark (streaming et batch), Kafka, Stack Hadoop Cloudera (HDFS, Hive, HBase, Phoenix...
d'observabilités (monitoring, alerting) au sein de GCP Manipulation/Transformation de données (en batch et stream... en python (batch et stream) Des pipelines de transformation en SQL/SQLX dans l'outil DataForm (similaire à DBT) Mise...
/SQL, .net Framework (requis);Batch, PowerShell, InoSetup, Base de données : Oracle (obligatoire) Systèmes – MiddleWare...
et batch d’envoi des fichiers vers un concentrateur…), - Mettre en place des solutions de collecte de données...
(transactionnel et/ou batch) dans le respect des normes et procédures en vigueur \- Effectue la réception, la validation et le...
classement et leur distribution. - Gérer administrativement les réceptions, les commandes, les batch de préparation...
les données en temps réel ou en batch. Collaboration avec les équipes métiers : Comprendre leurs besoins et les traduire...
(en batch et stream) Vous accompagnerez aussi l'équipe Data dans ses activités de transformation de données via... : Maintenance pipelines de données en python (batch et stream) Des pipelines de transformation en SQL/SQLX dans l'outil DataForm...
, GCP, Azure - Scripting : Bash, Power Shell, Batch, Ruby, Python - Outils de déploiement et exploitation : Squid, Nagios...