We're looking for a Senior Data Engineer (AWS-native | Spark | Tokenization & Claims Data) to join Source Meridian... identifiers. You'll design and implement Spark-based pipelines that transform, intersect, and enrich tokenized datasets stored...
- Strong knowledge of cloud infrastructure, with a preference for Azure, as well as expertise in Apache Spark and Databricks - Advanced...
principales - Diseñar y desarrollar pipelines de datos eficientes y escalables utilizando Databricks , Spark y tecnologÃas...) . - Optimizar el rendimiento de clusters Spark y gestionar costos en plataformas Databricks. - Garantizar la calidad, gobernanza...
to revolutionise how we create and deliver work. Our AI solutions enhance efficiency, spark creativity, and drive insightful decision...
tooling: dbt, Airflow, Dagster, Kafka, Spark, or similar Experience with cloud + DevOps: AWS/GCP/Azure, Docker, CI/CD...
, or Scala for data manipulation and pipeline development. - Data Processing Frameworks: Experience with tools like Apache Spark... systems such as Hadoop HDFS, Hive, or Spark. - Managing and optimizing data lakes and delta lakes for structured...
(Python, Scala, Java) - Dominar en un nivel en SQL, Herramientas de Data Lakes, Big Data (Hadoop, Spark, Kafka... - Implementar y administrar soluciones sobre plataformas de Big Data como Hadoop, Spark y Kafka \n Lo que encontrarás al unirte...
ACERCA DE LA VACANTE Funciones del Puesto - Las inherentes al puesto Requisitos del Puesto - Bachiller - 1 año de experiência en empresa de producción - Responsable y proactivo - Puntualidad - Disponibilidad de horario OTROS DET...
y procesos ETL/ELT utilizando Azure Data Factory (ADF), Azure Data Lake y Spark . Implementar modelos y transformaciones... en Spark para procesos de integración de datos. Apoyar la provisión y gestión de infraestructura cloud mediante Terraform...
y optimización de jobs Spark. Integración con Power BI y habilitación de analÃtica empresarial. Deseable experiencia en empresas... Fabric. Implementar pipelines de ingestión, transformación y carga utilizando PySpark y Spark SQL. Gestionar operaciones...