IRIUM

Data engineer

IRIUM
Apply
23 hours ago
Madrid, SpainMid Level

Responsibilities

  • Participar en proyectos de migración a entornos cloud.
  • Desarrollar y automatizar pipelines de datos.
  • Contribuir a la modernización de infraestructuras Big Data.
  • Trabajar con Spark, Scala, Hadoop, HDFS, Apache Airflow, Oozie, S3/COS, Parquet y ORC.
  • Utilizar herramientas de integración y entrega continua como GitLab y Jenkins.

Requirements

  • Conocimientos de Spark con Scala.
  • Conocimientos de herramientas CI/CD como GitLab y Jenkins.
  • Experiencia o conocimientos de HDFS, Hadoop y Oozie.
  • Conocimientos de Apache Airflow.
  • Conocimientos de almacenamiento S3/COS y formatos Parquet y ORC.
  • Amplios conocimientos de bases de datos SQL y NoSQL.
  • Conocimientos de Shell Scripting.
  • Conocimientos del ciclo de vida del desarrollo de software.
  • Inglés C1.

Benefits

  • Contrato indefinido con IRIUM.
  • Modalidad híbrida en Madrid.
  • Acceso ilimitado a formación tecnológica.
  • Club de beneficios para empleados con descuentos y ofertas en diversas marcas y servicios.
  • Buen clima laboral.

Tech Stack

Apache AirflowApache HadoopApache SparkJenkinsScalaSQL

Categories

Data Engineering
IRIUM

About IRIUM

11-50 employees
Contact me