Data Engineer

Municipality of Madrid, Spain

2 days ago

Role details

Contract type

Permanent contract

Employment type

Full-time (> 32 hours)

Working hours

Regular working hours

Languages

Spanish

Compensation

€ 65K

Job location

Municipality of Madrid, Spain

Tech stack

Agile Methodologies

Airflow

Amazon Web Services (AWS)

Cloud Computing

Databases

Continuous Integration

Hadoop Distributed File System

NoSQL

Systems Development Life Cycle

SQL Databases

Scripting (Bash/Python/Go/Ruby)

Spark

Kubernetes

Job description

Una empresa de servicios digitales busca un Data Engineer para un proyecto en el sector bancario. Trabajarás en modalidad híbrida en Madrid, con un enfoque en migraciones complejas y entornos Cloud. Se requiere experiencia en Spark y Scala, así como un fuerte deseo de colaborar en un equipo multidisciplinario. La organización también ofrece formación continua y oportunidades de desarrollo profesional en un entorno dinámico., * Migrar pipelines y procesos desde plataformas legacy.

Implementar transformaciones y calidad de datos.
Construir y mantener CI/CD para despliegues automatizados.
Desarrollar y ejecutar tests unitarios y de validación.
Automatizar pipelines y orquestación con Airflow.
Colaborar con equipos multidisciplinares para entregar soluciones.

Requirements

Experiencia extensa en migraciones complejas y modernización tecnológica.
Conocimientos en CI/CD para despliegues automatizados.
Experiencia en colaborar con equipos multidisciplinares., Amplia experiencia en Spark Scala HDFS SQL Bases de datos NoSQL S3/COS Conocimientos de SDLC Agile Scripting (Shell)