Big Data Engineer
Una
Municipality of Madrid, Spain
9 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
Spanish, English Compensation
€ 70KJob location
Municipality of Madrid, Spain
Tech stack
Big Data
Data Transformation
Data Visualization
Hadoop
Shell Script
SQL Databases
Spark
Data Lake
Data Management
Kibana
Job description
Una firma de consultoría tecnológica busca un Big Data Engineer para unirse a su equipo en Madrid. El candidato ideal debe tener experiencia en Scala, Apache Spark, y ser capaz de desarrollar dashboards en Kibana. Este rol implica trabajar en la creación de un nuevo dashboard, además de colaborar en la ingesta y transformación de datos en un entorno Big Data. Se requiere un nivel de inglés B2., * Desarrollo y mantenimiento de procesos de ingesta y transformación de datos en Spark.
- Diseño y construcción de dashboards en Kibana para visualización de datos.
- Preprocesamiento y gestión de datos en el Data Lake.
- Colaboración con el equipo en tareas comunes del área de Big Data.
- Aplicación de buenas prácticas de desarrollo y documentación de procesos.
Requirements
- Experiencia previa en proyectos tecnológicos, preferentemente de datos o analítica.
- Conocimiento técnico y experiencia en Scala y Apache Spark.
- Conocimiento de Hadoop.
- Manejo de sentencias SQL.
- Conocimiento básico de Shell scripting.
- Conocimiento básico de Kibana y del entorno ELK., Scala Apache Spark SQL Kibana Shell scripting Hadoop