Data Engineer Big Data & Cloud

Data Engineer Big Data & Cloud

📍 Ubicación: Alcobendas (2 días presenciales)

💼 Modalidad: Híbrida

💰 Salario: SBA abierto

📅 Metodología: Scrum

Descripción del puesto

Desde Tecdata Engineering buscamos un/a Senior Data Engineer Big Data & Cloud para incorporarse a un proyecto de consultoría tecnológica para un cliente del sector retail.

Buscamos un perfil con más de 3 años de experiencia en entornos Big Data, especializado en Cloudera, Apache Spark, Scala y Kafka, con conocimientos de Google Cloud Platform (GCP).

La persona seleccionada será el referente técnico de la plataforma de datos, participando tanto en el diseño de arquitecturas como en el desarrollo, optimización y mantenimiento de procesos productivos.

Responsabilidades

Diseñar y evolucionar arquitecturas de datos batch y real time con Cloudera y GCP.

Desarrollar procesos de ingesta, transformación y agregación de datos con Apache Spark y BigQuery.

Implementar y mantener procesos con Scala, SQL, Python y dbt.

Diseñar soluciones basadas en Kafka y optimizar flujos de procesamiento de datos.

Definir buenas prácticas de arquitectura, calidad y gobierno del dato.

Gestionar la planificación y ejecución de procesos mediante Control-M.

Participar en la resolución de incidencias y la optimización de procesos en producción.

Colaborar con el Product Owner en la estimación y priorización del backlog.

Actuar como interlocutor técnico con el cliente y los equipos de IT y negocio.

Aportar orientación técnica al equipo y garantizar la calidad de las soluciones.

Requisitos imprescindibles

Más de 3 años de experiencia en proyectos Big Data.

Experiencia sólida con Apache Spark y el ecosistema Cloudera.

Alto nivel de programación con Scala y experiencia con Java.

Conocimientos de Apache Kafka a nivel de arquitectura y desarrollo.

Experiencia con HDFS, Hive, Kudu y Solr.

Experiencia en Google Cloud Platform, especialmente BigQuery.

Conocimientos de dbt, SQL y Python.

Experiencia con Pub/Sub, Dataflow, Cloud Functions y Cloud Storage.

Conocimientos de CI/CD con Git/Bitbucket y Jenkins.

Experiencia en planificación de procesos con Control-M.

Autonomía, capacidad de decisión y buenas habilidades comunicativas.