Data Engineer (Python - PySpark - AWS)

En Arelance sabemos que las personas son el activo más importante dentro de una empresa y por tanto invertimos muchos esfuerzos en buscar los mejores profesionales para nuestros clientes y en ofrecer a nuestros candidatos los mejores proyectos.

En este momento buscamos un/a Data Engineer con fuerte componente backend y mínimo 3 años de experiencia para incorporarse a un proyecto orientado al procesamiento de datos, calidad, auditoría y evolución de un engine principal basado en Python y PySpark. El perfil trabajará en entornos AWS, con buenas prácticas DevOps y exposición a GenAI y desarrollo de APIs.

🎯 Responsabilidades

• Desarrollo, mantenimiento y optimización de flujos ETL en Python y PySpark.
• Evolución del engine principal de datos y su librería asociada.
• Diseño y ejecución de consultas SQL avanzadas para:
• Auditoría y control de calidad de datos
• Cruces entre tablas
• Validación de claves primarias
• Detección de duplicados
• Identificación de errores entre origen y proceso
• Uso de Git/GitHub para control de versiones, branching y revisión de código.
• Interpretación y soporte de pipelines CI/CD en Jenkins, ejecución de builds y diagnóstico de fallos.

Trabajo con servicios core de AWS:

• S3 (almacenamiento)
• Athena (consultas y depuración)
• SageMaker (revisión y despliegue de procesos)

✅ Requisitos imprescindibles

• Titulación en Informática, Telecomunicaciones, Ingeniería o similar.

Experiencia avanzada en:

• Python y PySpark (ETLs, optimización, procesamiento de datos)
• SQL avanzado aplicado a auditoría y control de calidad de datos

Conocimientos sólidos en:

• Git y GitHub
• CI/CD con Jenkins
• Experiencia práctica en AWS, especialmente: S3, Athena, SageMaker

⭐ Requisitos valorables

AWS y Arquitecturas

• Experiencia con AWS Lambda y AWS Fargate.
• Monitorización con CloudWatch.
• Gestión de flujos, métricas y trazas con Kinesis.
• GenAI y Desarrollo Backend

Experiencia en desarrollo de agentes basados en LLMs (OpenAI, LangGraph). Prompt Engineering avanzado, especialmente para:

• Integraciones con búsquedas web
• Desarrollo de agentes inteligentes
• Desarrollo de APIs con FastAPI.
• Observabilidad y trazabilidad con OpenTelemetry.

Negocio y Gestión

• Familiaridad con conceptos financieros y negocio core para una correcta interpretación de los datos.
• Uso habitual de Jira para seguimiento de tareas e incidencias.
• Nivel avanzado de Excel para análisis rápidos y cruces ad-hoc.

Condiciones

• Contrato indefinido con Arelance
• Modalidad en remoto desde España