Engenheiro DataOps Sênior

Engenheiro(a) de Plataforma de Dados Sênior (DataOps) | Databricks + AWS 📍 Modelo: Remoto

📄 Contratação: PJ ou Cooperado

Sobre a oportunidade Você vai ser o dono operacional da plataforma Databricks em AWS de uma empresa do setor financeiro, com autonomia para automatizar, monitorar e otimizar custos. O time de dados já trabalha com cultura SRE, e você chega para levar a plataforma para o próximo nível.

O que você vai fazer

• Administrar a conta e os workspaces Databricks: usuários, grupos, service principals, SCIM/SSO, cluster policies, SQL warehouses e serverless
• Operar o Unity Catalog no dia a dia (grants, external locations, storage credentials, onboarding de novos domínios)
• Gerir a infraestrutura AWS da plataforma via Terraform (VPC/PrivateLink, S3, IAM, KMS, Secrets Manager, CloudWatch)
• Construir e manter CI/CD de pipelines com Databricks Asset Bundles e Git, com promoção dev → hml → prod
• Orquestrar e monitorar workflows (Lakeflow Jobs, Airflow/MWAA) com SLI/SLO, alertas e runbooks
• Implantar observabilidade e dashboards de saúde e custo (system tables, Datadog, Grafana, Prometheus)
• Atuar com FinOps: tagging, budgets, right-sizing e redução de DBU e de custo AWS
• Automatizar testes e checagens de qualidade no deploy, junto com o time de Qualidade
• Garantir segurança e compliance: auditoria de acessos, segredos, rede privada, backups e DR
• Planejar upgrades de runtime, novas features da plataforma e capacity

O que buscamos

• 5+ anos em engenharia de dados, DevOps ou SRE, com 2+ anos administrando Databricks em produção
• AWS sólido: IAM, S3, VPC, KMS, EC2, CloudWatch
• Terraform (providers AWS e Databricks) e Git
• CI/CD aplicado a dados (Asset Bundles, CLI ou API do Databricks)
• Python e SQL
• Unity Catalog na prática: permissões, external locations e system tables

Vai ser um diferencial se você tiver

• Noções de Spark e Delta Lake para troubleshooting e tuning
• Glue, Lambda ou MWAA
• Datadog, Grafana ou Prometheus
• Experiência com monitoração, alertas e gestão de incidentes
• Kubernetes ou Ansible
• Certificações AWS (Solutions Architect, DevOps Engineer) ou Databricks Platform Administrator
• Vivência no setor financeiro ou em bureau de crédito, e conhecimento de LGPD
• Uso de IA generativa no dia a dia de trabalho

Só na Code Group você encontra as melhores oportunidades de TI com tecnologias inovadoras. O nosso foco principal - Recrutamento & Seleção e Hunting, e temos orgulho em ter clientes e parceiros com o mesmo objetivo: Pessoas engajadas. Buscamos profissionais inovadores que sejam movidos por desafios e focados em resultados. Se identificou?!