Senior Data Engineer

Sobre a vaga

Buscamos um(a) Engenheiro(a) de Dados Sênior para atuar em nosso ecossistema de dados na GCP, participando ativamente do processo de migração da nossa arquitetura de lakehouse para um modelo baseado em dbt e BigQuery. Você trabalhará na evolução de pipelines, na modernização de práticas de engenharia analítica e na garantia de qualidade, governança e performance dos dados.

Responsabilidades

• Desenvolver, otimizar e manter pipelines de dados em ambiente de lakehouse na GCP
• Atuar na migração de workloads existentes para dbt + BigQuery, incluindo modelagem, testes e documentação
• Construir e manter jobs de processamento distribuído com Spark
• Trabalhar com tabelas Iceberg, garantindo versionamento, evolução de schema e performance de leitura/escrita
• Escrever código Python de qualidade para orquestração, transformação e automação de dados
• Orquestrar pipelines utilizando Cloud Composer (Airflow)
• Colaborar com times de dados, produto e engenharia para garantir a confiabilidade e escalabilidade da plataforma
• Apoiar decisões técnicas relacionadas à arquitetura de dados, incluindo contêinerização de workloads (Kubernetes)
• Definir e aplicar boas práticas de engenharia de dados (CI/CD, testes automatizados, versionamento, observabilidade)

Requisitos

• Experiência sólida como Engenheiro(a) de Dados, atuando em ambientes de grande volume de dados
• Vivência prática com GCP (BigQuery, Cloud Storage, Dataproc ou similares)
• Experiência com dbt para modelagem e transformação de dados
• Conhecimento avançado em Python para desenvolvimento de pipelines e automações
• Experiência com Apache Spark (PySpark ou Scala)
• Experiência com Apache Iceberg (ou outros formatos de tabela como Delta Lake/Hudi, com disposição para migrar para Iceberg)
• Experiência com Cloud Composer (Airflow) para orquestração de pipelines
• Conhecimento básico de Kubernetes (conceitos, deploys simples, troubleshooting)
• Experiência com versionamento (Git) e práticas de CI/CD
• Boa comunicação e capacidade de trabalhar em ambientes de transição arquitetural

Diferenciais

• Experiência anterior em processos de migração de arquitetura de dados
• Certificações GCP (Professional Data Engineer, por exemplo)
• Experiência com observabilidade de dados (data quality, monitoramento de pipelines)
• Conhecimento em Terraform ou outras ferramentas de IaC

Informações Adicionais

Quais são os nossos benefícios?

Plano de Saúde

Plano Odontológico

Seguro de Vida

Vale Refeição

Vale Alimentação

Home Office

Auxílio Home Office

Auxílio Creche

Day off no aniversário

Empréstimo Consignado

PLR

Apoio médico, psicológico e nutricional

Gympass