Senior Data Engineer

À medida que o CI&T Flow amplia sua dependência de dados para sustentar a operação e evoluir seus produtos, buscamos um Engenheiro de Dados Sênior para fortalecer a capacidade de engenharia da frente Tática. O profissional terá papel fundamental na construção de uma base de dados confiável, estável e observável, garantindo que a plataforma consiga sustentar seu crescimento sem comprometer a qualidade das entregas.

O profissional atuará de forma hands-on no desenvolvimento e evolução de pipelines, integrações, processamento e mecanismos de observabilidade, além de investigar e resolver problemas de produção. O papel exige experiência sólida em engenharia de dados e capacidade de atuar sobre problemas complexos, contribuindo também para padronização técnica, qualidade, performance, estabilidade e redução de incidentes recorrentes.

Missão da posição

Garantir a sustentação e evolução dos pipelines e integração da plataforma, absorvendo a maior parte das demandas operacionais sem comprometer a frente estratégica de dados com experiência prática em Databricks, Spark, Python/SQL, pipelines, cloud e troubleshooting de ambientes produtivos.

Principais responsabilidades

Desenvolver e manter pipelines de dados.

Atuar em incidentes, correções e melhorias.

Implementar sensores de observabilidade.

Investigar falhas de ingestão e processamento.

Trabalhar com Raw, Trusted, Refined e Analytics.

Trabalhar na evolução de arquitetura Medallion e Unity Catalog

Atuar em Databricks, ADLS e integração.

Implementar controles de qualidade e atualização dos dados.

Apoiar melhorias de performance e custo.

Documentar soluções e compartilhar conhecimento com o time.

Principais requisitos

Experiência sólida em Engenharia de Dados em ambiente produtivo.

Domínio de Python e SQL.

Experiência com Databricks / Spark.

Experiência com Azure, AWS ou GCP.

Experiência na construção e manutenção de ETL/ELT e pipelines de dados.

Conhecimento de arquitetura Lakehouse e camadas Raw, Trusted, Refined/Analytics.

Conhecimento de arquitetura Medallion

Experiência com ingestão de dados a partir de APIs, bancos, arquivos e outras fontes.

Conhecimento de data quality, monitoramento e troubleshooting.

Experiência com otimização de performance e custos.

Capacidade de atuar na investigação de incidentes e problemas recorrentes.

Conhecimento de versionamento, CI/CD e boas práticas de engenharia.