Mid Data Developer ( Azure + Databricks ), Brasil

Estamos em busca de um(a) Engenheiro(a) de Dados Mid para atuar na construção de soluções modernas de dados, contribuindo para o desenvolvimento de arquiteturas escaláveis e orientadas a produtos. Buscamos um profissional com forte experiência em engenharia de dados, processamento distribuído e arquitetura em nuvem, capaz de liderar iniciativas técnicas e apoiar a evolução da plataforma de dados.

Responsabilidade:

- Pipelines & ETL/ELT: Construir, dar manutenção e otimizar pipelines de dados robustos, focando em baixa latência, resiliência e boas práticas de Data Quality e observabilidade.

- Big Data & Processamento Distribuído: Desenvolver rotas de dados escaláveis utilizando Apache Spark / PySpark e Databricks, garantindo estratégias eficientes de particionamento e otimização de custos.

- Modelagem & Armazenamento: Trabalhar na estruturação e gestão de dados utilizando SQL Server e Delta Lake.

- Cultura DevOps: Aplicar versionamento com Git, criar rotinas de CI/CD para automação de implantações e realizar o monitoramento contínuo das rotinas em produção.

- Resolução de Incidentes: Investigar falhas, realizar análise de causa raiz e atuar na melhoria contínua das rotinas produtivas.

Requisitos Técnicos:

- Eexperiência com engenharia de dados.

- Experiência em ambientes produtivos.

- Atuação com grandes volumes de dados.

- Participação em projetos de migração, modernização ou construção de data lakes.

- Capacidade de investigar incidentes e realizar análise de causa raiz.

Diferencial:

-Experiência com projetos de IA e automação de pipelines.

-Conhecimento em arquiteturas orientadas a dados e boas práticas de governança.

-Familiaridade com Databricks MLflow para gestão de modelos.

-Atuação em ambientes Data Lake e Data Warehouse.

#LI-DR3