Engenharia de Dados | Híbrido/SP - 135284 at GFT… · Alphavill…

O que buscamos:

Buscamos um(a) profissional de Engenharia de Dados L3 com experiência sólida no desenvolvimento e na evolução de soluções de dados complexas e escaláveis, utilizando Databricks, PySpark e Microsoft Azure.

O profissional atuará na modernização da plataforma de dados, com foco na migração de pipelines legados — como PowerCenter, Oracle e DB2 — para uma arquitetura Lakehouse baseada em Delta Lake. Será responsável pela construção e evolução de pipelines de ingestão e transformação de dados, garantindo performance, escalabilidade, rastreabilidade, qualidade e governança.

Também terá participação na definição da arquitetura técnica, implementação de padrões de desenvolvimento e apoio técnico aos demais engenheiros de dados, contribuindo para a melhoria contínua da plataforma e para a entrega de soluções alinhadas às necessidades do negócio e aos requisitos regulatórios.

Responsabilidades:

• Desenvolver e evoluir soluções de Engenharia de Dados utilizando Databricks, PySpark e Microsoft Azure;
• Atuar na migração de pipelines e ambientes legados, incluindo PowerCenter, Oracle e DB2, para uma arquitetura Lakehouse baseada em Delta Lake;
• Construir pipelines de ingestão e transformação de dados utilizando PySpark e Spark SQL;
• Implementar soluções seguindo a arquitetura Medallion;
• Aplicar práticas de governança de dados por meio do Unity Catalog;
• Definir e aplicar padrões técnicos para processamento, versionamento e qualidade dos dados;
• Contribuir com a definição da arquitetura técnica em conjunto com o Arquiteto de Dados;
• Apoiar a evolução da plataforma Databricks, incluindo estratégias de ingestão, orquestração e integração com ambientes corporativos;
• Implementar mecanismos de validação, reconciliação e paridade de dados, garantindo qualidade, confiabilidade e conformidade com requisitos regulatórios;
• Atuar no processamento de grandes volumes de dados, considerando performance e escalabilidade;
• Apoiar tecnicamente os Engenheiros de Dados do projeto, promovendo boas práticas de desenvolvimento;
• Realizar revisão de código, documentação técnica e compartilhamento de conhecimento;
• Apoiar a implementação e evolução de processos de CI/CD para projetos de dados;
• Contribuir para a observabilidade, o monitoramento e a melhoria contínua da plataforma.

Requisitos e Qualificações

• Experiência mínima de 5 anos em Engenharia de Dados;
• Experiência sólida com Databricks, incluindo PySpark, Delta Lake, Lakehouse e Unity Catalog;
• Experiência no desenvolvimento de soluções utilizando PySpark;
• Conhecimento em arquitetura Medallion;
• Experiência com SQL, Oracle e DB2 (baixa plataforma);
• Experiência na construção de pipelines de ingestão e transformação de dados;
• Vivência com processamento de grandes volumes de dados;
• Conhecimento em modelagem de dados analítica;
• Conhecimento intermediário em Microsoft Azure, incluindo Azure Key Vault, RBAC, governança de acesso e Microsoft Entra ID;
• Conhecimento intermediário em Azure Data Factory;
• Experiência em migração de ambientes legados para plataformas modernas e escaláveis de dados;
• Experiência com CI/CD para projetos de dados, utilizando GitHub;
• Vivência com ambientes DEV, HOM e PRD;
• Experiência em revisão técnica de código;
• Conhecimento em testes unitários e validação de pipelines de dados;
• Conhecimento em observabilidade e monitoramento de pipelines;
• Experiência com metodologias ágeis, como Scrum e Kanban;
• Vivência com Jira e Confluence;
• Conhecimento em bancos de dados e tecnologias como MySQL, PL/SQL, PostgreSQL e SQL Server;
• Capacidade analítica, organização, comunicação e colaboração com equipes multidisciplinares.

Diferenciais

• Experiência com migração de Informatica PowerCenter para Databricks;
• Conhecimento em Informatica PowerCenter;
• Conhecimento em práticas de DataOps;
• Experiência com LGPD;
• Vivência em projetos regulatórios, financeiros ou bancários;
• Certificações Microsoft Azure ou Databricks.

Descrição comportamental:

Procuramos uma pessoa que:

• Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
• Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
• Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
• Tenha habilidades de resolução de problemas;
• Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
• Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver – small enough to care.

#VempraGFT

#VamosVoarJuntos

#ProudToBeGFT