SR Engenharia de Dados (Python / Microsserviços) at ília in Brazil

Aqui na ília nossas vagas estão sempre abertas para todas as pessoas e não se restringem quanto a gênero, etnia, orientação sexual, fatores sociais, condições físicas ou intelectuais (PCD) etc. Incentivamos a candidatura de integrantes de todos os grupos minoritários! Sobre a ília Somos especialistas em tecnologia, dados e design, impulsionando a transformação digital de grandes players do mercado há mais de 10 anos, nos setores financeiro, seguros e mobilidade. Com mais de 450 profissionais, estamos presentes no Brasil e Europa, atendendo aos mercados da América Latina, Europa e América do Norte, desenvolvendo produtos digitais de alta qualidade e com foco em resultados de negócios. Somos uma equipe inovadora, criativa e apaixonada por tecnologia. Certificada pelo 7° ano consecutivo como Great Place to work aqui na ília acreditamos que pessoas mudam o mundo, e investimos nelas. Nossas awesome deliveries são feitas de pessoas para pessoas, afinal awesome people make awesome deliveries! #Vempraília! Sobre a vaga: Esta oportunidade é para atuar em um time de  alta performance. Buscamos um perfil híbrido que domine a Engenharia de Dados, mas que possua a "casca" de desenvolvimento de software. Diferente de posições tradicionais de dados, aqui você trabalhará diretamente com a integração entre pipelines e microsserviços, exigindo versatilidade para transitar entre diferentes stacks tecnológicas conforme o desafio do projeto. Responsabilidades: Ingestão e Extração: Desenvolver scripts (Python puro ou PySpark) para consultar bases SQL Server, tratar os dados e publicá-los em buckets AWS S3. Processamento (Arquitetura Medalhão): Construir pipelines para mover e refinar dados entre as camadas Bronze e Prata utilizando Python, PySpark e AWS Glue. Disponibilização de Dados: Garantir a entrega de dados em OpenSearch (Fast Data) e no Amazon Redshift (para suporte ao time de BI). Integração com Microsserviços: Colaborar com a camada de consumo, onde microsserviços em Node.js consultam o OpenSearch para servir as aplicações finais. Visão Consultiva: Atuar de forma autônoma, indicando os melhores caminhos técnicos e arquiteturais para o projeto. Requisitos: Sólida vivência em projetos de engenharia de dados com autonomia para execução sem supervisão constante. Domínio de Python e PySpark: Experiência avançada em processamento de dados e scripts de automação. Software Engineering: Conhecimento profundo em Programação Orientada a Objetos (POO) e conceitos sólidos de Microsserviços. Cloud AWS: Experiência prática com S3, Glue e Redshift. Banco de Dados: Domínio de SQL para consultas e manipulações (SQL Server) Mentalidade "Agnostic Stack": Flexibilidade e interesse em lidar com múltiplas linguagens e curvas de aprendizado (como baixar um projeto Node.js ou Java para testes e spikes). Diferenciais: Conhecimento prévio em Node.js. Experiência com OpenSearch ou ferramentas similares de busca. Experiência com AWS Glue utilizando Python. Benefícios e Incentivos: Nossa contratação é CLT- 40h semanais com jornada flexível, sendo executada de forma remota. Os benefícios da ília são pensados para proporcionar uma experiência AWESOME para cada ílian, abaixo você encontra os benefícios de forma resumida. #vempraília Para Saúde e bem-estar: Plano de Saúde e Odontológico SulAmérica extensivo a dependentes; Vale Alimentação/Refeição em cartão flexível Caju benefícios Seguro de Vida; Auxílio Home-Office em cartão flexível Caju benefícios; Wellhub (Gympass); Sesc – extensivo a dependentes, com acesso aos serviços em todo o Brasil; TotalPass. Para o seu Desenvolvimento: ília University: Universidade Corporativa com mais de 20 mil cursos disponíveis para desenvolvimento pessoal e profissional; Language Academy: Escola de idiomas para ílians; í-talks e Chapter: Momentos e cerimônias em que o time compartilha práticas, estudos, projetos e ideias. Nas chapters ainda se reúnem pessoas com skills similares para compartilhamento de ideias, práticas e experiências; Gostamos de ir além no cuidado com as nossas pessoas, então dispomos também de alguns benefícios não convencionais: Plano de Saúde PET - Guapeco Onhappy – benefício de viagem a lazer, com liberdade para você viajar com quem quiser. BYOD - Alugamos o seu notebook pessoal te pagando um valor mensal para que você o use, mas disponibilizamos também máquinas de trabalho para ílians. Você quem decide! Seu Niver, seu bolo! Seu Networking Vale Prêmio - Programa de premiação a indicação de novos funcionários.