Empresa: Gateware
Buscamos um(a) profissional para desenvolver e sustentar soluções de engenharia e qualidade de dados em larga escala, com foco em confiabilidade, desempenho e observabilidade. Responsabilidades: • Desenvolver e evoluir frameworks de qualidade de dados com Python e PySpark, automatizando validações e acompanhando o histórico de qualidade. • Otimizar pipelines no Databricks para reduzir o tempo de processamento e os custos computacionais. • Implementar métricas e alertas para identificar falhas e acompanhar a operação da plataforma. • Colaborar com Produto e Arquitetura na definição de soluções e apoiar tecnicamente a equipe. Requisitos: • Experiência sólida em engenharia de dados, processamento distribuído e otimização de pipelines de grande volume. • Inglês avançado. • Domínio de Python, PySpark e SQL e experiência prática com Databricks. • Experiência com AWS, Azure ou GCP e conhecimento de arquiteturas como Data Lake ou Lakehouse. • Conhecimento em Data Quality, governança de dados e observabilidade, preferencialmente com Datadog. Diferenciais: • Machine Learning aplicado à detecção de Data Drift, uso de YAML para automatizar regras de validação e experiência em mentoria técnica. Salário: Confidencial Sobre a empresa: Venha fazer a diferença com performance e criatividade ao lado da Gateware! Somos uma empresa focada em tecnologia, inovação, parceira SAP Partner Open Ecosystem e SAMSUNG SDS, participante do Pacto Global da ONU no Brasil, certificada GPTW (Great Place To Work) pela 6ª vez consecutiva e certificada GPMH (Great People Mental Health) pela 2ª vez consecutiva. Com mais de 25 anos de história, promovemos a transformação através de soluções e serviços de TI. Atuamos com: ▪️ Gestão Estratégica: GMO Gestão de Mudanças, PMO Gestão de Projetos, Cutover Estratégico de Negócio e Governança; ▪️ Alocação de Profissionais e Squads de Desenvolvimento: Profissionais especializados e times de tecnologia, com acompanhamento exclusivo. Além disso, inovamos diariamente para proporcionar um ambiente de alta performance e que apoia a diversidade. Estamos com tudo pronto para dar as boas-vindas a um profissional incrível como você!