Empresa: GFT Technologies
O que buscamos: Buscamos um(a) profissional de Engenharia de Dados L3 com experiência sólida no desenvolvimento e na evolução de soluções de dados complexas e escaláveis, utilizando Databricks, PySpark e Microsoft Azure . O profissional atuará na modernização da plataforma de dados, com foco na migração de pipelines legados — como PowerCenter, Oracle e DB2 — para uma arquitetura Lakehouse baseada em Delta Lake. Será responsável pela construção e evolução de pipelines de ingestão e transformação de dados, garantindo performance, escalabilidade, rastreabilidade, qualidade e governança. Também terá participação na definição da arquitetura técnica, implementação de padrões de desenvolvimento e apoio técnico aos demais engenheiros de dados, contribuindo para a melhoria contínua da plataforma e para a entrega de soluções alinhadas às necessidades do negócio e aos requisitos regulatórios. Responsabilidades: • Desenvolver e evoluir solu çõ es de Engenharia de Dados utilizando Databricks, PySpark e Microsoft Azure; • Atuar na migra çã o de pipelines e ambientes legados, incluindo PowerCenter, Oracle e DB2, para uma arquitetura Lakehouse baseada em Delta Lake; • Construir pipelines de ingest ã o e transforma çã o de dados utilizando PySpark e Spark SQL; • Implementar solu çõ es seguindo a arquitetura Medallion; • Aplicar pr á ticas de governan ç a de dados por meio do Unity Catalog; • Definir e aplicar padr õ es t é cnicos para processamento, versionamento e qualidade dos dados; • Contribuir com a defini çã o da arquitetura t é cnica em conjunto com o Arquiteto de Dados; • Apoiar a evolu çã o da plataforma Databricks, incluindo estrat é gias de ingest ã o, orquestra çã o e integra çã o com ambientes corporativos; • Implementar mecanismos de valida çã o, reconcilia çã o e paridade de dados, garantindo qualidade, confiabilidade e conformidade com requisitos regulat ó rios; • Atuar no processamento de grandes volumes de dados, considerando performance e escalabilidade; • Apoiar tecnicamente os Engenheiros de Dados do projeto, promovendo boas pr á ticas de desenvolvimento; • Realizar revis ã o de c ó digo, documenta çã o t é cnica e compartilhamento de conhecimento; • Apoiar a implementa çã o e evolu çã o de processos de CI/CD para projetos de dados; • Contribuir para a observabilidade, o monitoramento e a melhoria cont í nua da plataforma. Requisitos e Qualificações: • Experiência mínima de 5 anos em Engenharia de Dados; • Experiência sólida com Databricks, incluindo PySpark, Delta Lake, Lakehouse e Unity Catalog; • Experiência no desenvolvimento de soluções utilizando PySpark; • Conhecimento em arquitetura Medallion; • Experiência com SQL, Oracle e DB2 (baixa plataforma); • Experiência na construção de pipelines de ingestão e transformação de dados; • Vivência com processamento de grandes volumes de dados; • Conhecimento em modelagem de dados analítica; • Conhecimento intermediário em Microsoft Azure, incluindo Azure Key Vault, RBAC, governança de acesso e Microsoft Entra ID; • Conhecimento intermediário em Azure Data Factory; • Experiência em migração de ambientes legados para plataformas modernas e escaláveis de dados; • Experiência com CI/CD para projetos de dados, utilizando GitHub; • Vivência com ambientes DEV, HOM e PRD; • Experiência em revisão técnica de código; • Conhecimento em testes unitários e validação de pipelines de dados; • Conhecimento em observabilidade e monitoramento de pipelines; • Experiência com metodologias ágeis, como Scrum e Kanban; • Vivência com Jira e Confluence; • Conhecimento em bancos de dados e tecnologias como MySQL, PL/SQL, PostgreSQL e SQL Server; • Capacidade analítica, organização, comunicação e colaboração com equipes multidisciplinares. Diferenciais: • Experiência com migração de Informatica PowerCenter para Databricks; • Conhecimento em Informatica PowerCenter; • Conhecimento em práticas de DataOps; • Experiência com LGPD; • Vivência em projetos regulatórios, financeiros ou bancários; • Certificações Microsoft Azure ou Databricks. • Descrição comportamental: • Procuramos uma pessoa que: • Goste de trabalhar em equipe e seja colaborativa em suas atribuições; • Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento; • Transforme ideias em soluções criativas e busque qualidade em toda sua rotina; • Tenha habilidades de resolução de problemas ; • Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo ; • Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico. • Big enough to deliver – small enough to care. • #VempraGFT • #VamosVoarJuntos • #ProudToBeGFT