Empresa: GFT Technologies
O que buscamos Buscamos um(a) Engenheiro(a) de Dados para atuar no projeto, integrando o time responsável pela construção, evolução e sustentação de soluções de dados em ambiente Cloud . O profissional atuará no desenvolvimento de pipelines de dados escaláveis , processos de ingestão e transformação, arquitetura de dados e disponibilização de informações para consumo analítico, utilizando principalmente Databricks, Azure Data Factory, SQL e Python/PySpark . Responsabilidades: • Desenvolver e manter pipelines de dados escaláveis, eficientes e confiáveis ; • Atuar na ingestão, transformação e disponibilização de dados para consumo analítico; • Desenvolver soluções de engenharia de dados utilizando Databricks ; • Implementar e manter processos de integração e processamento de dados; • Trabalhar com Azure Data Factory na orquestração de pipelines; • Atuar na construção e evolução de arquiteturas de dados em ambiente Cloud ; • Desenvolver processos de ETL/ELT ; • Garantir a qualidade, governança, integridade e performance dos dados; • Trabalhar com SQL e modelagem de dados ; • Desenvolver soluções utilizando Python e/ou Spark (PySpark) ; • Monitorar processos de integração e processamento de dados; • Identificar e implementar melhorias de performance e eficiência; • Colaborar com times de Engenharia, Analytics e áreas de negócio para entendimento de requisitos; • Traduzir necessidades de negócio em soluções de dados; • Contribuir para a evolução das soluções de dados relacionadas ao projeto de Reforma Tributária ; • Atuar na sustentação e evolução das soluções desenvolvidas. Requisitos Obrigatórios: • Experiência profissional em Engenharia de Dados ; • Experiência ou conhecimento sólido em Databricks para processamento e engenharia de dados; • Experiência com Azure Data Factory para orquestração de pipelines; • Conhecimento em SQL ; • Conhecimento em modelagem de dados ; • Experiência com Python e/ou Spark (PySpark) ; • Experiência em ambientes Cloud , preferencialmente Microsoft Azure ; • Conhecimento em práticas de ETL/ELT ; • Conhecimento em integração de dados ; • Capacidade de desenvolver e manter pipelines de dados; • Conhecimento em práticas de qualidade e performance de dados. Diferenciais: • Experiência com arquiteturas modernas de dados, como Data Lake e Lakehouse ; • Conhecimento em governança e qualidade de dados ; • Experiência em ambientes com grande volume de dados ; • Certificações Databricks , como: • Databricks Certified Data Engineer Associate; • Databricks Certified Data Engineer Professional; • Databricks Certified Data Analyst Associate; • Databricks Certified Machine Learning Associate; • Databricks Certified Machine Learning Professional; • Experiência em projetos dos segmentos financeiro, bancário, segurador ou contábil ; • Conhecimento em Data Management ; • Experiência com Data Analysis . • Competências Comportamentais • Perfil analítico e orientado à resolução de problemas; • Organização e atenção à qualidade dos dados; • Proatividade na identificação e implementação de melhorias; • Boa comunicação e colaboração com equipes multidisciplinares; • Capacidade de compreender requisitos técnicos e de negócio; • Senso de responsabilidade e comprometimento com as entregas; • Capacidade de atuar em ambientes complexos e de grande volume de dados.