Senior Data Engineer | AWS & Data Platforms

Empresa: Mazzatech

Principais responsabilidades: • Desenhar, desenvolver, manter e otimizar pipelines de dados escaláveis e confiáveis. • Construir processos de ingestão, integração e transformação de dados utilizando SQL, Python e tecnologias de processamento distribuído. • Desenvolver e sustentar soluções de dados baseadas em AWS, utilizando serviços como Amazon S3, AWS Glue, Amazon Redshift, Amazon Athena e AWS Lambda. • Apoiar a construção e a evolução de Data Lakes, Data Warehouses e plataformas modernas de dados. • Implementar processos de ETL e ELT alinhados às necessidades técnicas e de negócio. • Desenvolver soluções utilizando Apache Spark ou PySpark para processamento de grandes volumes de dados. • Participar de discussões de arquitetura, contribuindo para a definição de soluções seguras, escaláveis e sustentáveis. • Monitorar e otimizar a performance de pipelines, consultas, processos de transformação e workloads em cloud. • nvestigar e solucionar problemas relacionados à ingestão, processamento, armazenamento e disponibilização de dados. • Realizar análises de causa raiz e implementar ações corretivas para problemas recorrentes. • Garantir a qualidade, integridade, segurança e governança dos dados ao longo dos processos de engenharia. • Colaborar com arquitetos, engenheiros de software, analistas e stakeholders de negócio na definição e entrega das soluções. • Apoiar projetos de migração para cloud, modernização de plataformas e evolução da arquitetura de dados. • Tempo: indeterminado • Local: hibrida ou remota • Implementar práticas de automação, versionamento, CI/CD e DataOps. • Garantir aderência aos padrões técnicos, controles internos e requisitos regulatórios aplicáveis. • Criar e manter documentação técnica, fluxos de dados e procedimentos operacionais atualizados. • Contribuir para iniciativas de padronização, compartilhamento de conhecimento e melhoria contínua. Sobre a empresa: Graduação em Ciência da Computação, Engenharia de Software ou áreas correlatas; Inglês avançado (C2), com capacidade de comunicação em ambiente internacional Experiência no desenho, desenvolvimento e sustentação de pipelines de dados escaláveis; Conhecimento avançado de SQL e Python; Experiência com processos de ETL e ELT, ingestão, integração e transformação de dados; Vivência com serviços de dados da AWS, como Amazon S3, AWS Glue, Amazon Redshift, Amazon Athena e AWS Lambda; Conhecimento de modelagem de dados e arquiteturas de Data Warehouse e Data Lake; Experiência com processamento distribuído utilizando Apache Spark ou PySpark; Capacidade para desenvolver, monitorar, otimizar e solucionar problemas em pipelines de dados; Conhecimento de práticas de qualidade, segurança e governança de dados; Vivência em ambientes Agile e colaboração com equipes multidisciplinares e distribuídas; Capacidade analítica, autonomia, comunicação clara e atenção à qualidade das entregas. Diferenciais: • Experiência com Databricks ou Snowflake; • Conhecimento de Apache Airflow ou ferramentas equivalentes de orquestração; • Experiência com dbt; • Vivência com Kafka ou outras tecnologias de mensageria e streaming; • Conhecimento de Terraform e Infrastructure as Code; • Experiência com Git, automação e pipelines de CI/CD; • Vivência com práticas de DataOps; • Participação em projetos de migração, modernização ou transformação de plataformas de dados • Experiência em instituições financeiras, bancos, Wealth Management, Asset Management ou outros ambientes regulados; • Certificações relacionadas a AWS, Azure, Databricks, Snowflake ou engenharia de dados.

Ver todas as vagas