Empresa: He Click Seleção & Performance
Responsabilidades: Projetar, desenvolver e monitorar pipelines de dados ETL/ELT, em processamento batch e streaming Integrar dados de diferentes sistemas e fontes, garantindo consistência, rastreabilidade e confiabilidade Construir, manter e otimizar arquiteturas de Data Lake, Data Warehouse e Lakehouse Desenvolver rotinas automatizadas para validação, qualidade e integridade dos dados Aplicar boas práticas de engenharia de software, incluindo Git, CI/CD, testes automatizados e documentação técnica Monitorar desempenho, escalabilidade e custos dos processos de dados em nuvem Colaborar com equipes de BI, Analytics, Ciência de Dados, Inteligência Artificial e áreas de negócio Identificar oportunidades de melhoria e propor soluções para aumentar a eficiência dos processos de dados Requisitos obrigatórios: Experiência sólida com Python e SQL avançado Experiência prática com pelo menos uma plataforma de nuvem pública: Google Cloud Platform (GCP), AWS ou Azure Conhecimento de serviços gerenciados de armazenamento e Data Warehouse, como BigQuery, Amazon Redshift ou Snowflake Experiência com ferramentas de orquestração de workflows, como Apache Airflow, Cloud Composer, Prefect ou Dagster Conhecimento de modelagem dimensional, incluindo Star Schema, e boas práticas para Data Warehouses Domínio de Git e familiaridade com processos de integração e entrega contínuas (CI/CD) Conhecimentos desejáveis: Experiência com dbt para transformação e organização de dados Conhecimento em processamento distribuído utilizando Apache Spark ou PySpark Vivência com mensageria e streaming, como Kafka ou Pub/Sub Noções de conteinerização e orquestração com Docker e Kubernetes Experiência com MLOps ou suporte a projetos de Inteligência Artificial e modelos preditivos