Empresa: Mollica IT
Buscamos um(a) AWS Big Data Administrator para atuar na administração, sustentação, otimização e automação de plataformas de Big Data em ambientes AWS, com foco em Amazon EMR e ecossistema Hadoop . O perfil deve ter forte experiência em administração de plataformas, infraestrutura e suporte a ambientes produtivos, não sendo uma posição voltada para desenvolvimento. Qual será a sua missão? Provisionar, configurar e administrar clusters Amazon EMR, otimizar sizing, auto scaling e performance, administrar componentes do ecossistema Hadoop, incluindo HDFS, YARN, Hive e Spark; Instalar, configurar e realizar upgrades de ferramentas de Big Data, monitorar a saúde dos clusters e solucionar falhas; Administrar pipelines de ingestão de dados utilizando Kafka, Kinesis e AWS Glue; Implementar segurança em ambientes EMR utilizando IAM, Kerberos, KMS e configurações de VPC, garantindo conformidade com os padrões organizacionais; Automatizar o provisionamento de ambientes EMR utilizando CloudFormation, CDK ou Terraform; Construir pipelines de CI/CD utilizando ferramentas AWS ou Jenkins; Implementar estratégias de otimização de custos; Utilizar CloudWatch, CloudTrail e EMR Console para diagnóstico e monitoramento; Realizar tuning de jobs Spark e Hive para melhoria de performance; Atuar em conjunto com times de Data Engineering e Cloud; Prestar suporte a ambientes produtivos e atuar em regime de on-call; Demais rotinas da área. Requisitos: O que você precisa ter: Experiência avançada com AWS EMR e ecossistema Hadoop ; Forte experiência em administração Linux e scripting com Bash e Python ; Conhecimento de serviços AWS , como S3, EC2, IAM e CloudWatch ; Experiência com Terraform , CloudFormation e ferramentas DevOps ; Experiência como AWS Big Data Platform Administrator , atuando com ambientes EMR, HBase, Glue, PySpark e Scala ; Conhecimento em Terraform ; Experiência em administração de plataformas, não sendo um perfil de desenvolvimento; Obrigatório graduação completa. Diferenciais: Certificações AWS, como Solutions Architect, Big Data ou Data Engineer ; Experiência com EMR Serverless ; Experiência com Docker ; Experiência com Kubernetes . 🌎 Idioma: Inglês Avançado para conversação (Haverá etapa de entrevista nesse idioma). Sobre a empresa: Buscando projetos inovadores? Então vem com a Mollica IT e encontre a oportunidade certa pra dar match! Vaga publicada originalmente em https://jobs.quickin.io/mollicait/jobs/6a85b8c756cf540013d08592