Pessoa Administradora de Big Data - Sênior

Buscando projetos inovadores?

Então vem com a Mollica IT e encontre a oportunidade certa pra dar match!

Qual será a sua missão?

• Administrar clusters Amazon EMR, incluindo provisionamento, configuração e gerenciamento;
• Otimizar dimensionamento, auto scaling e performance dos clusters;
• Gerenciar componentes do ecossistema Hadoop (HDFS, YARN, Hive, Spark);
• Atuar na operação de plataformas de Big Data, incluindo instalação, configuração e atualização de ferramentas;
• Monitorar a saúde dos clusters e realizar troubleshooting de falhas;
• Gerenciar pipelines de ingestão de dados (Kafka, Kinesis, AWS Glue);
• Implementar práticas de segurança no EMR utilizando IAM, Kerberos, KMS e configurações de VPC;
• Garantir conformidade com padrões de segurança e governança;
• Automatizar provisionamento de infraestrutura com Terraform, CloudFormation ou CDK;
• Desenvolver e manter pipelines de CI/CD (AWS tools ou Jenkins);
• Implementar estratégias de otimização de custos em ambiente cloud;
• Monitorar ambientes utilizando CloudWatch, CloudTrail e EMR Console;
• Otimizar performance de jobs Spark e Hive;
• Trabalhar em conjunto com engenheiros de dados e times de cloud;
• Prestar suporte a ambientes produtivos e atuar em regime de plantão (on-call), quando necessário;
• Demais rotinas da área.

📌 Dúvidas? Entre em contato com [email protected]

O que você precisa ter:

• Experiência com AWS EMR e ecossistema Hadoop;
• Conhecimento em administração Linux e scripting (Bash e Python);
• Experiência com serviços AWS: S3, EC2, IAM e CloudWatch;
• Experiência com ferramentas de infraestrutura como código (Terraform, CloudFormation);
• Experiência com ferramentas e práticas de DevOps;
• Experiência com monitoramento e troubleshooting de ambientes distribuídos;
• Conhecimento em processamento de dados com Spark e Hive;
• Experiência com pipelines de dados (Kafka, Kinesis, AWS Glue);
• Conhecimento em segurança cloud (IAM, Kerberos, KMS, VPC);
• Capacidade de trabalhar em equipe e boa comunicação;
• Obrigatório graduação completa.

Diferenciais:

• Certificações AWS (Solutions Architect, Big Data, Data Engineer);
• Experiência com EMR Serverless;
• Experiência com Docker ou Kubernetes.

🌎 Idioma:

• Inglês Avançado para conversação (Haverá etapa de entrevista nesse idioma).