Se você é apaixonado(a) por dados, tem experiência sólida em arquiteturas distribuídas e gosta de propor melhorias contínuas, essa vaga é para você!
🎯 Responsabilidades
- Projetar e manter pipelines de ingestão, transformação e consumo de dados em Python e Spark (batch e streaming).
- Construir e otimizar Glue Jobs, Glue Catalog e consultas em Athena.
Estruturar data lakes em Iceberg, garantindo governança, versionamento e performance.
- Definir estratégias de particionamento, compressão e formatos colunares (Parquet, ORC) para lidar com grandes volumes de dados.
- Orquestrar fluxos complexos no MWAA (Airflow), assegurando robustez e monitoramento de jobs críticos.
- Integrar sistemas usando SQS e Kafka, garantindo escalabilidade e baixa latência.
- Apoiar operações em EKS/Kubernetes, aplicando boas práticas de containerização e deployment.
- Trabalhar de forma proativa, sugerindo melhorias em arquitetura, custo, segurança e performance.
REQUISITOS
🔧 Requisitos
- Experiência comprovada em engenharia de dados.
- Proficiência em Python e Spark (batch e streaming).
- Experiência avançada em AWS: Glue, Athena, EMR, S3, Redshift, IAM, MWAA.
- Conhecimento em Iceberg para organização de data lakes.
- Experiência com Airflow (gestão de DAGs e orquestração de jobs complexos).
- Vivência com EKS/Kubernetes.
- Experiência com mensageria e streaming: SQS e Kafka.
- Forte background em arquitetura distribuída, governança e segurança de dados.
- Perfil pró-ativo, crítico e focado em entregar soluções robustas e escaláveis.
🌟 Diferenciais
- Capacidade de liderar iniciativas técnicas e orientar engenheiros(as) mais juniores.
- Mentalidade de melhoria contínua, propondo automações, otimizações de custo e padrões de qualidade.
- Experiência em migração de ambientes legados para nuvem.
- Boa comunicação para transformar problemas complexos em soluções claras.
- Visão end-to-end do ciclo de dados, da ingestão ao consumo analítico.
SALÁRIO E BENEFÍCIOS
🕐 Horário
Segunda a sexta-feira (08h00 às 12h00 e 13h00 às 17h00).
💬 Interessados(as), por favor, enviem CV atualizado e pretensão salarial PJ
ESPECIFICAÇÕES
Área: Dados Cargo: Engenheiro Plataforma: Python Especialidade: ETL Nível: Senior
