✅ Início: Imediato.
📔 Idioma: Inglês Avançado.
💼 Período: 12 meses com grandes chances de prorrogação.
🌐 Modelo de trabalho: Remoto.
Conhecimentos Técnicos Requeridos:
Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.
Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.
Otimização de desempenho: otimize o desempenho do processamento de dados e solucione problemas no ambiente do Databricks.
Colaboração: Trabalhe em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer soluções.
Documentação: crie e mantenha a documentação para processos de dados, arquitetura e fluxos de trabalho.
Segurança e conformidade: Garanta a segurança dos dados e a conformidade com os regulamentos e padrões relevantes.
Monitoramento e manutenção: Implemente soluções de monitoramento para garantir a confiabilidade do pipeline de dados e realizar manutenção regular.
Conhecimentos Técnicos Desejáveis:
Habilidades técnicas:
Proficiência no uso do Azure Databricks e do Spark para processamento de dados.
A compreensão da estrutura MDMF será uma vantagem adicional
Experiência com SQL e gerenciamento de banco de dados.
Experiência em nuvem:
Experiência com serviços de nuvem do Azure, incluindo Azure Data Lake, Banco de Dados SQL do Azure e Armazenamento de Blobs do Azure.
Modelagem de dados:
Capacidade de projetar e implementar modelos de dados complexos.
Solução de problemas:
Fortes habilidades analíticas e de resolução de problemas.
Comunicação:
Excelentes habilidades de comunicação para colaborar com equipes multifuncionais.
Apoie e interaja com diversas equipes em vários locais e fusos horários.
Interaja com uma equipe multifuncional para resolver problemas e reunir requisitos.
Deve ser capaz de rastrear incidentes, solicitações de serviço, solicitações de alteração para garantir que os SLAs sejam atendidos.
REQUISITOS
SALÁRIO E BENEFÍCIOS
ESPECIFICAÇÕES
Área: Dados Cargo: Engenheiro Plataforma: Python Especialidade: ETL Nível: Pleno
