Vaga: ENGENHEIRO DE DADOS DATABRICKS RESOURE FOR SAP
Modelo de trabalho: REMOTO
Início: Junho de 2025
Período de Alocação: 12 meses Aproximadamente
Idioma: Inglês Avançado
Conhecimentos Técnicos Requeridos
• Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.
• Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.
• Otimização de desempenho: otimize o desempenho do processamento de dados e solucione problemas no ambiente do Databricks.
• Colaboração: Trabalhe em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer soluções.
• Documentação: crie e mantenha a documentação para processos de dados, arquitetura e fluxos de trabalho.
• Segurança e conformidade: Garanta a segurança dos dados e a conformidade com os regulamentos e padrões relevantes.
• Monitoramento e manutenção: Implemente soluções de monitoramento para garantir a confiabilidade do pipeline de dados e realizar manutenção regular.
Conhecimentos Técnicos Desejáveis
• Habilidades técnicas:
- Proficiência no uso do Azure Databricks e do Spark para processamento de dados.
- A compreensão da estrutura MDMF será uma vantagem adicional
- Experiência com SQL e gerenciamento de banco de dados.
• Experiência em nuvem:
- Experiência com serviços de nuvem do Azure, incluindo Azure Data Lake, Banco de Dados SQL do Azure e Armazenamento de Blobs do Azure.
• Modelagem de dados:
- Capacidade de projetar e implementar modelos de dados complexos.
• Solução de problemas:
- Fortes habilidades analíticas e de resolução de problemas.
• Comunicação:
- Excelentes habilidades de comunicação para colaborar com equipes multifuncionais.
- Apoie e interaja com diversas equipes em vários locais e fusos horários.
- Interaja com uma equipe multifuncional para resolver problemas e reunir requisitos.
- Deve ser capaz de rastrear incidentes, solicitações de serviço, solicitações de alteração para garantir que os SLAs sejam atendidos.