Engenheiro de Dados Pleno:
Execução de tarefas e desenvolvimento de pipelines de dados.
Responsável pela transformação e manutenção dos processos ETL.
Atua com orientação e mentoria do Engenheiro de Dados Sênior.
Engenheiro de Dados Sênior:
Liderança técnica nos projetos de dados.
Responsável por decisões estratégicas sobre pipelines e arquitetura de dados.
Mentoria e apoio ao desenvolvimento do Engenheiro de Dados Pleno.
Requisitos Técnicos:
Experiência sólida em desenvolvimento e manutenção de pipelines de dados e processos ETL.
Domínio em Apache Spark e PySpark.
Proficiência em SQL e Python.
Experiência obrigatória com SQL Server.
Conhecimento obrigatório em bases de dados relacionais e sistemas transacionais, incluindo modelagem, integração e otimização.
Experiência com soluções AWS, especialmente:
AWS Glue e Glue Data Catalog.
Amazon EMR com Apache Spark.
Amazon S3 para armazenamento.
Amazon Redshift para consultas analíticas.
AWS Lake Formation para governança de dados.
Vivência com Apache Kafka para ingestão e processamento de dados em tempo real.
Habilidades Comportamentais:
Capacidade de aprendizado contínuo, acompanhando novas tecnologias e tendências.
Forte organização e atenção a detalhes.
Pensamento crítico para análise e resolução de problemas.
Visão colaborativa para atuar em equipe e contribuir com a evolução dos processos.