Engenheiro de Dados

Resumo

Nível de Experiência: Pleno / Sênior
Tipo de alocação: Remoto

Descrição da vaga

Projetar pipelines de dados.
Entender o problema e/ou a necessidade das áreas demandantes.
Mapear os dados necessários e suas respectivas origens.
Mapear a movimentação dos dados pelas camadas do Data Lake e as transformações necessárias.
Criar modelos dimensionais para o relacionamento de dados.
Desenvolver pipelines de dados.
Criar código Python e Apache Spark para transformar dados, conforme especificações.
Testar os pipelines desenvolvidos e garantir a correta entrega do dado.

Conhecimentos

Linguagem Python;
Airflow;
Sólidos conhecimentos em AWS;
Apache Spark;
Linguagem SQL;
Modelagem dimensional de dados;
Apache Airflow.

Mais informações

Soft Skills:

Interesse em novas tecnologias de código aberto.
Interesse de pesquisar e estudar por conta própria para manter as habilidades técnicas relevantes em um ambiente altamente complexo.
Inovador e capacidade de pensar fora da caixa para a solução criativa de problemas.
Orienta os colegas e busca oportunidades de melhoria contínua. Confortável trabalhando em equipes multifuncionais e multidisciplinares.
Capacidade de trabalhar de forma independente e como parte de uma equipe.
Capacidade de multitarefa e priorizar prazos.
Excelentes habilidades de comunicação verbal e escrita com grande atenção aos detalhes e precisão.
Experiência de trabalho em um ambiente Agile / Scrum.