Engenheiro de Dados
Resumo
- Nível de Experiência: Sênior
- Tipo de alocação: Remoto
Descrição da vaga
• Projetar pipelines de dados.
• Entender o problema e/ou a necessidade das áreas demandantes.
• Mapear os dados necessários e suas respectivas origens.
• Mapear a movimentação dos dados pelas camadas do Data Lake e as transformações necessárias.
• Criar modelos dimensionais para o relacionamento de dados.
• Desenvolver pipelines de dados.
• Parametrizar arquivos JSON para o uso de componentes genéricos de uso comum.
• Criar código Python e Apache Spark para transformar dados, conforme especificações.
• Testar os pipelines desenvolvidos e garantir a correta entrega do dados utilizando práticas de TDD.
Conhecimentos
Sólidos conhecimentos em AWS, Ingestão de dados, ELT – ETL, Python e Pyspark.
Vagas Similares
- Brasil
- Remoto
Engenheiro de Dados
Experiência em:Python;Excel;SQL;Metodologia ágil.
- Brasil
- Remoto
Arquiteto(a) de dados
- Apache Airflow
- Apache Hadoop
- Apache Kafka
- Apache Spark
- AWS
- Azure
- Cassandra
- GCP
- Java/Maven
- MongoDB
- Python
- Scala
o Identificar requisitos de armazenamento e processamento dos dados;o Construir o
- Brasil
- Remoto
Engenheiro(a) de dados
• Definir melhores práticas, ferramentas e modelos de gestão para construção
- Brasil
- SP
- São Paulo
- Hibrido
Tech Lead de Dados
O que buscamos de conhecimento técnico? Domínio em PowerCenter e SQL;Vivência com
- Brasil
- SP
- Remoto-Hibrido
Engenheiro(a) de Dados
Entender com a área solicitante do projeto quais os dados e
Se Interessou? Envie seu currículo.
Faça parte da nossa equipe! Venha para Jump Label Solutions!