Engenheiro de dados
Stefanini Brasil
PERFIL : ENGENHEIRO DE DADOS
CONTRATAÇÃO CLT
ATUAÇÃO REMOTA
Responsabilidades e atribuições
O que esperamos que você realize :
- Construir pipelines de dados, desde a extração nas diversas fontes de dados disponíveis (Arquivos de Plataforma Baixa (JSON, TXT, CSV, XLSX, XML, etc), Bancos de Dados (SQL Server, Oracle, DB2) , Streaming, Tópicos Kafka, API, Sites Externos, etc) até a ingestão e estruturação dos dados no Data Lake Corporativo;
- Catalogação de Dados e aplicação de controles de qualidade de dados. Deve ser especialista no ambiente Azure e Databricks;
- Execução de Teste Unitário dos Pipelines;
- Criação dos planos de implantação para implantação em ambiente de produção Acompanhamento da Implantação;
- Validação do pipeline pós-implantação;
- Acompanhamento da estabilização do pipeline em Produção Sustentação pós-implantação (Durante período de garantia 90 dias) Registro de Atividades nas Ferramentas oficiais do Banco (Jira)
Requisitos e qualificações
O que precisamos que você tenha de conhecimento :
Requisitos essenciais :
- Sólida vivência com Azure Databrick, ETL, Azure Datafactory, Apache Spark, Python e SQL.
- Imprescindível conhecimento em git e versionamento de código
Cadastre-se em nosso link : https : / / stefanini.gupy.io / jobs / 7738287
Trabalhos semelhantes que podem ser interessantes para você
-
Selecione a frequência (em dias) de recebimento de alertas : Família de Cargo : Project & Site ManagementLocalização : Araraquara, São Paulo, BRLocal de trabalho : Araraquara, SP, BRTipo de localizaç
-
Construtora admite Engenheiro de Planejamento em Belo Horizonte. Elaborar e atualizar o cronograma de obras, garantindo que o projeto seja concluído dentro do prazo estipulado.Realizar análises e est
-
Sobre a empresa : Quer fazer parte da Mutual Engenharia? São 35 anos criando valor através da prestação de serviços de engenharia e construção. A nossa empresa é formada por pessoas que fazem da Mutu
-
Consultoria em engenharia admite Engenheiro de Planejamento Sênior em Conceição do Mato Dentro. Desenvolvimento e implementação de planos e estratégias de engenharia para projetos de grande porte.Coo
-
Job description Aqui na Passarelli nós somos apaixonados pelo que fazemos.Aqui nós somos construtores de sonhos e conseguimos impactar as comunidades das localidades onde atuamos com o nosso Jeito de
-
Empresa de Obras de infra-estrutura admite Engenheiro de Planejamento Sênior em Belo Horizonte (Santo Agostinho). Realizar a elaboração e controle de cronograma de projeto.Realizar a elaboração de re