Engenheiro De Dados

PERFIL: ENGENHEIRO DE DADOS

CONTRATAÇÃO CLT
ATUAÇÃO REMOTA

Responsabilidades e atribuições
O que esperamos que você realize:

Construir pipelines de dados, desde a extração nas diversas fontes de dados disponíveis (Arquivos de Plataforma Baixa (JSON, TXT, CSV, XLSX, XML, etc), Bancos de Dados (SQL Server, Oracle, DB2) , Streaming, Tópicos Kafka, API, Sites Externos, etc) até a ingestão e estruturação dos dados no Data Lake Corporativo;
Catalogação de Dados e aplicação de controles de qualidade de dados.
Deve ser especialista no ambiente Azure e Databricks;
Execução de Teste Unitário dos Pipelines;
Criação dos planos de implantação para implantação em ambiente de produção Acompanhamento da Implantação;
Validação do pipeline pós-implantação;
Acompanhamento da estabilização do pipeline em Produção Sustentação pós-implantação (Durante período de garantia – 90 dias) Registro de Atividades nas Ferramentas oficiais do Banco (Jira)

Requisitos e qualificações
O que precisamos que você tenha de conhecimento:

Requisitos essenciais:
Sólida vivência com Azure Databrick, ETL, Azure Datafactory, Apache Spark, Python e SQL.
Imprescindível conhecimento em git e versionamento de código

Cadastre-se em nosso link: