Engenheiro De Dados

PERFIL: ENGENHEIRO DE DADOS
CONTRATAÇÃO CLTATUAÇÃO REMOTA
Responsabilidades e atribuiçõesO que esperamos que você realize:
Construir pipelines de dados, desde a extração nas diversas fontes de dados disponíveis (Arquivos de Plataforma Baixa (JSON, TXT, CSV, XLSX, XML, etc), Bancos de Dados (SQL Server, Oracle, DB2) , Streaming, Tópicos Kafka, API, Sites Externos, etc) até a ingestão e estruturação dos dados no Data Lake Corporativo;Catalogação de Dados e aplicação de controles de qualidade de dados. Deve ser especialista no ambiente Azure e Databricks;Execução de Teste Unitário dos Pipelines;Criação dos planos de implantação para implantação em ambiente de produção Acompanhamento da Implantação;Validação do pipeline pós-implantação;Acompanhamento da estabilização do pipeline em Produção Sustentação pós-implantação (Durante período de garantia – 90 dias) Registro de Atividades nas Ferramentas oficiais do Banco (Jira)
Requisitos e qualificaçõesO que precisamos que você tenha de conhecimento:
Requisitos essenciais:Sólida vivência com Azure Databrick, ETL, Azure Datafactory, Apache Spark, Python e SQL.Imprescindível conhecimento em git e versionamento de código
Cadastre-se em nosso link: