Perfil
Engenheiro de Dados Pleno/Sênior
Objetivo
· Atuar em projetos de Gestão de Dados e Inteligência de Negócios, construindo e implementando arquitetura, além de apoiar na modelagem de dados, transformações e entregas.
· Agregar valor aos contratos de uma empresa de prestação de serviços de TI através da consolidação e modelagem de dados, criação de
Data Warehouses
Modernos, formatação de informações e inteligência de negócios.
· Atuar em uma linha de serviços de consultoria baseado em plataforma de serviços em nuvem para extração, transformação e armazenamento de dados em uma estrutura de
Big Data
.
Responsabilidades
· Participação ativa em projetos de serviços de dados modernos (
Big Data
)
· Construção e manutenção de Arquiteturas de Dados ( LakeHouse, DataLake, DW, Mesh ).
· Criação de estruturas necessárias para consolidação e modelagem de dados
· Desenvolvimento de notebooks para transformação de dados.
· Estudo e avaliação de plataformas e serviços de dados em Nuvem para atender a demandas de negócios.
· Aplicação de práticas de segurança e governança de dados
· Desenvolvimento de soluções de dados em plataforma Microsoft / AWS / GCP
· Levantamento de requisitos, reuniões com áreas solicitantes e documentação de aplicações.
Requisitos necessários
· Pelo menos
3 anos de experiência
.
· Sólido conhecimento em
Databricks
.
· Sólido conhecimento em
linguagem SQL
· Sólida familiaridade com linguagem
Python
.
· Sólido conhecimento e experiência em
Spark/PySpark
.
· Conhecimento e experiência com serviços em
nuvem Azure
.
· Conhecimentos em
Data Warehouse
e
Modern Data Warehouse
(
Big Data
)
· Conhecimento em
Bancos de Dados SQL
Server e Oracle
· Conhecimentos sobre Bancos de Dados
no-SQL
· Conhecimento sobre ferramentas de extrações de dados, assim como práticas de otimização e performance.
· Conhecimento sobre modelagem dimensional, relacional e tabular.
· Conhecimento fundamentado em programação orientada a dados.
· Experiência em servir conjuntos de dados para analistas de negócios e de dados.
· Inglês intermediário / instrumental
Diferencial
· Experiência em normalização, otimização e modelagem de dados
· Experiência com processos e práticas de governança de dados.
· Certificações em Cloud (AWS, Azure, GCP)
· Certificação em Databricks
· Certificação DP-203
· Conhecimento em práticas de CI/CD.
· Databricks Asset Bundles.
· Ter atuado em arquitetura de projetos de dados.