Perfil Engenheiro de Dados Pleno/Sênior
Objetivo · Atuar em projetos de Gestão de Dados e Inteligência de Negócios, construindo e implementando arquitetura, além de apoiar na modelagem de dados, transformações e entregas.
· Agregar valor aos contratos de uma empresa de prestação de serviços de TI através da consolidação e modelagem de dados, criação de Data Warehouses Modernos, formatação de informações e inteligência de negócios.
· Atuar em uma linha de serviços de consultoria baseado em plataforma de serviços em nuvem para extração, transformação e armazenamento de dados em uma estrutura de Big Data .
Responsabilidades · Participação ativa em projetos de serviços de dados modernos ( Big Data )
· Construção e manutenção de Arquiteturas de Dados ( LakeHouse, DataLake, DW, Mesh ).
· Criação de estruturas necessárias para consolidação e modelagem de dados
· Desenvolvimento de notebooks para transformação de dados.
· Estudo e avaliação de plataformas e serviços de dados em Nuvem para atender a demandas de negócios.
· Aplicação de práticas de segurança e governança de dados
· Desenvolvimento de soluções de dados em plataforma Microsoft / AWS / GCP
· Levantamento de requisitos, reuniões com áreas solicitantes e documentação de aplicações.
Requisitos necessários · Pelo menos 3 anos de experiência .
· Sólido conhecimento em Databricks . · Sólido conhecimento em linguagem SQL · Sólida familiaridade com linguagem Python .
· Sólido conhecimento e experiência em Spark/PySpark . · Conhecimento e experiência com serviços em nuvem Azure .
· Conhecimentos em Data Warehouse e Modern Data Warehouse ( Big Data )
· Conhecimento em Bancos de Dados SQL Server e Oracle
· Conhecimentos sobre Bancos de Dados no-SQL · Conhecimento sobre ferramentas de extrações de dados, assim como práticas de otimização e performance.
· Conhecimento sobre modelagem dimensional, relacional e tabular.
· Conhecimento fundamentado em programação orientada a dados.
· Experiência em servir conjuntos de dados para analistas de negócios e de dados.
· Inglês intermediário / instrumental
Diferencial · Experiência em normalização, otimização e modelagem de dados
· Experiência com processos e práticas de governança de dados.
· Certificações em Cloud (AWS, Azure, GCP)
· Certificação em Databricks
· Certificação DP-203
· Conhecimento em práticas de CI/CD.
· Databricks Asset Bundles.
· Ter atuado em arquitetura de projetos de dados.