Perfil Engenheiro de Dados Pleno/Sênior Objetivo · Atuar em projetos de Gestão de Dados e Inteligência de Negócios, construindo e implementando arquitetura, além de apoiar na modelagem de dados, transformações e entregas.
· Agregar valor aos contratos de uma empresa de prestação de serviços de TI através da consolidação e modelagem de dados, criação de Data Warehouses Modernos, formatação de informações e inteligência de negócios.
· Atuar em uma linha de serviços de consultoria baseado em plataforma de serviços em nuvem para extração, transformação e armazenamento de dados em uma estrutura de Big Data .
Responsabilidades · Participação ativa em projetos de serviços de dados modernos ( Big Data ) · Construção e manutenção de Arquiteturas de Dados ( LakeHouse, DataLake, DW, Mesh ).
· Criação de estruturas necessárias para consolidação e modelagem de dados · Desenvolvimento de notebooks para transformação de dados.
· Estudo e avaliação de plataformas e serviços de dados em Nuvem para atender a demandas de negócios.
· Aplicação de práticas de segurança e governança de dados · Desenvolvimento de soluções de dados em plataforma Microsoft / AWS / GCP · Levantamento de requisitos, reuniões com áreas solicitantes e documentação de aplicações.
Requisitos necessários · Pelo menos 3 anos de experiência .
· Sólido conhecimento em Databricks .
· Sólido conhecimento em linguagem SQL · Sólida familiaridade com linguagem Python .
· Sólido conhecimento e experiência em Spark/PySpark .
· Conhecimento e experiência com serviços em nuvem Azure .
· Conhecimentos em Data Warehouse e Modern Data Warehouse ( Big Data ) · Conhecimento em Bancos de Dados SQL Server e Oracle · Conhecimentos sobre Bancos de Dados no-SQL · Conhecimento sobre ferramentas de extrações de dados, assim como práticas de otimização e performance.
· Conhecimento sobre modelagem dimensional, relacional e tabular.
· Conhecimento fundamentado em programação orientada a dados.
· Experiência em servir conjuntos de dados para analistas de negócios e de dados.
· Inglês intermediário / instrumental Diferencial · Experiência em normalização, otimização e modelagem de dados · Experiência com processos e práticas de governança de dados.
· Certificações em Cloud (AWS, Azure, GCP) · Certificação em Databricks · Certificação DP-203 · Conhecimento em práticas de CI/CD.
· Databricks Asset Bundles.
· Ter atuado em arquitetura de projetos de dados.