PerfilEngenheiro de Dados Pleno/Sênior
Objetivo· Atuar em projetos de Gestão de Dados e Inteligência de Negócios, construindo e implementando arquitetura, além de apoiar na modelagem de dados, transformações e entregas.
· Agregar valor aos contratos de uma empresa de prestação de serviços de TI através da consolidação e modelagem de dados, criação deData WarehousesModernos, formatação de informações e inteligência de negócios.
· Atuar em uma linha de serviços de consultoria baseado em plataforma de serviços em nuvem para extração, transformação e armazenamento de dados em uma estrutura deBig Data.Responsabilidades· Participação ativa em projetos de serviços de dados modernos (Big Data)
· Construção e manutenção de Arquiteturas de Dados ( LakeHouse, DataLake, DW, Mesh ).
· Criação de estruturas necessárias para consolidação e modelagem de dados
· Desenvolvimento de notebooks para transformação de dados.
· Estudo e avaliação de plataformas e serviços de dados em Nuvem para atender a demandas de negócios.
· Aplicação de práticas de segurança e governança de dados
· Desenvolvimento de soluções de dados em plataforma Microsoft / AWS / GCP
· Levantamento de requisitos, reuniões com áreas solicitantes e documentação de aplicações.Requisitos necessários· Pelo menos3 anos de experiência.
· Sólido conhecimento emDatabricks.
· Sólido conhecimento emlinguagem SQL
· Sólida familiaridade com linguagemPython.
· Sólido conhecimento e experiência emSpark/PySpark.
· Conhecimento e experiência com serviços emnuvem Azure.
· Conhecimentos emData WarehouseeModern Data Warehouse(Big Data)
· Conhecimento emBancos de Dados SQLServer e Oracle
· Conhecimentos sobre Bancos de Dadosno-SQL
· Conhecimento sobre ferramentas de extrações de dados, assim como práticas de otimização e performance.
· Conhecimento sobre modelagem dimensional, relacional e tabular.
· Conhecimento fundamentado em programação orientada a dados.
· Experiência em servir conjuntos de dados para analistas de negócios e de dados.
· Inglês intermediário / instrumentalDiferencial· Experiência em normalização, otimização e modelagem de dados
· Experiência com processos e práticas de governança de dados.
· Certificações em Cloud (AWS, Azure, GCP)
· Certificação em Databricks
· Certificação DP-203
· Conhecimento em práticas de CI/CD.
· Databricks Asset Bundles.
· Ter atuado em arquitetura de projetos de dados.