Especialista Em Engenharia De Dados

Detalhes da Vaga

Superior completo em Tecnologia da Informação. Desejável Pós graduação em áreas de Dados, Analytics ou afins;Sólidos conhecimentos em desenvolvimento de fluxos de ingestão e transformação de dados em ambientes DW/Lake/LakeHouse;Versionamento de código e Infraestrutura como código (Git, CI/CD e Terraform);Experiência com Linguagens e ferramentas de programação (ex., SQL, Python, Pyspark, entre outras);Vivência em ambientes de Big Data em Nuvem (ex.: EMR, Databricks, Glue e Athena) e provedores (ex.: AWS, GCP e Azure);Conhecimento da metodologia ágil e sua aplicação;Inglês avançadoResponsabilidades e atribuiçõesTem lugar para você nesse propósito:Técnicas de modelagem de dados:Realizar o RCA (Root-Cause Analysis) a fim de recomendar soluções para análises e problemas e colaborar com os cientistas de dados na seleção e teste de modelos analíticos;Desenvolvimento de fluxos de ingestão e transformação de dados em ambientes DW/Lake/LakeHouseCriar e evoluir pipelines de alta complexidade a fim de garantir a qualidade, privacidade e conformidade com regulamentações dos dados armazenados.Ambientes de Big Data em Nuvem, arquitetura medallion, Lake House e Data MeshArquitetar soluções end to end em fornecedores cloud a fim de assegurar que os processos estejam alinhados.Linguagens de programação Python e PySpark: Orientar no uso dos frameworks a fim de assegurar que sejam utilizados de acordo com a usabilidade da aplicação.Processo de extração, transformação e carregamento de dados (ETL) batch e StreamingOrientar na evolução e adaptação das práticas relacionadas a ETL do squad;Versionamento de código e Infraestrutura como código (Git, CI/CD e Terraform);Monitorar e solucionar problemas de CI/CD a fim de assegurar que não afetem os processos e prazos.Bancos Relacionais, NoSQL/NewSQL, Linguagem SQL e formatos de armazenamento BigData (Delta Lake e Parquet)Analisar, propor e modelar soluções de banco de dados inerentes às formas de manipulação dos dados NoSQL;Desenhar e implementar modelos de dados em diferentes métodos (NoSQL/NewSQL).Metodologia ágil e sua aplicaçãoOrientar e otimizar o desenvolvimento do time em relação a agilidade a fim de identificar e evitar riscos e atrasos nas entregas


Salário Nominal: A acordar

Fonte: Whatjobs_Ppc

Função de trabalho:

Requisitos

Desenhista Projetista (Obras Rodoviárias)

Estamos com uma oportunidade de Desenhista Projetista , para atuar em uma de nossas obras na região de Guarulhos/SP . Reportando-se a Gerência de Engenharia ...


Oec - São Paulo

Publicado 5 days ago

Estagiário(A) Na Engenharia De Processos:

Sobre o time: Venha fazer parte do nosso time e começar a sua carreira em uma empresa que é líder mundial em desenvolvimento de componentes para veículos. O ...


Zf Group - São Paulo

Publicado 5 days ago

Supervisor De Manutenção - Utilidades

A Saint-Gobain Sekurit atua na fabricação e fornecimento de vidros automotivos para o mercado OEM (montadoras), com soluções inovadoras que oferecem conforto...


Saint Gobain Sekurit - São Paulo

Publicado 5 days ago

Engenheiro De Instalações

Estamos em busca de um Engenheiro de Instalações experiente para se juntar à nossa equipe. Este profissional será responsável por supervisionar e coordenar p...


Sempre Engenharia - São Paulo

Publicado 5 days ago

Built at: 2024-11-18T15:41:51.868Z