Especialista Em Engenharia De Dados

Detalhes da Vaga

Descrição:Superior completo em Tecnologia da Informação. Desejável Pós graduação em áreas de Dados, Analytics ou afins;Sólidos conhecimentos em desenvolvimento de fluxos de ingestão e transformação de dados em ambientes DW/Lake/LakeHouse;Versionamento de código e Infraestrutura como código (Git, CI/CD e Terraform);Experiência com Linguagens e ferramentas de programação (ex., SQL, Python, Pyspark, entre outras);Vivência em ambientes de Big Data em Nuvem (ex.: EMR, Databricks, Glue e Athena) e provedores (ex.: AWS, GCP e Azure);Conhecimento da metodologia ágil e sua aplicação;Inglês avançadoResponsabilidades e atribuições:Tem lugar para você nesse propósito:Técnicas de modelagem de dados:Realizar o RCA (Root-Cause Analysis) a fim de recomendar soluções para análises e problemas e colaborar com os cientistas de dados na seleção e teste de modelos analíticos;Desenvolvimento de fluxos de ingestão e transformação de dados em ambientes DW/Lake/LakeHouse;Criar e evoluir pipelines de alta complexidade a fim de garantir a qualidade, privacidade e conformidade com regulamentações dos dados armazenados.Ambientes de Big Data em Nuvem, arquitetura medallion, Lake House e Data Mesh:Arquitetar soluções end to end em fornecedores cloud a fim de assegurar que os processos estejam alinhados.Linguagens de programação Python e PySpark: Orientar no uso dos frameworks a fim de assegurar que sejam utilizados de acordo com a usabilidade da aplicação.Processo de extração, transformação e carregamento de dados (ETL) batch e Streaming:Orientar na evolução e adaptação das práticas relacionadas a ETL do squad;Versionamento de código e Infraestrutura como código (Git, CI/CD e Terraform);Monitorar e solucionar problemas de CI/CD a fim de assegurar que não afetem os processos e prazos.Bancos Relacionais, NoSQL/NewSQL, Linguagem SQL e formatos de armazenamento BigData (Delta Lake e Parquet):Analisar, propor e modelar soluções de banco de dados inerentes às formas de manipulação dos dados NoSQL;Desenhar e implementar modelos de dados em diferentes métodos (NoSQL/NewSQL).Metodologia ágil e sua aplicação:Orientar e otimizar o desenvolvimento do time em relação a agilidade a fim de identificar e evitar riscos e atrasos nas entregas.
#J-18808-Ljbffr


Fonte: Whatjobs_Ppc

Função de trabalho:

Requisitos

Engenheiro Civil

Empresa de Serviços de Engenharia admite Engenheiro Civil em São Paulo. Irá atuar com elaboração de projetos de drenagem. Elaboração de memorial de cálculo....


Desde Empresa De Serviços De Engenharia - São Paulo

Publicado 15 days ago

Especialista Em Remuneração

Fabricante de produtos químicos admite Especialista em Remuneração em Sorocaba. Acompanhar a realização de pesquisas de remuneração junto ao mercado. Assegu...


Desde Fabricante De Produtos Químicos - São Paulo

Publicado 15 days ago

Técnico De Segurança Do Trabalho

Empresa de Tecnologia da Informação admite Técnico de Segurança do Trabalho em São Paulo. Executar e conferir as atividades de Saúde e Segurança do Trabalho...


Desde Empresa De Tecnologia Da Informação - São Paulo

Publicado 15 days ago

Técnico De Segurança Do Trabalho

Construtora admite Técnico de Segurança do Trabalho em Itu. Identificar riscos ambientais no local de trabalho. Atuação com ações preventivas. Orientar os t...


Desde Construtora - São Paulo

Publicado 15 days ago

Built at: 2024-11-05T08:25:22.734Z