Engenheiro (A) Dados Iii

Detalhes da Vaga

Ensino superior completo em Ciência da Computação, Sistemas de Informação, Análise e Desenvolvimento de Sistemas ou áreas correlatas; Mínimo de 3 anos de experiência atuando na engenharia de dados ou atividades afins. Conhecimento em plataformas de Cloud Computing (Azure, AWS e/ou GCP) Domínio de linguagem SQL, arquitetura de dados, modelo de dados relacionais e não-relacionais; Conhecimento de bancos de dados relacionais (Oracle e SQL Server) e NoSQL (MongoDB, Cosmos DB e Cassandra); Experiência com Big Data, Spark e ecossistema Hadoop Conhecimento de linguagens de programação (preferencialmente Python, Scala e/ou R). Conhecimento em Shell Scripts e Linux Inglês avançado; Conhecimento em diferentes arquiteturas tradicionais de armazenamento de dados, Data Lake e Data Warehouse. Conhecimento em ferramentas de ETL/ELT (Apache Airflow, NiFi, Data Factory, Glue, ODI, entre outras); Conhecimento de plataformas de Data Preparation (Alteryx, Microsoft Power Query, Talend, entre outras); Conhecimento em plataformas de Data Visualization (Power BI, MicroStrategy, Tableau, Qlik, entre outras); Construir pipelines de dados que possam suportar soluções de AA/AI, traduzindo as necessidades do negócio em ambiente Cloud e On Premises.; Preparar os dados como parte de um processo ETL/ELT Integrar diferentes fontes de dados, garantindo a segurança, governança e a alta disponibilidade; Garantir a curadoria dos dados e respeito à LGPD; Construir, otimizar e executar scripts de atualização de dados de forma performática; Garantir as melhores práticas de modelagem e persistência de dados; Conhecer o modelo/regras de negócio para garantir a governança da informação, bem como a definição da estratégia de construção dos pipelines de dados; Estruturar e manter o ambiente de Data Lake e promover a definição de padrões para a arquitetura Medallion; Arquitetar soluções de grande escala, trabalhando com Big Data e Data Streaming; Atualizar-se constantemente com relação às melhores práticas para garantir a segurança dos dados; Gerir o correto versionamento do código-fonte com Git.


Salário Nominal: A acordar

Fonte: Whatjobs_Ppc

Função de trabalho:

Requisitos

Líder De Manutenção

Responsável pelo planejamento de manutenções preventivas e corretivas.  Requisitos: Ensino Médio completo ou Técnico em Manutenção. Vivência com manutenção ...


Agro+ Gestão E Negócios - Mato Grosso do Sul

Publicado 17 days ago

Técnico De Elétrica E Automação De Utilidades

TÉCNICO DE ELÉTRICA E AUTOMAÇÃO DE UTILIDADES- - - - - - - - - - - - A Michelin, líder do segmento de pneus, se dedica ao desenvolvimento da mobilidade de s...


E Rzeszow - Mato Grosso do Sul

Publicado 17 days ago

Ajudante De Manutenção

Job descriptionFAÇA PARTE DA EMPRESA QUE TEM O MAIOR E MAIS INTEGRADO PORTFÓLIO LOGÍSTICO DO PAÍS!Olá, somos a JSL, uma empresa brasileira que tem como missã...


Jsl S.A. Brasil - Mato Grosso do Sul

Publicado 17 days ago

Engenheiro De Minas Pleno (Corumbá/Ms)

A Lhg Mining nasce em 2022, com a aquisição da MCR (Mineração Corumbaense Reunida) pelo maior grupo empresarial do Brasil, a J&F. Chega ao mercado com muscul...


Lhg Mining - Mato Grosso do Sul

Publicado 17 days ago

Built at: 2025-01-01T17:30:34.041Z