Engenheiro De Dados (Pleno)

Descrição:Graduação plena ou tecnológica em Ciência da Computação, Informática ou áreas correlatas;Experiência com ferramentas para processamento de Big Data e ferramentas de orquestração;Experiência com jobs Spark e Elasticsearch;Conhecimento de data lakes, implementados em MinIO e HDFS;Experiência nas linguagens de programação Python e Shell Script;Experiência com Linux;Experiência com versionamento Git;Inglês intermediário: leitura e interpretação.Responsabilidades:Automação de pipelines de dados em ambiente On-Premises para Big Data;Apoiar o desenvolvimento de pipelines de dados em linguagem adequada;Auxiliar na elaboração e desenvolvimento de soluções relacionadas à produção de dados (ETL);Criar metadados guiados por máquinas (data-driven technologies);Participar das atividades de inspeção, validação, descrição, dicionarização, historicidade, qualidade, mapeamento, avaliação de arquitetura e relatoria dos dados e datasets produzidos para a pesquisa;Apoiar na produção de conhecimento dos dados através da produção de metadados;Apoiar a gestão dos dados do ambiente de produção;Sugerir e implementar novas tecnologias nas atividades de curadoria de dados;Participar de reuniões e sessões técnicos-científicas;Elaborar e apresentar relatórios técnicos periódicos.
#J-18808-Ljbffr