Engenheiro De Dados

Acesse este link para maiores informações: https://www.datalakers.com.br/engenheiro-de-dados

Estamos procurando um Engenheiro de Dados para se juntar à nossa equipe. Como Engenheiro de Dados, você será responsável por projetar, desenvolver e gerenciar soluções de engenharia de dados escaláveis e eficientes. Trabalhará em estreita colaboração com arquiteto de dados, analistas e outras partes interessadas para fornecer dados confiáveis, estruturados e prontos para análise. Efetuará a análise e documentação detalhada da infraestrutura existente, desenvolvendo estratégias para gerenciamento de dados, automação de processos e otimização de desempenho. Fornecerá suporte contínuo através de monitoramento de desempenho e atualizações regulares, além de orientar sobre governança de dados e elaborar documentação abrangente para assegurar a continuidade operacional.

Requisitos que buscamos:Experiência em desenvolvimento de pipelines de ELT/ETL.Experiência em PySpark.Experiência em arquitetura de dados em nuvem, em especial em Google Cloud Platform (GCP) ou Microsoft AzureConhecimento em Apache SparkVontade de aprender e sede por conhecimento;Pró-atividade, atitude positiva e capacidade de trabalhar em equipe;Experiência em ambiente de Big Data (Cloudera, Hadoop, Spark, Kafka, Airflow, Nifi, Minio)Conhecimento em desenvolvimento de pipelines de ELT/ETL.Conhecimento em ferramentas de monitoramento (Zabbix, Grafana).Conhecimento de ferramentas de containerização (Docker, kubernetes e Openshift).Experiência em linguagem de programação Python.Familiaridade com práticas de processamento em Batch e Streaming;Superior completo em Ciência da Computação, Sistemas de Informação, TI e áreas afins.

DiferencialCertificação em tecnologia como Google Cloud , Azure ou Cloudera.