Engenheiro de Dados Sênior - Remoto Tempo de projeto: Indeterminado RemotoExperiência com shell script ( sh/ksh/bash )Experiência em Linguagem de programação : python 3.x e scala 2.X.Paradigma de Linguagem de Programação: Funcional, Procedural e OO.Ferramentas de build: sbt/mavenIDEs : Intellij/Vs-CodeFerramentas de gestão de configuração : gitlab e git.Conhecimentos de CI/CDConhecimentos de Linux ( Sistema operacional, comandos básicos, gerenciamento de processos, gerenciamento de arquivos )Conhecimento em Banco de Dados Relacional : OracleConhecimento e Experiência em Banco de Dados Não Relacional: Mongodb/ElasticSearchConhecimento e Experiência em Banco de Dados colunar: HBASE.Integração de Sistemas : conhecimento e experiência com APIs REST, APIs Soap.Dominar os conceitos de Big-Data (Hadoop, MapReduce, Ingestão de dados, Processamento de dados e Armazenamento de dados ).Desejável conhecimentos de conteiner (docker/docker-compose), orquestração de conteiner (K8S, docker-swarm) e Kubernetes. Conhecimentos, experiências e domínio em ecossistema Hadoop:Hive/HUE/Impala/Hbase/Hdfs/Sqoop/BeelineConsultas, Armazenamento, Spark2/Spark3SQL e Streaming, Dataframe Dados estruturados e semiestruturados em forma tabularOperações : Transformações e Ações.Formato de ArquivosParquet, ORC, JSON, CSV, Plain Text YARN/ZookeeperGerencimento de Processos Kerberos AutenticaçãoDesejável conhecimentos em Control-M e Cloudera Manager.Desejável conhecimentos em Telecomunicações ( Operadora Móvel/Fixa )Caso seja do seu interesse, envie o seu CV para ****** ou indique um amigo no portal acesse https://lnkd.in/d_yKpA9M Siga nossas redes sociais:- LinkedIn: https://lnkd.in/d4MV-Krp- Instagram: https://lnkd.in/dNxstx5b- Site: https://runtalent.it/ #VemSerRunner!