Engenheiro De Dados Senior

Responsabilidades
Desenvolver e otimizar pipelines de dados;Modelar e organizar grandes volumes de dados;Implementar boas práticas de governança de dados;Desempenhar papel de liderança técnica;Realizar análises de desempenho e otimizações;Colaborar com equipes interdisciplinares;Automatizar processos de ETL (Extract, Transform, Load);Acompanhar novas tecnologias e tendências de big data.Requisitos Técnicos: Experiência com Apache Spark, SQL, Python, conhecimento de AWS e preferencialmente no setor financeiro.
Habilidades Comportamentais: Capacidade de aprendizado contínuo, organização, pensamento crítico.
Experiência Desejável: Experiência em empresas do mercado financeiro ou de crédito.
Principais Tecnologias:
ETL e Processamento: AWS Glue, Amazon EMR com Spark, Apache Kafka.Armazenamento e Consultas de Dados: Amazon S3, Amazon Redshift.Transformação de Dados: Apache Spark, PySpark, SQL.Catalogação e Governança: AWS Glue Data Catalog, AWS Lake Formation.
#J-18808-Ljbffr