Engenheiro De Software Sênior Full Stack - Dados

Detalhes da Vaga

Responsabilidades: Desenvolver, monitorar e otimizar pipelines de dados, garantindo a integridade, confiabilidade e qualidade dos dados. Colaborar com as equipes de análise de dados e ciência de dados para definir e atender às necessidades de coleta e transformação de dados. Implementar e gerenciar estruturas de armazenamento e transformação de dados (ETL), aplicando melhores práticas em arquitetura de dados. Realizar manutenção e monitoramento de data lakes e data warehouses em ambiente multi-cloud (AWS e Oracle). Garantir que os dados estejam prontos e acessíveis para consultas em tempo real e relatórios analíticos. Atuar no aprimoramento contínuo dos processos de ingestão e transformação, utilizando ferramentas de Big Data como Spark, Airflow e Kafka. Implementar soluções de segurança e compliance de dados (GDPR, LGPD), assegurando a conformidade de armazenamento e compartilhamento de dados. Definir padrões de qualidade de dados e participar de auditorias de integridade e controle de versões dos dados. Requisitos: Conhecimento avançado em manipulação e modelagem de dados, usando Python e frameworks de dados (pandas, Spark). Experiência com bancos de dados relacionais e NoSQL e tecnologias como Redshift, BigQuery, MongoDB. Experiência prática em DevOps, com automação e deploy de pipelines de dados e configuração de monitoramento. Habilidades em comunicação para atuar com stakeholders e transformar requisitos de dados em soluções técnicas viáveis. Diferenciais: Experiência em arquitetura de soluções de dados, como data lakes e data mesh. Certificações em nuvem voltadas para big data (AWS Certified Big Data, Google Professional Data Engineer).


Fonte: Adzuna_Ppc

Função de trabalho:

Requisitos

Analista De Serviços Cloud

Atividades a serem desenvolvidas: dar sequência a solução; Contribuir tanto para o cumprimento dos indicadores individuais (produtividade, pesquisa de satis...


São Paulo

Publicado 6 days ago

Analista De Infraestrutura Its Sênior

Conhecimentos profundos de Office 365 a nível de admin (Teams, Sharepoint, Onedrive, Exchange) - Gerenciamento de Tenant e Office 365 - Conhecimentos em outr...


Desde Topmind - São Paulo

Publicado 6 days ago

Technical Program Manager - Data Engineering (Vaga

Technical Program Manager - Data Engineering (Vaga afirmativa para mulheres) - Full-time - Employee Status: Regular - Role Type: Hybrid - Department: Informa...


Desde Serasa - São Paulo

Publicado 6 days ago

Auxiliar Serviços Gerais - Jundiai

Ter experiência com limpeza, auxiliar de serviços gerais ou doméstica. Escala de trabalho: Meio período. Trabalha de Segunda á Sábado. Tipo de vaga: Efeti...


Desde Projjete Consultoria - São Paulo

Publicado 6 days ago

Built at: 2024-11-05T16:24:24.759Z