Engenharia De Dados Sênior

Detalhes da Vaga

Aqui na ília nossas vagas estão sempre abertas para todas as pessoas e não se restringem quanto a gênero, etnia, orientação sexual, fatores sociais, condições físicas ou intelectuais (PCD) etc. Incentivamos a candidatura de integrantes de todos os grupos minoritários Sobre a ília Somos especialistas em tecnologia, dados e design, impulsionando a transformação digital de grandes players do mercado há mais de 10 anos, nos setores financeiro, seguros e mobilidade. Com mais de 450 profissionais, estamos presentes no Brasil e Europa, atendendo aos mercados da América Latina, Europa e América do Norte, desenvolvendo produtos digitais de alta qualidade e com foco em resultados de negócios. Somos uma equipe inovadora, criativa e apaixonada por tecnologia. Certificada pelo 5° ano consecutivo como Great Place to work aqui na ília acreditamos que pessoas mudam o mundo, e investimos nelas. Nossas awesome deliveries são feitas de pessoas para pessoas, afinal awesome people make awesome deliveries Vempraília Sobre a vaga: Estamos em busca de um Engenheiro de Dados experiente para liderar a evolução do nosso Data Lake (Arquitetura Medallion), otimizar pipelines ETL e viabilizar insights baseados em dados por meio do desenvolvimento de dashboards. O foco principal do cargo está na gestão de serviços de dados baseados em AWS , como Glue, S3 e Athena, aplicando práticas recomendadas, como otimização de arquivos Parquet . É essencial ter uma base sólida em engenharia de dados, e conhecimentos adicionais em IA generativa e engenharia de prompts são um diferencial valioso. Principais responsabilidades: Responsabilidades Centrais: Liderar a evolução do Data Lake , implementando e otimizando a Arquitetura Medallion (camadas bronze, prata e ouro). Projetar, desenvolver e manter pipelines ETL escaláveis utilizando o AWS Glue e outros serviços nativos da AWS. Utilizar o AWS S3 para armazenamento de dados e o Athena para consulta de datasets, garantindo eficiência de desempenho. Otimizar fluxos de trabalho com foco em arquivos Parquet para eficiência no processamento e armazenamento. Desenvolver e manter dashboards usando ferramentas como AWS Quicksight e Google Looker Studio para gerar insights acionáveis. Colaborar com equipes multidisciplinares para alinhar a infraestrutura de dados e entregáveis às necessidades do negócio. Garantir governança robusta, segurança e conformidade de dados em todas as operações. Responsabilidades Adicionais (IA Generativa): Explorar oportunidades para integrar soluções de IA generativa , especialmente utilizando o AWS Bedrock , para aprimorar fluxos de trabalho de dados e análises. Aplicar técnicas de engenharia de prompts para personalizar soluções baseadas em IA para casos de uso específicos. Pesquisar e contribuir para potenciais integrações com as plataformas de IA da GCP e Azure como parte de estratégias futuras. Requisitos: Experiência comprovada como Engenheiro de Dados, com especialização em arquiteturas de Data Lake e Arquitetura Medallion . Sólida experiência prática com serviços AWS , incluindo Glue, S3 e Athena. Proficiência no manuseio de arquivos Parquet e na otimização de seu uso para armazenamento e consultas. Conhecimento avançado em processos ETL, ferramentas de integração de dados e orquestração de pipelines (ex.: Apache Airflow ). Domínio em SQL e Python para processamento e automação de dados. Experiência com ferramentas de BI, como Power BI , Tableau ou similares, para desenvolvimento de dashboards. Diferenciais: Experiência prática com ferramentas de IA Generativa da AWS, especialmente o Amazon Bedrock . Familiaridade com soluções de IA generativa na GCP (Vertex AI, PaLM) e na Azure (Azure OpenAI Service). Compreensão de técnicas de engenharia de prompts e suas aplicações. Desejável: Certificações em AWS (ex.: AWS Certified Data Analytics, AWS Certified Solutions Architect). Conhecimento em CI/CD para pipelines de dados e Infraestrutura como Código (ex.: Terraform, CloudFormation). Fortes habilidades de resolução de problemas e capacidade de atuar em um ambiente rápido e inovador. Benefícios e Incentivos: Nossa contratação é CLT- 40h semanais com jornada flexível, sendo executada 100% de forma remota. Os benefícios da ília são pensados para proporcionar uma experiência AWESOME para cada ílian, abaixo você encontra os benefícios de forma resumida. Para Saúde e bem-estar: Plano de Saúde e Odontológico SulAmérica extensivo a dependentes; Vale Alimentação/Refeição em cartão fléxivel Picpay benefícios Seguro de Vida; Auxílio Home-Office em cartão fléxivel Picpay benefícios; Wellhub (Gympass); TotalPass. Para o seu Desenvolvimento: ília University: Universidade Corporativa com mais de 20 mil cursos disponíveis para desenvolvimento pessoal e profissional; Language Academy: Escola de idiomas para ílians; í-talks e Chapter: Momentos e cerimônias em que o time compartilha práticas, estudos, projetos e ideias. Nas chapters ainda se reúnem pessoas com skills similares para compartilhamento de ideias, práticas e experiências; Gostamos de ir além no cuidado com as nossas pessoas, então dispomos também de alguns benefícios não convencionais: Plano de Saúde PET - Guapeco; Seu Niver, seu bolo Seu Networking Vale Prêmio - Programa de premiação a indicação de novos funcionários.


Salário Nominal: A acordar

Fonte: Adzuna_Ppc

Função de trabalho:

Requisitos

Scada And Historian Systems Engineer

SCADA and Historian Systems Engineer Location: Remote in Brazil (30% Travel Required) Duration: Contract/Full-time Salary plus Benefits What You Will Do: The...


Georgiatek Systems Inc. - Brasil

Publicado 5 days ago

Engenheiro De Dados Pleno

Aqui na ília nossas vagas estão sempre abertas para todas as pessoas e não se restringem quanto a gênero, etnia, orientação sexual, fatores sociais, condiçõe...


Ília - Brasil

Publicado 5 days ago

Engenheiro De Verificação

Enginheiro de verificação - Semiconductor - Cambridge, Inglaterra (Visa e relocação facilitados) Estamos recrutando Enginheiros de verificação no Brazil que ...


European Tech Recruit - Brasil

Publicado 5 days ago

Engenheiro De Dados Lamp Pl/Sr - (Inglês Fluente)

Oportunidade para Engenheiro de Dados LAMP PL/SR - (Inglês Fluente) Homeoffice Ei, você já pensou em fazer parte de um time que só vem crescendo? Somos a mai...


Stefanini Group - Brasil

Publicado 5 days ago

Built at: 2024-12-02T20:44:49.581Z