Cientista De Dados

ATIVIDADES: Criação de modelos preditivos e prescritivos utilizando o Azure ML e notebooks em Synapse em arquitetura Medallion (Bronze, Silver e Gold ou ainda Landing, Raw, Trusted e Refined), modelagem de dados, dimensionamento de clusters (Synapse), documentação do processo de modelagem, testes e retreinamentos do modelo, identificação de pontos de melhoria e otimização dos etl's.
Processamento de arquivos estruturados, semi-estruturados e não estruturados, em batch, que serão utilizados em um cenário de manutenção preditiva/prescritiva.
COMPETENCIAS: Transformação de dados, Azure Synape, ADLS Gen2 (Azure Data Lake), PySpark, Azure Keyvault, Dimensionamento de Clusters, Azure Synapse Serverless Pools, External Tables, SQL (Views, Jobs, CTE's, Procedures), Azure DevOps, esteiras CI/CD, Experiência com utilização criação e manutenção de datalakehouses (parquet + delta).
Desejável conhecimento ligado a IoT, Azure ML, MLFlow, bem como conhecimento em processamento de imagens.
Conhecimento em streaming de dados (Ex: Apache Kafka, Rabbit MQ, Apache Flink) seria um ótimo diferencial (provável arquitetura no médio prazo).
Certificações como DP-100 (Azure Data Scientist Associate) ou AI-102 (Azure AI Engineer Associate)