Especialista de Dados Sênior
Efetuar ingestão, transformação e disponibilização de dados num ecossistema Big Data. Realizar tratamento de dados, analisar e avaliar a qualidade, e otimizar processos quando necessário.
Responsabilidades
- Implementar e alterar pipelines de dados.
- Criar modelagem de dados.
- Extrair, transformar e carregar (ETL) dados de diferentes origens e formatos.
Requisitos Obrigatórios
- Implementar soluções batch e stream de grande volume de dados.
- Experiência com Pyspark, Python e SQL.
- Experiência em Big Data formats; atuar em plataforma cloud Azure.
- Experiência em Databricks, Storage Account, CosmosDB (MongoDB), Data Factory, Azure DevOps.
- Capacidade de levantamento e análise de requisitos de negócio e técnicos.
- Experiência na ingestão, manipulação e tratamento de dados estruturados e semi-estruturados.
Requisito...