Job Description
A Solutis está em busca de uma pessoa para atuar como Engenheiro(a) de Dados Sênior | Databricks ! Se você tem experiência com processamento de grandes volumes de dados, construção de pipelines escaláveis e atuação em ambientes distribuídos, essa oportunidade pode ser para você.
Principais responsabilidades
- Desenvolver pipelines de dados utilizando Databricks (Notebooks, Jobs e Workflows)
- Construir conectores para ingestão de dados de múltiplas fontes
- Implementar cargas históricas e sincronização incremental (CDC)
- Atuar com streaming e mensageria em ambientes de alta volumetria
- Garantir qualidade, reconciliação e confiabilidade dos dados
- Desenvolver integrações via API REST
Requisitos
- Experiência sólida com PySpark
- Vivência prática com Databricks (DLT, Workflows e Jobs)
- SQL avançado
- Conhecimento em CDC (Debezium, GoldenGate ou similares) <...