← voltar para vagas
arquiteto de dados sênior - databricks
Sobre a vaga
Estamos procurando um Arquiteto de Dados Sênior com expertise em Databricks para desenhar e implementar soluções de dados escaláveis. Você será responsável por arquitetar pipelines robustos, otimizar performance e garantir a confiabilidade de sistemas de dados em larga escala.
Responsabilidades
- Desenhar arquiteturas de dados escaláveis usando Databricks e Apache Spark
- Otimizar performance de pipelines de dados e consultas
- Implementar e gerenciar Data Lakes com Delta Lake
- Colaborar com times de engenharia e analytics para definir padrões de dados
- Revisar e validar soluções de dados para garantir qualidade e escalabilidade
- Documentar arquiteturas e boas práticas
Requisitos
- 5+ anos de experiência em arquitetura ou engenharia de dados
- Expertise sólida em Databricks e Apache Spark
- Conhecimento profundo de Delta Lake e otimização de data lakes
- Experiência com cloud (AWS, Azure ou GCP)
- Sólida compreensão de engenharia de dados, ETL/ELT e pipelines de dados
- Excelente comunicação e capacidade de trabalhar em equipes multidisciplinares
Diferenciais
- Certificação Databricks
- Experiência com Python ou Scala
- Conhecimento de orquestração de workflows (Airflow, etc.)
- Background em otimização de custos em cloud