engenharia de dados pleno - híbrido/sp

Sobre a vaga

Buscamos uma pessoa Engenheira de Dados Pleno para atuar em projetos de dados, apoiando a construção e manutenção de pipelines e soluções de dados em ambiente Azure. O trabalho é híbrido, com atuação em São Paulo (Barueri ou São Paulo).

Responsabilidades

• Desenvolver e manter pipelines de dados com Python, PySpark e Apache Spark.
• Modelar dados e garantir a qualidade das informações.
• Trabalhar com Azure Data Factory, Databricks e Data Lake.
• Orquestrar fluxos com Airflow.
• Colaborar com o time para garantir a entrega de soluções escaláveis.

Requisitos

• Experiência com Python, PySpark e Apache Spark.
• Conhecimento em SQL e bancos de dados (SQL Server, Oracle).
• Experiência com Azure Data Factory, Databricks e Data Lake.
• Familiaridade com Airflow para orquestração.
• Conhecimento em Git Flow, testes (unittest, pytest) e REST APIs.
• Vivência com Kafka (desejável).

Diferenciais

• Experiência com Kafka.
• Conhecimento em outras ferramentas de dados.

Benefícios

• Modelo de trabalho híbrido.
• Oportunidade de atuar em projetos desafiadores.
• Ambiente colaborativo.