sênior em engenharia de big data

Sobre a vaga

Buscamos uma pessoa engenheira de Big Data sênior para projetar, construir e manter pipelines de dados escaláveis. Você atuará com tecnologias modernas de processamento e armazenamento, integrando fontes diversas e garantindo a qualidade dos dados.

Responsabilidades

• Projetar e implementar pipelines de dados usando Python, PySpark e Spark
• Trabalhar com plataformas cloud (AWS, Azure, GCP) e serviços como AWS Glue, Azure Data Factory e Google Cloud Dataflow
• Gerenciar armazenamento em bancos relacionais (PostgreSQL, MySQL) e NoSQL
• Utilizar ferramentas de orquestração como Apache Airflow e Kafka
• Colaborar com times de produto e análise para entender requisitos de dados
• Garantir performance, segurança e governança dos dados

Requisitos

• Experiência sólida com Python e PySpark
• Conhecimento em Apache Hadoop, Spark e Kafka
• Familiaridade com serviços de dados em cloud (AWS Glue, Azure Data Factory, Google Cloud Dataflow)
• Experiência com bancos relacionais e NoSQL
• Conhecimento em Docker e Kubernetes
• Inglês avançado para comunicação técnica

Diferenciais

• Experiência com Palantir Foundry
• Conhecimento em Power BI
• Familiaridade com Veeva CRM, Reltio ou SAP

Benefícios

• Salário compatível com o mercado
• Home office com suporte
• Participação em projetos internacionais
• Plano de carreira e desenvolvimento