sênior em engenharia de dados

Sobre a vaga

Buscamos um Engenheiro de Dados Sênior para atuar remotamente (Colômbia), focado em projetar e manter pipelines de dados de alto desempenho na AWS.

Responsabilidades

• Desenvolver pipelines de dados com PySpark e AWS Glue.
• Gerenciar dados no Amazon S3 e Apache Hudi.
• Otimizar consultas com Amazon Athena.
• Orquestrar workflows usando AWS Step Functions e EventBridge.
• Manter bancos de dados PostgreSQL e Aurora PostgreSQL.
• Implementar infraestrutura como código com Terraform e CloudFormation.
• Configurar CI/CD com GitHub Actions.

Requisitos

• Experiência sênior em engenharia de dados.
• Domínio de PySpark, AWS Glue e Amazon EMR.
• Conhecimento de AWS Lambda, API Gateway e SQS.
• Familiaridade com testes (pytest, ruff, mypy).
• Inglês avançado (desejável).

Diferenciais

• Experiência com machine learning (scikit-learn, XGBoost).
• Monitoramento com CloudWatch e Grafana.
• Uso de Poetry para dependências.

Benefícios

• Totalmente remoto.
• Salário competitivo (a combinar).
• Ambiente colaborativo e inovador.