sênior em engenharia de dados - aws e rag

Sobre a vaga

A Jalasoft busca uma pessoa sênior em Engenharia de Dados para atuar remotamente com pipelines de dados em AWS e soluções de RAG.

O trabalho envolve data lakes, catálogo de dados, consulta analítica, busca e observabilidade, usando serviços e ferramentas do ecossistema AWS.

Responsabilidades

• Construir e manter pipelines de dados escaláveis na AWS.
• Trabalhar com data lake, catálogo e governança usando Amazon S3, AWS Glue Data Catalog e Lake Formation.
• Apoiar consultas e processamento analítico com Amazon Athena, Redshift Spectrum, Parquet e Iceberg.
• Desenvolver ou integrar pipelines de RAG com Amazon Bedrock e mecanismos de busca como OpenSearch ou Elasticsearch.
• Atuar em integrações e replicação de dados com ferramentas como Debezium e AWS DMS.
• Monitorar aplicações e pipelines com Datadog e OpenTelemetry.

Requisitos

• Experiência sênior em Engenharia de Dados.
• Experiência prática com AWS para dados, incluindo Amazon S3, AWS Glue Data Catalog, Lake Formation, Athena e Redshift Spectrum.
• Conhecimento em formatos e tabelas analíticas como Parquet e Iceberg.
• Experiência com busca, indexação ou recuperação de informação usando OpenSearch ou Elasticsearch.
• Vivência com pelo menos uma linguagem de programação como Python, Java, C#, .NET Core ou Node.js.
• Conhecimento em observabilidade com Datadog ou OpenTelemetry.

Diferenciais

• Experiência com Amazon Bedrock e pipelines de RAG.
• Conhecimento em analytics de produto com Pendo, Hotjar ou Google Analytics.