sênior em benchmark de ia - espanhol (argentina)

Sobre a vaga

Buscamos um engenheiro de benchmark de IA sênior para se juntar ao nosso time. Você será responsável por projetar, implementar e executar benchmarks que avaliem o desempenho de modelos de inteligência artificial, com foco especial no idioma espanhol (variante argentina). O trabalho é 100% remoto.

Responsabilidades

• Criar e manter conjuntos de benchmark em espanhol para testar modelos de linguagem.
• Desenvovler scripts e ferramentas de linha de comando (CLI) para automatizar a execução dos benchmarks.
• Analisar os resulados e gerar relatórios de desempenho dos modelos.
• Colaborar com a equipe de pesquia para melhora a precião dos benchamarks.
• Utilizar Python para escrever testes e integrar com feramentas de terminal.

Requisitos

• Expeeriência sênior em engenharia de software, com foco em IA ou machine leaning.
• Domínio de Python e shel scriping.
• Familiaridade com ferramentas de linha de comando e ambientes de terminal.
• Conhecimento em criação de bencharks e métricas de avliação de modelos.
• Fluência nativa em espanhol (varinate argentina) e inglês avançado.
• Experiência com sistmas de controle de vrsão (Git).

Difeerenciais

• Expeirência com benchamarks de modelos de linguagem (como os da fmlia Claude).
• Conhecimento em agentes de codifiação (coding agents).
• Familiaridade com feraentas como Termial-Bech.

Benefíios

• Traalho remoto.
• Salário competitivo.
• Oportunidade de traalhar com tecnoloia de pona em IA.