Freelance Agent Evaluation Engineer

Resumen

Excelente oportunidad remota y por proyectos (project-based freelance) para ingenieros de desarrollo y evaluación de Inteligencia Artificial en Chile y el mundo, colaborando con la plataforma global Mindrift. El rol se centra en diseñar entornos de desarrollo realistas y escribir suites de pruebas rigurosas para evaluar el comportamiento de agentes de IA programadores. Es una posición ideal para profesionales independientes con nivel de inglés B2+ que deseen gestionar su propio tiempo y trabajar con tecnologías de vanguardia desde su computadora.

Requisitos de Idioma

Inglés - B2+ (Requisito explícito para la comunicación efectiva con equipos distribuidos, comprensión de documentación técnica avanzada y colaboración en un entorno de evaluación de IA global. Se requiere que envíen su CV en inglés).

La Empresa

Mindrift es una plataforma global especializada que conecta a profesionales de la tecnología con oportunidades basadas en proyectos de Inteligencia Artificial (project-based) para compañías líderes de la industria tecnológica. El enfoque principal de la organización es probar, evaluar y perfeccionar sistemas y modelos de IA de frontera (frontier models).

El Rol

La posición de Freelance Agent Evaluation Engineer (Python/FastAPI / React / AI Testing) – Remote Global @ Mindrift implica la creación de tareas de evaluación sumamente desafiantes para agentes de desarrollo de IA. Ustedes serán responsables de construir entornos de desarrollo realistas que simulen un historial operativo real y de escribir pruebas automatizadas rigurosas que certificen si las soluciones propuestas por los agentes de IA son válidas, todo gestionado de forma autónoma desde su computadora.

Requisitos

Más de 5 años de experiencia comprobable en el desarrollo de software.

Dominio técnico del stack core: Python (FastAPI), JavaScript/TypeScript (React), Docker, Postgres, Kafka y Redis.

Experiencia sólida en la escritura de pruebas automatizadas (funcionales y de integración).

Nivel de inglés B2+ (English proficiency – B2+, requisito explícito).

Capacidad profunda para entender los puntos de falla de los modelos de IA y definir escenarios que distingan una buena solución de una mala.

Habilidad para escribir suites de pruebas robustas que acepten múltiples enfoques válidos y descarten correctamente las soluciones incorrectas.

Deseable (Plus valorados):

Experiencia previa en el testeo, evaluación o entrenamiento de modelos de IA de frontera (frontier models).

Familiaridad con frameworks de evaluación de agentes de IA, flujos de QA y creación de datasets.

Trasfondo profesional en empresas tecnológicas de primer nivel o participación activa en proyectos open-source validados.

Experiencia con herramientas complementarias de CI/CD para pruebas, observabilidad de soluciones de agentes y control de costos en sistemas de IA.

Beneficios:
Oportunidad de participar de forma directa en el entrenamiento y mejora de modelos de IA avanzados para empresas tecnológicas líderes desde casa.

Esquema de trabajo freelance altamente flexible (you choose when and how to work): libertad total para definir su propio horario y ritmo de entrega según sus proyectos o estudios.

Trabajo basado estrictamente en el cumplimiento de tareas y proyectos, lo que fomenta la autonomía y elimina el micro-gestión.

Responsabilidades clave

Construir entornos de desarrollo realistas que simulen una empresa virtual con su base de código, infraestructura e historial de desarrollo (tickets, documentación, chats).

Diseñar tareas complejas a partir de estados intermedios de estos entornos, elaborando el prompt y definiendo con exactitud el criterio de "resuelto".

Escribir pruebas funcionales y de integración que acepten enfoques válidos y rechacen los incorrectos, manteniendo un criterio equilibrado.

Iterar en las tareas y suite de pruebas basándose en el feedback de QA, analizando fallas y refinando los datasets de evaluación.

Crear desafíos técnicos de alta complejidad que evalúen de manera justa y robusta las capacidades reales de los mejores modelos de IA desde su computadora o celular.

Geo-Fit & Perks

Ubicación: Global eligibility (verificar posibilidad de contratación remota desde Chile durante el proceso de selección). El trabajo es 100% remoto desde cualquier país, bajo un formato basado en proyectos (project-based) ✅.

Tipo de contrato: Freelance por proyectos. Formato compatible con contratación internacional desde Chile sin necesidad de visado. Las condiciones de la relación comercial independiente se definirán durante el proceso de aplicación.

Remuneración: Tarifa por hora de hasta $40/hr USD (o su equivalente según la complejidad de los proyectos y tareas asignadas). Sujeto a la estructura legal y país de residencia.

Horario: Trabajo remoto con traslape operativo a definir. Al ser un formato freelance por proyectos con la cultura de "tú eliges cuándo y cómo trabajar", la coordinación asíncrona desde Chile (CLT, husos UTC-3 / UTC-4) se gestiona de manera orgánica y con absoluta libertad horaria.