Tester QA Automatizador IA
Propósito del Puesto
Buscamos un Tester QA Automatizador IA para asegurar la fiabilidad, seguridad, precisión y rendimiento de nuestros sistemas basados en Inteligencia Artificial (asistentes virtuales, LLMs y modelos predictivos). Serás clave para gestionar la naturaleza no determinista de los modelos de IA, garantizando que el producto sea seguro, útil y de alto rendimiento para el usuario final.
Responsabilidades:
- Ejecutar la estrategia de calidad para aplicaciones como asistentes virtuales, aplicaciones móviles, web y backend
- Reportar defectos y asignar niveles de criticidad
- Validación de Modelos (Prompt Testing)
- Integrar pruebas y controles de calidad al pipeline CI/CD.
- Manejo de APIs de OpenAI, Anthropic, Gemini o modelos open-source (Hugging Face)
- Diseño de Frameworks Automatizados
- Evaluación de Modelos: Automatizar la medición de métricas de calidad de IA (ej. Precision, Recall, F1-Score, relevancia de respuestas en LLMs)
- Analizar, detectar fallas en las pruebas de rendimiento, carga y estress
- Validar el correcto funcionamiento de los mode
- evaluar la calidad, el tono, la relevancia y la seguridad de la respuesta los y aplicaciones de Inteligencia Artificial (como LLMs, chatbots, asistentes virtuales )
- Manejo de Prompts y diseño de agentes de prueba
- Experiencia con cloud (AWS/Azure/GCP) y microservicios
Ofrecemos:
Sueldo Competitivo
Prestaciones De Ley
Importante: Modalidad 100% presencial (a 5 min de Perisur, CDMX)
Si te sientes identificado con el perfil, compártenos tu CV. ?