QA Senior

Somos IT Patagonia, un equipo que brinda soluciones en la industria del conocimiento con impacto positivo. Llevamos 30 años liderando procesos de evolución tecnológica brindando soluciones para potenciar el funcionamiento de las organizaciones y el desarrollo de las personas que las componen. Queremos ser una mejor empresa para el mundo y sabemos que los mejores resultados se alcanzan de manera colaborativa. Por eso crecemos, innovamos y evolucionamos juntos.
Buscamos QA Senior que se sume a la comunidad de IT Patagonia. #BepatagonianDescripción¿Cuáles son las principales responsabilidades del rol? Diseñar y ejecutar estrategias de testing y validación para modelos de IA, incluyendo Machine Learning tradicionales y LLMs.
Desarrollar pruebas automáticas y pipelines de validación para modelos en entrenamiento y producción (unitarias, de integración y regresión).
Diseñar, ejecutar y automatizar pruebas de API (REST, GraphQL, gRPC), cubriendo escenarios funcionales, de seguridad, rendimiento y usabilidad.
Verificar la consistencia y calidad de los datasets, garantizando su cumplimiento con políticas de privacidad y gobernanza de datos.
Implementar pruebas específicas para LLMs, evaluando consistencia, factualidad, sesgo, toxicidad y privacidad en las respuestas.
Integrar el QA dentro de los pipelines de CI/CD, colaborando con Data Scientists, Software Engineers y MLOps Engineers.
Monitorear métricas post-despliegue como accuracy, drift, fairness, latencia y coste, estableciendo umbrales de calidad y alertas automáticas.
Documentar resultados de pruebas y generar reportes auditables para áreas de compliance, riesgo y auditoría interna.
Asegurar el cumplimiento de marcos regulatorios y éticos aplicables a IA (EBA, GDPR, Responsible AI).
Promover buenas prácticas de QA, testing automatizado, validación de APIs y reproducibilidad dentro del equipo de IA. ¿Qué capacidades necesitamos? Experiencia en aseguramiento de calidad de software o testing aplicado a proyectos de Machine Learning, NLP o Data Science. Competencia técnica en frameworks de testing como Newman.
Experiencia en pipelines de MLOps (MLflow, Kubeflow, Airflow, Vertex AI, etc.) y validación de modelos en entornos productivos.
Conocimiento de herramientas de data validation (Great Expectations, Pandera) y de evaluación de modelos de lenguaje (LangChain Evaluation, OpenAI Evals, Trulens).
Habilidad para definir, implementar y mantener estándares de calidad y reproducibilidad de modelos y datasets.
Familiaridad con métricas de performance, fairness y explicabilidad (SHAP, LIME).
Conocimientos de computación en la nube y principios de CI/CD aplicados a IA.
Experiencia en pruebas de rendimiento y fiabilidad de APIs (JMeter, k6), y validación de respuestas (estructuras JSON/XML, tiempos de respuesta, manejo de errores).
Capacidad para generar documentación clara, reportes de auditoría y comunicación efectiva de resultados a equipos técnicos y no técnicos.
Actitud analítica, atención al detalle y compromiso con la ética y la transparencia en IA.
Título universitario en Ingeniería Informática, Ciencias de la Computación o campo afín (preferentemente).
Somos #empresaB, comprometidos con un sistema económico que beneficia al planeta y a todas las personas. Fomentamos una cultura inclusiva porque consideramos que la diversidad agrega valor a todo lo que hacemos. Queremos que todas las personas se sientan parte y generamos un espacio basado en la colaboración, la pluralidad, la diversidad y la innovación continua. Queremos ser protagonistas en una sociedad más responsable, justa e integrada.
¡Sumate a esta experiencia!