IA QA Engineer
hace 2 días
This is a remote position. En Layer7 se está construyendo tecnología de hiperescala e inteligencia artificial confiable con el propósito de impulsar sistemas que impactan a millones de usuarios y a las operaciones críticas de grandes empresas. El equipo formado por más de 100 profesionales entre ingenieros científicos y expertos en QA trabaja en desafíos de alta complejidad técnica desde sistemas distribuidos y resilientes hasta modelos de lenguaje avanzados listos para producción. La cultura de Layer7 combina alto rendimiento innovación y curiosidad técnica fomentando el crecimiento personal y profesional dentro de un entorno colaborativo y equilibrado. Únete a nuestro equipo Aprovecha esta oportunidad para desarrollar tus habilidades y crecer profesionalmente en un ambiente dinámico y colaborativo. Responsibilities Como AI QA Engineer tu misión será diseñar ejecutar y documentar pruebas de calidad y seguridad para modelos de lenguaje a gran escala. Trabajarás en conjunto con equipos de ingeniería producto y ciencia de datos asegurando que cada modelo cumpla con estándares rigurosos de precisión coherencia y cumplimiento. Diseñar y ejecutar planes de prueba para evaluar razonamiento factualidad consistencia y robustez de prompts. Identificar y documentar alucinaciones errores lógicos bias y fallas de grounding o jailbreak. Evaluar la fidelidad de la recuperación (RAG) el uso correcto de herramientas y la estabilidad en tareas complejas. Definir y mantener rúbricas de evaluación criterios de aprobación y reportes reproducibles de errores. Colaborar en estrategias de red-teaming y pruebas adversariales para mejorar la seguridad de los modelos. Automatizar flujos de validación y métricas (precisión recall faithfulness toxicidad latencia) usando Python/SQL. Proponer mejoras a prompts sistemas de guardrails y procesos de evaluación continua. Oportunidades de Desarrollo Trabajar con tecnologías de vanguardia en evaluación de LLMs (OpenAI Evals W&B RAG evaluators). Desarrollar frameworks de QA para sistemas generativos de nivel empresarial. Participar en pruebas multilingües y de cumplimiento normativo (compliance & safety). Colaborar con equipos internacionales y contribuir directamente a la confiabilidad de modelos desplegados globalmente. Ambiente de Trabajo Formarás parte de un equipo especializado en evaluación de IA generativa y aseguramiento de calidad con alta autonomía técnica y enfoque ético. Promovemos un entorno donde la comunicación clara el pensamiento crítico y la curiosidad técnica son fundamentales. Requirements Este rol es ideal para profesionales con experiencia en QA de sistemas de IA evaluación de modelos de lenguaje o pruebas de robustez y seguridad en ML. Licenciatura, maestría o doctorado en Ciencia de Datos Computación Lingüística Computacional o campo afín. Experiencia práctica en QA para sistemas de ML/IA o evaluación de modelos generativos. Conocimiento de técnicas de red-teaming bias/fairness testing grounding verification y adversarial evaluation. Dominio de Python y frameworks de automatización (PyTest, SQL). Experiencia con herramientas de evaluación de LLMs (OpenAI Evals LangChain W&B MLflow). Capacidad para diseñar métricas y reportes de evaluación reproducibles. Comunicación analítica y detallada con habilidad para explicar razonamientos y hallazgos. Benefits Sueldo competitivo Prestaciones de ley y superiores Ambiente de trabajo colaborativo y de aprendizaje #J-18808-Ljbffr
-
QA Engineer
hace 3 semanas
WorkFromHome, México Creai A tiempo completoOverview En Creai, nos especializamos en aprovechar el poder de la inteligencia artificial y el aprendizaje automático para transformar negocios. Nuestra misión es ayudar a los clientes a reducir costos, aumentar la eficiencia y desbloquear nuevas oportunidades mediante soluciones de IA de vanguardia. Descripción del Puesto Como QA Engineer, serás el...
-
QA Engineer
hace 2 semanas
WorkFromHome, México Divelement A tiempo completoJoin to apply for the QA Engineer role at Divelement Join to apply for the QA Engineer role at Divelement Get AI-powered advice on this job and more exclusive features. We are looking for a QA Engineer with strong experience in manual testing and a solid understanding of test automation frameworks such as Cypress . In this role, you'll be essential in...
-
QA Engineer
hace 3 semanas
WorkFromHome, México Azkait A tiempo completoAZKAIT es una empresa Mexicana que busca y conecta el mejor talento IT con empresas Latinoamericanas y de Estados Unidos.Estamos en la búsqueda de tu talento como QA Engineer Requisitos: Perfil Semi senior o Senior – QA 4 o 5 años de Experiencia en Testing QA manual QA Automation (Cypress o Playwright preferentemente - Otra opción es que tengan Selenium...
-
Qa Engineer
hace 7 días
WorkFromHome, México Lion Systems Solutions A tiempo completoDescripción del trabajo We are looking for a detail‑oriented QA Engineer to lead the quality assurance effort for our award‑winning Laboratory Information System (LIS) software. This role is a hands‑on expert working with the development and deployment teams to ensure our cloud and on‑premises products are bug‑free and operating at the high level...
-
Qa Engineer
hace 2 semanas
WorkFromHome, México Ecosistemex S De Rl De Cv A tiempo completoESTAMOS BUSCANDO Tester Automatizador / QA Engineer Requisitos Experiencia comprobada con Selenium para pruebas de aplicaciones web. Experiência con Karma para probar aplicaciones Angular. Experiencia práctica con herramientas de prueba de API como Postman o RestAssured. Dominio de lenguajes de programación como Java o JavaScript Inglés hablado !...
-
QA Engineer
hace 7 días
WorkFromHome, México Ecosistemex s de RL de CV A tiempo completoESTAMOS BUSCANDO Tester Automatizador / QA Engineer REQUISITOS Experiencia comprobada con Selenium para pruebas de aplicaciones web. Experiencia con Karma para probar aplicaciones Angular. Experiencia práctica con herramientas de prueba de API como Postman o RestAssured. Dominio de lenguajes de programación como Java o JavaScript Inglés hablado !...
-
QA Engineer
hace 4 semanas
WorkFromHome, México International Catalyst Services, LLC A tiempo completoQA Engineer We are seeking a QA Engineer to join our team at MMA. This role will be based in Mexico City. This is a hybrid role that has a requirement of working at least three days a week in the office. As a QA Engineer at MMA, you will ensure that testing processes are effectively implemented and adhered to throughout the software development lifecycle....
-
Sr QA Engineer
hace 2 días
WorkFromHome, México ITKAWA TECHNOLOGIES LLC A tiempo completoSenior QA Engineer / QA Lead (Freelance) Engagement Type: Freelance / Independent Location: Remote (Mexico) Schedule: Monday to Friday, 9:00 AM – 5:00 PM (EST – USA Timezone) Contract Duration: Long-term engagement with possibility of extensions Role Overview We are seeking a highly experienced Senior QA Engineer / QA Lead (Freelance) to design, execute,...
-
QA Automation Engineer
hace 3 semanas
WorkFromHome, México Xideral A tiempo completoQA Automation Engineer (Inglés avanzado) – Remoto Resumen: Estamos buscando un QA Automation Engineer con al menos 5 años de experiencia en aseguramiento de la calidad, especializado en productos P&C (Property & Casualty) y con experiencia práctica en Guidewire. El candidato ideal hablará inglés avanzado, trabajará de forma remota y colaborará...
-
Qa Engineer Expert Webinar Guest
hace 7 días
WorkFromHome, México Tripleten A tiempo completoQa Engineer Expert Webinar Guest – Tripleten • Estado de México, México Overview Join to apply for the QA Engineer Expert Webinar Guest role at TripleTen. TripleTen is an award-winning online school among technology boot camps. Our mission is to help people change their lives and succeed in technology. We offer flexibility in studies, career mentoring,...
