Científico de Datos (Red Teaming y Evaluación)
Luxen AI • ciudad de mexico, Mexico
Role Description
Científico de Datos (Red Teaming y Evaluación)
- Título: Senior Data Scientist / AI Safety Researcher.
Dominio: RAG, Embeddings, Evaluación de Modelos
- Experiencia: +3 años en validación estadística y seguridad de modelos. Experiencia en Red Teaming (ataques simulados a IA para forzar alucinaciones).
Tareas Principales:
- Diseñar y mantener la estrategia de indexación vectorial en Qdrant para la Base de Conocimiento Fundacional (BCF) y para The Vault.
- Implementar los pipelines de generación de embeddings para documentos legales, propuestas, RFPs y datos del Santuario Corporativo.
- Evaluar continuamente la precisión del RAG: medir métricas de recall y precisión para garantizar que los Expertos Digitales no alucinen.
- Construir los datasets de evaluación para medir el desempeño de los Expertos Digitales y las predicciones de la Matriz de Cumplimiento.
- Calcular el PWin Score (Probabilidad de Ganar) usando regres...
- Título: Senior Data Scientist / AI Safety Researcher.
Dominio: RAG, Embeddings, Evaluación de Modelos
- Experiencia: +3 años en validación estadística y seguridad de modelos. Experiencia en Red Teaming (ataques simulados a IA para forzar alucinaciones).
Tareas Principales:
- Diseñar y mantener la estrategia de indexación vectorial en Qdrant para la Base de Conocimiento Fundacional (BCF) y para The Vault.
- Implementar los pipelines de generación de embeddings para documentos legales, propuestas, RFPs y datos del Santuario Corporativo.
- Evaluar continuamente la precisión del RAG: medir métricas de recall y precisión para garantizar que los Expertos Digitales no alucinen.
- Construir los datasets de evaluación para medir el desempeño de los Expertos Digitales y las predicciones de la Matriz de Cumplimiento.
- Calcular el PWin Score (Probabilidad de Ganar) usando regres...