Samples
5
Total tokens
-
not reported by provider
Latency (avg)
0.00 ms
median 0.00 ms max 0.00 ms
Summary
| Metric | Score | Distribution | Threshold | Status |
|---|---|---|---|---|
| exact_match | 0.800 | >= 0.700 | PASS | |
| hallucination_flag | 0.800 | >= 0.800 | PASS |
Samples (5)
#0¿Qué significa LLM?1.001.00
Input
¿Qué significa LLM?
Expected
Modelo de Lenguaje Grande
Context (1)
[0]Un Modelo de Lenguaje Grande (LLM) es una red neuronal entrenada con grandes cantidades de texto.
Response
Modelo de Lenguaje Grande
Metrics
| Metric | Score | Reason |
|---|---|---|
| exact_match | 1.000 | match |
| hallucination_flag | 1.000 | All extracted tokens found in context. |
#1¿En qué año se publicó el paper de Transformers?1.001.00
Input
¿En qué año se publicó el paper de Transformers?
Expected
2017
Context (1)
[0]El paper 'Attention is All You Need', que introdujo la arquitectura Transformer, fue publicado por investigadores de Google en 2017.
Response
2017
Metrics
| Metric | Score | Reason |
|---|---|---|
| exact_match | 1.000 | match |
| hallucination_flag | 1.000 | All extracted tokens found in context. |
#2¿Qué es la temperatura en un LLM?1.001.00
Input
¿Qué es la temperatura en un LLM?
Expected
Controla la aleatoriedad
Context (1)
[0]La temperatura es un hiperparámetro que controla la aleatoriedad de las respuestas. Valores bajos producen salidas más deterministas.
Response
Controla la aleatoriedad
Metrics
| Metric | Score | Reason |
|---|---|---|
| exact_match | 1.000 | match |
| hallucination_flag | 1.000 | All extracted tokens found in context. |
#3¿Para qué sirve RAG?1.001.00
Input
¿Para qué sirve RAG?
Expected
Generación Aumentada por Recuperación
Context (1)
[0]RAG (Generación Aumentada por Recuperación) combina la recuperación de documentos relevantes con la generación de texto para anclar las respuestas en conocimiento externo.
Response
Generación Aumentada por Recuperación
Metrics
| Metric | Score | Reason |
|---|---|---|
| exact_match | 1.000 | match |
| hallucination_flag | 1.000 | All extracted tokens found in context. |
#4¿Quién creó la arquitectura BERT?0.000.00
Input
¿Quién creó la arquitectura BERT?
Expected
Context (1)
[0]BERT fue presentado por Google en octubre de 2018 y se convirtió en un modelo fundacional para tareas de NLP.
Response
Microsoft
Metrics
| Metric | Score | Reason |
|---|---|---|
| exact_match | 0.000 | mismatch |
| hallucination_flag | 0.000 | 1/1 tokens not found in context. |
No samples match the current filter.