---
title: "¿Qué es una eval de LLM? Cómo probar la salida de un modelo"
description: "Una eval es un conjunto de pruebas repetible que puntúa la salida de un LLM según sus criterios. Cómo crearla, calificarla y usarla antes de cambiar de modelo."
url: https://broadrouter.com/es/glossary/eval/
lang: es
updated: 2026-11-16
publisher: BroadRouter (a BroadNet site); API by BroadNet Inference, https://inference.broadnet.ai
---

Traducido del inglés con ayuda de IA. [Lea el original en inglés](https://broadrouter.com/glossary/eval/) (actualizado el 2026-11-16).

# Evaluación de LLM (eval)

Actualizado 2026-11-16

Una eval (abreviatura de evaluation, evaluación) es una prueba repetible de un modelo de lenguaje o de un prompt: un conjunto fijo de entradas, una descripción de cómo es una buena salida y un calificador (código, una persona u otro modelo) que puntúa cada salida para poder comparar versiones.

También llamado: eval, evals, evaluación de LLM, evaluación de modelos, pruebas de LLM, conjunto de evaluación, LLM evaluation, model evaluation, LLM testing, eval set

Una eval es una prueba unitaria para un prompt y un modelo: las mismas entradas cada vez, un criterio de aprobación claro y una puntuación que se puede comparar.

## Cómo funciona

Una eval tiene tres partes:

1.  **Casos.** Entradas tomadas del uso real, con casos límite. La guía de Anthropic enumera ejemplos como entradas irrelevantes, entradas demasiado largas y casos ambiguos “where even humans would find it hard to reach an assessment consensus” (traducción: en los que incluso a las personas les costaría llegar a un consenso en la evaluación).
2.  **Criterios.** Cómo es una buena respuesta: un valor exacto, un campo obligatorio, un tono, un dato que debe aparecer.
3.  **Calificador.** Algo que puntúa cada salida.

| Calificador | Adecuado para | Punto débil |
| --- | --- | --- |
| Código (coincidencia exacta, JSON Schema, regex) | Clasificación, extracción, [salida estructurada](https://broadrouter.com/es/glossary/structured-output/) | No puede juzgar texto abierto |
| Persona | Matices, tono, tareas nuevas | Lento y costoso |
| Modelo ([LLM como juez](https://broadrouter.com/es/glossary/llm-as-judge/)) | Respuestas abiertas a escala | Tiene sus propios sesgos |

Anthropic recomienda automatizar siempre que sea posible y afirma “Prioritize volume over quality” (traducción: priorice el volumen sobre la calidad): más casos con una calificación automática algo más ruidosa superan a unos pocos calificados a mano. También sugiere calificar con un modelo distinto del que produjo la salida.

## Por qué importa

-   **Cambiar de modelo o de proveedor.** Los benchmarks públicos rara vez coinciden con su tarea. Incluso con modelos de embeddings, el benchmark MTEB encontró que “no particular text embedding method dominates across all tasks” (traducción: ningún método de embeddings de texto domina en todas las tareas). Su propia eval es la única comparación fiable. Consulte [cómo evaluar un LLM antes de cambiar](https://broadrouter.com/es/blog/evaluate-llm-before-switching/).
-   **Cambios en el prompt.** Arreglar un caso suele romper otro. Vuelva a ejecutar el conjunto completo con cada edición del prompt.
-   **Compromisos de costo.** Una eval muestra si un modelo más barato basta para un paso concreto, con números en lugar de impresiones.
-   **Seguridad.** Añada casos de [alucinaciones](https://broadrouter.com/es/glossary/hallucination/), rechazos e intentos de inyección, no solo de los caminos felices.

## En BroadNet Inference

La documentación de BroadNet no incluye un producto de evals. Ejecute su conjunto de evaluación desde su propio código contra el endpoint compatible con OpenAI, cambiando solo el ID del modelo para comparar modelos. Los modelos de razonamiento cuentan el razonamiento dentro de `max_tokens`, así que deles margen o un caso puede fallar con una respuesta vacía en lugar de una incorrecta. El artículo [GLM 5.3 frente a DeepSeek V4.1 Flash](https://broadrouter.com/es/blog/glm-5-3-vs-deepseek-v4-1-flash/) es una comparación práctica.

## Preguntas frecuentes

### ¿Qué diferencia hay entre una eval y un benchmark?

Un benchmark es un conjunto de prueba público que se usa para comparar modelos en general. Una eval suele ser su propio conjunto, creado a partir de sus tareas reales, y le dice cómo rinde un modelo en su producto.

### ¿Cuántos casos de prueba necesita una eval?

No hay un número fijo. Las pautas de Anthropic prefieren más casos con calificación automática a unos pocos calificados a mano; empiece con decenas tomados del tráfico real y amplíelos a medida que encuentre fallos.

### ¿Debo poner temperature en 0 para las evals?

Use la configuración que usará en producción. Si las salidas varían entre ejecuciones, puntúe cada caso varias veces y compare promedios en lugar de resultados aislados.

## Vea también

-   [LLM como juez (LLM-as-a-judge)](https://broadrouter.com/es/glossary/llm-as-judge/) (término)
-   [Alucinación (hallucination)](https://broadrouter.com/es/glossary/hallucination/) (término)
-   [Salida estructurada (structured output)](https://broadrouter.com/es/glossary/structured-output/) (término)
-   [Temperatura (temperature)](https://broadrouter.com/es/glossary/temperature/) (término)
-   [Guardrails (barreras de protección)](https://broadrouter.com/es/glossary/guardrails/) (término)
-   [Benchmark de LLM (LLM benchmark)](https://broadrouter.com/es/glossary/llm-benchmark/) (término)
-   [Usar el SDK de OpenAI para Python con BroadNet Inference](https://broadrouter.com/es/guides/openai-python-sdk/) (guía)
-   [Cómo evaluar un LLM antes de cambiar de proveedor](https://broadrouter.com/es/blog/evaluate-llm-before-switching/) (artículo)
-   [Cambiar a una API compatible con OpenAI: lista de verificación](https://broadrouter.com/es/blog/openai-compatible-api-migration-checklist/) (artículo)
-   [GLM 5.3 vs. DeepSeek V4.1 Flash: cuál usar y cuándo](https://broadrouter.com/es/blog/glm-5-3-vs-deepseek-v4-1-flash/) (artículo)

Pruébelo con su carga de trabajo real. Las cuentas nuevas empiezan con USD 5 de crédito para Gemma y transcripción. DeepSeek, GLM y Qwen3.8 requieren una recarga.

[Comenzar](https://inference.broadnet.ai/account/?utm_source=broadrouter&utm_medium=referral&utm_campaign=es-glossary-eval&utm_content=page-cta) ·

**Fuentes**

-   [Anthropic, definir criterios de éxito y crear evaluaciones (desarrollar pruebas) (consultado el 2026-11-16)](https://platform.claude.com/docs/en/test-and-evaluate/develop-tests)
-   [Zheng et al., Judging LLM-as-a-Judge with MT-Bench and Chatbot Arena (arXiv) (consultado el 2026-11-16)](https://arxiv.org/abs/2306.05685)
-   [Muennighoff et al., MTEB: Massive Text Embedding Benchmark (arXiv) (consultado el 2026-11-16)](https://arxiv.org/abs/2210.07316)
