Technique Actualizado 2026-04

RLHF (Reinforcement Learning from Human Feedback)

Reinforcement Learning from Human Feedback
Definición

El RLHF es una técnica de entrenamiento que usa retroalimentación humana para alinear el comportamiento de un LLM con las expectativas de los usuarios.

Preguntas frecuentes

¿Por qué es necesario el RLHF?
Sin RLHF, un LLM es capaz pero poco útil: puede ser tóxico, salirse del tema o ser demasiado verboso. El RLHF lo vuelve útil, inofensivo y honesto.
¿Cómo funciona el RLHF?
Personas califican varias respuestas del modelo. Un modelo de recompensa aprende esas preferencias y luego el LLM se reentrena para maximizar esa recompensa.