IA · 5 MIN

Retrieval-Augmented Generation, y por qué sustenta la IA soberana

RAG fundamenta las respuestas de un modelo en fuentes recuperadas, reduciendo la alucinación y la obsolescencia. Por qué sustenta la IA soberana.

Retrieval-Augmented Generation, y por qué sustenta la IA soberana
UBICACIÓN
Todo el mundo
AUTOR
Aashwin Shrivastava
PUBLICADO
1 abr 2024

Situación a abril de 2024. Los datos sobre modelos, precios y benchmarks pueden haber quedado obsoletos. Traducción generada automáticamente con IA. La versión alemana es el original revisado por la redacción.

Un modelo de lenguaje por sí solo responde a partir de datos de entrenamiento congelados, que es cómo termina seguro y equivocado. Retrieval-Augmented Generation (RAG) aborda eso: primero recupera fuentes relevantes y actuales, y luego genera la respuesta a partir de ellas. Para nosotros es la columna vertebral de la mayoría de los sistemas de IA útiles y fiables.

01. Qué es RAG

RAG es un marco híbrido que empareja un modelo generativo con un sistema de recuperación. En lugar de basarse solo en lo que el modelo aprendió durante el entrenamiento, incorpora información externa en el momento de responder.

Funciona en dos pasos. Recuperación: dada una pregunta, el sistema busca en una base de conocimiento los pasajes más relevantes para ella. Generación: el modelo compone entonces una respuesta natural fundamentada en esos pasajes. La respuesta se lee de forma conversacional, pero está anclada a fuentes reales en lugar de a la memoria del modelo.

02. Por qué importa

  • Fundamentación factual. Obtener las respuestas de referencias verificadas reduce los errores seguros y plausibles que los modelos sin fundamento tienden a producir.
  • Conocimiento actual. El recuperador puede leer datos en vivo, así que las respuestas no quedan obsoletas como sí ocurre con los pesos de entrenamiento fijos.
  • Adaptable entre dominios. Apúntelo a una base de conocimiento de soporte, un corpus de investigación o documentos internos, y el mismo enfoque encaja en soporte, investigación, sanidad o educación.

Para una introducción más completa, el explicador de NVIDIA sobre RAG es un buen punto de partida.

03. Por qué sustenta la IA soberana

RAG es donde se encuentran la capacidad y el control. El conocimiento reside en un almacén que usted posee, el modelo puede ejecutarse dentro de su propio entorno, y la respuesta está fundamentada en sus datos, que nunca tienen que salir de él. Ese es el mismo punto que planteamos sobre los modelos de pesos abiertos: la capacidad que puede alojar es capacidad que controla.

Para un equipo que sopesa dónde debe residir su IA, RAG es a menudo la primera decisión de diseño que hace que un sistema autoalojado resulte genuinamente útil en lugar de una demo.

← Signals

Wayne Dyer

“Si cambias la forma en que miras las cosas, las cosas que miras cambian.”