El exinvestigador de DeepMind Thore Graepel quiere aplicar en una startup Metis Reasoning, el principio de búsqueda usado en AlphaGo, a tareas de razonamiento general. La idea propone un registro separado de conocimientos para que cada conclusión pueda verificarse con pruebas relacionadas, en lugar de almacenar el conocimiento solo en los pesos del modelo.
Actualmente, según la descripción disponible de The Decoder, no existe un sistema funcionando ni benchmarks publicados. Por lo tanto, la eficacia práctica del enfoque y su capacidad para reducir alucinaciones aún no están confirmadas.
Para evaluar la idea se necesitará al menos una implementación operativa y pruebas comparables de precisión de las conclusiones y verificabilidad de las pruebas. La fuente se presenta como una única publicación independiente y se basa en metadatos, por lo que las conclusiones deben considerarse preliminares.
comentario editorial
Por qué importa
Si la idea se implementa, la señal más notable siguiente será la publicación de un prototipo funcional y benchmarks independientes con conclusiones verificables. Hasta entonces permanece la incertidumbre sobre precisión, velocidad y utilidad práctica del enfoque.