L'ancien chercheur DeepMind Thore Graepel souhaite appliquer dans une startup Metis Reasoning le principe de recherche utilisé par AlphaGo aux tâches de raisonnement général. L'idée prévoit un registre séparé des connaissances afin que chaque conclusion puisse être vérifiée par les preuves qui y sont associées, plutôt que de stocker les connaissances uniquement dans les poids du modèle.
À l'heure actuelle, selon la description accessible de The Decoder, il n'existe pas de système fonctionnel ni de benchmarks publiés. Par conséquent, l'efficacité pratique de l'approche et sa capacité à réduire les hallucinations ne sont pas encore vérifiées.
Pour évaluer l'idée, au minimum une mise en œuvre fonctionnelle et des tests comparables sur la précision des conclusions et la vérifiabilité des preuves seront nécessaires. La source est présentée par une seule publication indépendante et repose sur des métadonnées, par conséquent les conclusions doivent être considérées comme préliminaires.
commentaire éditorial
Pourquoi c’est important
Si le concept est mis en œuvre, le prochain signal notable sera la publication d'un prototype fonctionnel et de benchmarks indépendants avec des conclusions vérifiables. Avant cela, l'incertitude demeure quant à l'exactitude, la vitesse et l'utilité pratique de l'approche.