Au cours d'une expérience de terrain impliquant 1559 juges pakistanais, il a été constaté que l'utilisation de l'assistant IA JudgeGPT a entraîné une augmentation de 6,3 pour cent du nombre d'affaires résolues. Cependant, la condition clé du succès était la présence d'une formation pratique : le gain d'efficacité a été observé exclusivement chez les juges ayant suivi une instruction spécialisée sur le fonctionnement du système.

Les chercheurs ne disposent d'aucune donnée concernant un effet positif dans les groupes n'ayant pas reçu de formation ; dans ces cas, l'efficacité de l'outil était pratiquement nulle. Les auteurs de l'étude estiment le retour sur investissement du déploiement de cette technologie, en incluant les coûts de formation, jusqu'à 38,50 dollars pour chaque dollar investi.

Ces données soulignent que le simple déploiement d'algorithmes ne garantit pas la résolution des problèmes du système judiciaire. Sans investissement de ressources dans le capital humain et l'adaptation du personnel, les innovations technologiques peuvent s'avérer inutiles pour désengorger les tribunaux.