L’étude de Vals AI a évalué 25 modèles d’IA sur leur conformité aux positions du gouvernement chinois. Selon le synopsis de The Decoder, les modèles chinois ont répondu aux questions politiques avec moins de cohérence que prévu.
Les chercheurs ont également constaté que les modèles occidentaux adoptaient parfois les positions officielles de Pékin. L’influence la plus forte sur l’inclination politique des réponses venait du langage de la requête.
Cela est important pour l’évaluation de l’IA dans un contexte international: l’origine du modèle n’explique pas à elle seule l’intégralité de la nature de ses réponses politiques. Les données disponibles ne présentent que le synopsis de la publication, sans détails sur la méthodologie et les résultats des tests.
commentaire éditorial
Pourquoi c’est important
Une conséquence pratique probable est la nécessité de tester les modèles dans plusieurs langues et selon une méthode politique unique. Le prochain signal observé sera les détails publiés par Vals AI sur l’échantillon, les questions et les résultats quantitatifs. Une incertitude substantielle réside dans le fait que seul le synopsis de The Decoder est actuellement disponible.