
Vals AIの研究は25 件のAIモデルが中国政府の立場に適合するかを検証した。The Decoderの説明によると、中国系モデルは政治的な質問に対して予想より一貫していなかった。
研究者らは、西側のモデルが時に北京の公式見解を受け入れることもあると発見した。特に、問い合わせ言語が政治的な傾向に対して強い影響を与えた。
これは国際的な環境でのAI評価において重要であり、モデルの出自だけでは政治的回答の全体的な性質を説明できない。なお、利用可能なデータは公開概要のみで、方法論やテスト結果の詳細はない。
編集部コメント
なぜ重要か
実際的な推奨は、多言語かつ一貫した政治的手法でモデルをテストする必要がある。次に観測されるサインは、Vals AI が公開するサンプル、質問、定量的結果の詳細。重要な不確実性は、現状 The Decoder の概要のみが利用可能で、方法論と結果の詳細がない。