
ニューヨーク大学とテキサス大学オースティン校の研究により、前例のない言語モデルが体系的に使用する六つの言語パターンが特定され、人にとって理解が難しくなることが示唆された。これを The Decoder が報じている。
著者らは、コードや数学の教材で、正確さがより高く報われる傾向があり、必ずしも表現の明確さが重視されていないこととこの問題の関連を指摘している。説明によれば、小規模なモデルは人間の書く文章により近い傾向がある。
実践的な結論として現時点での情報は、パターンそのものや研究方法、特定モデル間の違いを公開していない。そのため、この公開は読解性の単一の普遍的基準を提供するのではなく、回答の品質を検証するための方向性を示しているだけである。
編集部コメント
なぜ重要か
おそらくの結果として、AI の回答の正確さだけでなく、読みやすさを個別の品質指標として注目する動きが強まる。次に見られる兆候は、パターンと検証手法のリストを含む完全な研究の公開であり、初文献とデータの欠如のため不確定性が高いままである。