Исследователи из подразделения Apple Machine Learning Research заявили, что выполнение задач с длинным горизонтом планирования в больших языковых моделях остается нестабильным, даже при наличии высокоуровневых стратегий. Анализ контролируемых алгоритмических головоломок показал, что хотя разбиение задач на части необходимо для устойчивости, их чрезмерная декомпозиция создает эффект «узкого места без восстановления». В этом состоянии ошибки на нескольких сложных этапах становятся необратимыми из-за крайне неравномерного распределения погрешностей.

Для решения этой проблемы авторы работы предложили новый подход под названием Lookahead-Enhanced Atomic Decomposition (LEAD). Этот метод направлен на преодоление выявленного барьера, позволяя моделям избегать тупиковых ситуаций, где последовательные ошибки на критических шагах делают дальнейшее достижение цели невозможным.

Представленные данные основаны исключительно на метаданных исследования, опубликованного самой компанией Apple. На данный момент независимого подтверждения результатов или детального описания методики за пределами предоставленного синопсиса не имеется.