Исследование Forecasting Research Institute показывает, что ведущие эксперты по ИИ систематически недооценивали темпы развития отрасли. По данным, пересказанным The Decoder, ИИ достиг уровня золотой медали на Международной математической олимпиаде на пять лет раньше медианного прогноза экспертов.
Оценки также заметно разошлись с динамикой годовой выручки Anthropic: фактический показатель оказался примерно в пять раз выше прогнозов экспертов. При этом прогнозы для практических применений, включая беспилотные автомобили, дали более неоднозначную картину.
Это важно для компаний, регуляторов и исследовательских групп, использующих экспертные оценки при планировании. Одного показателя недостаточно: скорость прогресса различается по задачам, а доступные сведения представлены в кратком пересказе одного источника.
комментарий редакции
Что это значит
Вероятное последствие — пересмотр методов прогнозирования ИИ с разделением оценок по отдельным задачам, а не по отрасли в целом. Следующим наблюдаемым сигналом станет публикация первичных материалов исследования и новых сравнений прогнозов с фактическими результатами. Существенная неопределённость связана с тем, что сейчас доступен только пересказ одного источника.