Anthropic впервые раскрыла метрики того, как Claude участвует в создании будущих моделей ИИ. По данным, приведённым The Decoder, Claude теперь «ведёт» 26% такой работы против менее 1% в феврале.
Однако формулировка требует осторожности. Источник отмечает, что общий масштаб работ неясен, а оценку проводит сам Claude. Кроме того, слово «ведёт» означает меньше, чем может показаться из этого показателя.
Публикация важна как попытка Anthropic измерять участие ИИ в собственных исследованиях, но представленных данных недостаточно, чтобы сравнить 26% с долей полностью выполненной работы или сделать вывод о самостоятельности модели.
комментарий редакции
Что это значит
Вероятное последствие — усиление интереса к метрикам участия ИИ в разработке ИИ-систем. Следующим наблюдаемым сигналом станет публикация Anthropic с точным определением показателя и независимой проверкой. Существенная неопределённость связана с тем, что доступна только сводка источника, а оценка приписывается самому Claude.