Исследовательская организация в сфере безопасности искусственного интеллекта METR опубликовала результаты 11-недельного аудита внутренней разработки компании Anthropic. Как сообщает The Verge, темпы совершенствования моделей компании удвоились по сравнению с показателями прошлого года, а результаты бенчмарков указывают на то, что за последние двенадцать месяцев лаборатория прошла путь, эквивалентный двум годам исторического прогресса. Проверка проводилась отдельно от программы предоставления исследователям доступа уровня штатных сотрудников, запущенной после серии взломов прошлым летом.
Специалисты METR подчеркнули, что наблюдаемое ускорение исследований обусловлено не расширением парка вычислительных мощностей, которое исторически выступало главным фактором прогресса, а непосредственной автоматизацией задач при помощи ИИ. Опросы в корпоративных каналах Slack и интервью с инженерами Anthropic показали кратный рост производительности труда. Сотрудники, применяющие наиболее продвинутую внутреннюю модель, оценили свою продуктивность в среднем в 12 раз выше по сравнению с работой без ИИ-инструментов, тогда как несколько месяцев назад при работе с системой Mythos 5 этот показатель составлял шестикратное увеличение.
В отчете указано, что на данный момент алгоритмы в основном выступают в роли ассистентов для инженеров-людей, однако зафиксированы признаки того, что полностью автономные вычисления вскоре займут значительно большую долю. Аналитики METR не выявили признаков снижения отдачи или явных технических барьеров, способных помешать дальнейшему наращиванию скорости исследований. Кроме того, выяснилось, что за последние шесть месяцев компания завершила обучение трех неанонсированных моделей под условными обозначениями Model 2, Model 3 и Model 4 в июле, августе-сентябре и сентябре-октябре соответственно, а также располагает закрытой моделью 2022 года.
Публикация выводов состоялась на фоне подготовки Anthropic к публичному размещению акций, в то время как генеральный директор Дарио Амодеи публично призывает индустрию замедлить развитие передовых технологий. При этом около 100 страниц исходного отчета подверглись цензуре со стороны Anthropic. Организация METR заявила, что компания воспользовалась правом на редактирование и исключила из общедоступной версии большую часть наиболее информативных доказательств, а также отклонила ряд запросов на предоставление данных, что затрудняет независимую оценку рисков и темпов разработки.
Протестировать Claude без VPN и с оплатой российскими картами можно в ИИ-Студии Neyro.pro.
Полученные METR данные представляют собой одно из первых задокументированных подтверждений того, что современные модели начинают напрямую ускорять создание собственных преемников, снижая зависимость темпов разработки от исключительно аппаратного масштабирования.
Комментарии и обсуждение
Пока нет комментариев. Будьте первым!