AI-системы смогли самостоятельно реинженерить программный код длиной до 16 тыс. строк — это важный шаг вперед для разработчиков и индустрии в целом. По оценкам экспертов, результат может привести к значительному ускорению процесса программирования.
Что такое MirrorCode
Исследовательские организации METR и Epoch разработали новый бенчмарк под названием MirrorCode. Он тестирует способности AI-моделей к реинжинирингу программ с использованием лишь командной строки, без доступа к исходному коду. Проект включает более 20 программ, затрагивающих различные области вычислений: от утилит Unix до криптографии. Успешная реализация одной из задач под названием gotree, отвечающей за работу с биоинформатическими данными, занимает у AI всего несколько дней, тогда как человеку может понадобиться от 2 до 17 недель.
Достижения и ограничения
AI-системы, такие как Claude Opus 4.6, уже способны эффективно справляться с конкретными задачами кодирования, что свидетельствует о их высокой производительности. Однако важно помнить, что текущие тесты не являются стандартными, и для успешного выполнения требуется значительное вычислительное время. Это также подразумевает, что результаты могут быть обусловлены некоторыми ограничениями, такими как практика запоминания базовых программ.
Что это значит для разработчиков
Для программистов это означает, что AI уже может справляться с задачами на уровне опытных сотрудников, что минимизирует время на выполнение рутинных операций. Это освобождает ресурсы для более творческой работы и проектирования, что, в свою очередь, может привести к сокращению сроков разработки и улучшению качества программного обеспечения. Если ваша команда использует AI для кодирования, это может стать значительным конкурентным преимуществом.
Следующий шаг заключается в том, чтобы увидеть, как эти технологии будут интегрироваться в разработку софта в ближайшие годы, изменяя правила игры в индустрии.