ИИ оказался не способен заменить программистов

Результаты исследования были опубликованы на сервере препринтов arXiv. В ходе тестирования трех моделей ИИ на написание компьютерного кода и исправление ошибок было выявлено, что даже самые продвинутые модели не могут полностью заменить программистов. Модели, включая o1, GPT-4o и Claude 3.5 Sonnet, были протестированы на бенчмарке SWE-Lancer, основанном на задачах для программистов с сайта Upwork. Несмотря на некоторые успехи, модели ИИ допускали ошибки из-за недостаточного понимания контекста, что приводило к неверным решениям. Инженеры OpenAI пришли к выводу, что в настоящее время ИИ не способен полностью заменить IT-специалистов. Глава компании, Сэм Альтман, обещал, что к 2025 году будут разработаны модели способные качественно решать задачи программирования на начальном уровне. В феврале была анонсирована бесплатная модель GPT-5 с обещанием поддержки рассуждений в будущих моделях.

Источник и фото - lenta.ru