OpenAI представили SWE-Lancer
Сьогодні OpenAI представили новий бенчмарк SWE-Lancer, призначений для оцінювання можливостей передових мовних моделей (LLM) у виконанні реальних фріланс-завдань із програмування. Бенчмарк охоплює 1488 (гусари, мовчати) завдань із платформи Upwork, сумарною вартістю $1 млн, і охоплює як індивідуальні інженерні завдання, так і управлінські (що особливо цікаво, тобто оцінюються не тільки навички програмування, а й менеджерські). Розробники...































































































