GPT-5.6 Sol обійшов React Coding Benchmark із результатом 43,1%, але відставання від конкурентів є мінімальним

За Beating, Million випустила ReactBench v1 — бенчмарк для тестування ШІ-агентів для кодування на 51 реальному завданні з розробки React. GPT-5.6 Sol набрав 43,1%, випередивши конкурентів; за ним іде Fable 5 із 41,2%. Million зазначила, що різниця є незначною й недостатньою, щоб підтвердити явну перевагу Sol. Попри лідерські результати, навіть найкращі моделі виконали менше половини завдань. У межах 4 455 тестів усі моделі створили 1 194 проблеми в React, причому 77,5% були класифіковані як баги або проблеми безпеки.
Застереження: інформація на цій сторінці може походити зі сторонніх джерел і надається виключно для ознайомлення. Вона не відображає позицію чи думку Gate і не є фінансовою, інвестиційною чи юридичною консультацією. Торгівля віртуальними активами пов’язана з високим ризиком. Будь ласка, не покладайтеся лише на інформацію з цієї сторінки під час прийняття рішень. Детальніше дивіться у Застереженні.
Прокоментувати
0/400
Немає коментарів