Google оновлює Android Bench з Claude Fable 5 та сімома новими моделями ШІ

Google оновив Android Bench сьогодні, додавши вісім нових моделей штучного інтелекту до рейтингу тесту розробки додатків для Android. Оновлення включає Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus і Qwen 3.7 Max. Компанія створила цей тест для оцінки роботи великих мовних моделей у 100 завданнях з розробки для Android, а перша версія була запущена у березні.

Google додає вісім моделей ШІ до рейтингу Android Bench

Google розширив Android Bench вісімкою нових моделей. До них належать Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus і Qwen 3.7 Max. Компанія також запровадила нову платформу та додала метрики для оцінки вартості й ефективності. Google закликає розробників проводити власні тести та подавати відгуки.

Claude Fable 5 очолює рейтинг із точністю 84,5%

Claude Fable 5 досягла 84,5% точності у тесті Android Bench, посівши перше місце у рейтингу. GPT 5.4 і Claude Sonnet 5 зайняли друге й третє місця. Gemini 3.1 Pro посів п’яту позицію у оновлених результатах. Моделі OpenAI мали невеликий перевагу над AI Google у початковому запуску у березні.

Android Bench оцінює 100 завдань з розробки

Android Bench тестує великі мовні моделі за допомогою 100 завдань з розробки для Android. Мета тесту — показати, які агенти ШІ найкраще справляються з розробкою додатків для Android. Перша версія була запущена у березні, з того часу до платформи додали моделі з відкритим ваговим фондом.

FAQ

Які моделі додав Google до Android Bench сьогодні?
Google додав вісім нових моделей: Claude Fable 5, Claude Sonnet 5, Claude Opus 4.8, GLM 5.2, Kimi K2.7 Code, MiniMax M3, Qwen 3.7 Plus і Qwen 3.7 Max.

Яку точність показала Claude Fable 5 у Android Bench?
Claude Fable 5 досягла 84,5% точності у тесті Android Bench, посівши перше місце.

Коли Google запустив початкову версію Android Bench?
Першу версію Android Bench Google запустив у березні.