Google назвала найкращі ШІ-моделі для розробки Android-додатків — Gemini програв GPT

Google в черговий раз оновила свій рейтинг Android Bench, в якому зібрані найкращі моделі штучного інтелекту для розробки додатків під Android. У списку з'явилося безліч моделей з відкритими вагами; наводиться детальна інформація про використані токени та вартість роботи з цими моделями.

Джерело зображення: developer.android.com

Одна з областей, в якій великі мовні моделі справді досягли успіху, — це написання програмного коду, їхня здатність надавати допомогу в розробці додатків та інших проектів ПЗ. У першому рейтингу Android Bench переможцем стала Google Gemini 3.1 Pro, згодом на одному рівні з нею почала виступати OpenAI GPT 5.4, а станом на 18 травня в лідери вирвалася GPT 5.5, яка майже на 2% обійшла як Gemini 3.1 Pro, так і GPT 5.4.

Результати тестування стали прозорішими, оскільки Google навела деякі деталі. Тепер у рейтингу вказуються середня затримка — час, витрачений на вирішення ста задач за десять прогонів; середня загальна кількість токенів — споживання токенів за один прогін за підсумками десяти; та середня вартість — витрати на запуск одного бенчмарка в американських доларах.

Це допомогло зрозуміти, що хоча GPT 5.5 і дещо потужніша, виконання тих же задач на Gemini 3.1 Pro обходиться більш ніж удвічі дешевше. Серед відкритих моделей найкращий результат показала GLM 5.1. Нещодавно Google випустила потужну Gemini 3.5 Flash, а незабаром дебютує і більш потужна Gemini 3.5 Pro — буде цікаво подивитися, як вони виступлять проти теперішнього лідера OpenAI GPT 5.5.

Хочеш дізнатися більше — читай відгуки