Нові моделі штучного інтелекту від Meta опинились в центрі скандалу

У вихідні компанія Meta представила дві нові моделі штучного інтелекту Llama 4 – Scout і Maverick. Вони були оголошені кращими за GPT-4o та Gemini 2.0 Flash у різних тестах. Проте The Verge повідомив, що статистика від Meta може бути марнотратною. Meta похвалилася результатами моделей у рейтингу LMArena, але виявилося, що тести проводилися з експериментальною версією, спеціально оптимізованою для чатів. LMArena розгнівана і вже переглядає свої правила, щоб уникнути подібних ситуацій у майбутньому. Компанія вважає, що такі рейтинги стають менш важливими, коли постачальники ШІ можуть надавати спеціально налаштовані версії для тестування.