Нові моделі штучного інтелекту від Meta опинились в центрі скандалу
На вихідних компанія Meta представила дві нові моделі штучного інтелекту Llama 4 – Scout і Maverick. Вони, за даними компанії, виявилися кращими за інші відомі моделі у популярних тестах. Однак виявилося, що статистика, представлена Meta, може бути марнотратною. У пресрелізі компанія розповіла про високий рейтинг моделі Maverick на LMArena, але пізніше виявилося, що тестувалася експериментальна версія, спеціально адаптована для чат-ботів. LMArena звинуватила Meta в обмані і почала оновлювати правила, щоб уникнути подібних ситуацій у майбутньому. Компанія вважає, що рейтинги, як LMArena, стають менш значущими, коли постачальники ШІ можуть використовувати спеціальні версії для тестування, відмінні від тих, що випускають для широкої громадськості.
