У вихідні компанія Meta представила дві нові моделі штучного інтелекту Llama 4 – легку Scout і середньоформатну Maverick, які, за їхніми словами, перевершують конкурентів у широкому спектрі популярних тестів. Проте виявилося, що статистика, представлена Meta, може бути маніпуляцією, як повідомляє видання The Verge.
У пресрелізі Meta зазначила, що їхні моделі виявилися дуже успішними на платформі LMArena, де користувачі порівнюють штучний інтелект у режимі чату і голосують за найкращі. Maverick посіла друге місце з високим рейтингом, але виявилося, що тестувалася експериментальна версія моделі, спеціально адаптована для чатів, а не публічна версія.
Користувачі виявили цю непублічну інформацію в документації Meta, і це викликало критику з боку LMArena, яке звинуватило компанію в недобросовісності. Це змусило LMArena переглянути свої правила, щоб уникнути подібних ситуацій у майбутньому, оскільки спеціально налаштовані версії моделей можуть спотворювати реальність їхньої продуктивності.
Нові моделі штучного інтелекту від Meta опинились в центрі скандалу
Вам також може сподобатися
Більше від автора
Різниця у віці: Варді та вихованець Лестера встановили рекорд АПЛ
