Упс! Не вдала спроба:(
Будь ласка, спробуйте ще раз.

Мовні моделі зіграли в турнірі по Street Fighter III

Артем Житкевич
Артем Житкевич
6 квітня 2024 1 хвилин читання

На хакатоні Mistral AI у Сан-Франциско розробники Стен Жірар та Квір Брейн представили тест LLM Colosseum з відкритим вихідним кодом, який базується на класичній аркадній грі Street Fighter III.

Про це повідомляє Tom's Hardware. 

Цей тест призначений для визначення найефективнішої мовної моделі ШІ в специфічній манері.

За результатами тестів, проведених Жіраром, найкращою мовною моделлю у турнірі Street Fighter III виявилася GPT 3.5 Turbo від OpenAI, яка досягла найвищого рейтингу ELO серед восьми учасників.

Окремі тести, організовані Банджо Обайомі з AWS компанії Amazon, також показали цікаві результати, де перемогла мовна модель claude_3_haiku від Anthropic з рейтингом ELO 1613.

Такі заходи дозволяють оцінити ефективність мовних моделей в контексті віртуальних боїв, використовуючи класичні ігрові сценарії.

50 UAH 150 UAH 500 UAH 1000 UAH 3000 UAH 5000 UAH
0
Прокоментувати
Інші матеріали

Data Security: як імплементувати LLM безпечно

Олег Богуславський 20 червня 2024 19:15

15 проєктів диджиталізації культурної спадщини України стали учасниками акселератора HATA hub

Олеся Дерзська 18 червня 2024 21:09

Mistral випускає Codestral: нову генеративну модель для кодування з оцінкою у $6 млрд

Вікторія Рудзінська 30 травня 2024 07:04

Master of Code Global використав ШІ, щоб створити базу знань з діалогів споживачів у чатботі

Кіра Іванова 30 квітня 2024 18:29

ШІ-угодами Amazon і Microsoft з Mistral, Anthropic і Inflection зацікавились в Британії

Кіра Іванова 24 квітня 2024 17:32