Modelos de IA se enfrentam em torneio de Street Fighter III
Hackathon em São Francisco testa capacidade de modelos de linguagem AI em um torneio do jogo Street Fighter III
Na última semana, em São Francisco, um evento chamado Mistral AI hackathon foi palco para um experimento incomum conduzido pelos desenvolvedores Stan Girard e Quivr Brain. Eles apresentaram o LLM Colosseum, um projeto open source que utiliza o icônico jogo Street Fighter III para avaliar a eficiência de modelos de linguagem de inteligência artificial (IA) de forma bastante original.
Matthew Berman, um aficionado por IA, decidiu levar a ideia adiante e organizou um torneio entre vários modelos de linguagem, cujos resultados compartilhou através de um vídeo. O material mostra um embate entre as IAs, além de oferecer uma explicação detalhada sobre como instalar o projeto de código aberto em PCs e Macs para aqueles interessados em realizar suas próprias avaliações.
Diferentemente dos testes convencionais para modelos de linguagem, o LLM Colosseum coloca as IAs em uma arena onde a latência e a velocidade são cruciais, aspectos importantes nas batalhas virtuais de jogos como Street Fighter III. A rapidez com a qual os jogadores — ou neste caso, as IAs — reagem às ações dos oponentes é determinante para a vitória.
LEIA TAMBÉM ► Duke Nukem 3D: Mod Voxel transforma o clássico shooter em 3D real
Os modelos de linguagem são treinados para tomar decisões em tempo real sobre como lutar. Apesar de serem baseados em texto, esses modelos foram treinados no Street Fighter III através de prompts de texto, aprendendo não apenas a análise contextual do jogo como um todo, mas também a reagir à situação de jogo com uma variedade de movimentos. Foram ensinados a se aproximar ou se afastar do inimigo, utilizando técnicas como bola de fogo, mega ataque, furacão e mega bola de fogo.
A luta entre as IAs, dinâmica como mostrado no vídeo, revela uma ação estratégica, onde os oponentes sabem bloquear ataques e usar técnicas especiais. Atualmente, o projeto LLM Colosseum permite o uso de apenas um personagem jogável, Ken.
LEIA TAMBÉM ► Abril chega com muitos jogos grátis no Prime Gaming
De acordo com os testes realizados por Girard, o modelo que se destacou no torneio de Street Fighter III foi o GPT 3.5 Turbo da OpenAI, alcançando a maior classificação ELO, 1776, entre os oito participantes.
Em uma série de testes separada, organizada por Banjo Obayomi, especialista em Marketing de Produto da AWS da Amazon, foram realizadas 314 partidas individuais envolvendo quatorze modelos de linguagem. Aqui, o vencedor foi o modelo claude_3_haiku da Anthropic, com uma classificação ELO de 1613.
Este inusitado torneio entre modelos de IA no Street Fighter III destaca não apenas a capacidade de aprendizado e adaptação desses sistemas, mas também abre uma nova frente de estudo e entretenimento no cruzamento entre IA e o mundo dos jogos eletrônicos.
LEIA TAMBÉM ► Confira as notícias mais atualizadas do universo gamer no GAMES FOLHA VITÓRIA
►►► Hello, stay a while and listen! Quer receber notícias sobre o UNIVERSO GAMER diretamente no seu WHATSAPP gratuitamente? Clique AQUI e participe de nosso canal exclusivo de notícias do GAMES FOLHA VITÓRIA!
