A IA Dreamer do Google Aprende a Jogar Minecraft Sem Treinamento

Um novo sistema de IA do Google DeepMind descobriu como coletar diamantes no Minecraft — um dos maiores desafios do jogo — sem qualquer instrução humana.

A IA, chamada Dreamer, ensinou-se a jogar Minecraft e alcançou o nível de especialista em apenas nove dias. Ela fez isso simplesmente imaginando os resultados futuros de suas próprias ações, conforme relatado em um estudo publicado na Nature.

“O Dreamer representa um passo significativo em direção a sistemas de IA geral”, disse Danijar Hafner, cientista da computação no Google DeepMind, conforme relatado por Tech Xplore. “Ele permite que a IA entenda seu ambiente físico e também se aprimore com o tempo, sem que um humano precise dizer exatamente o que fazer”, acrescentou ele.

Minecraft é jogado por mais de 100 milhões de usuários mensais, para experimentar mundos 3D gerados aleatoriamente. Para encontrar diamantes, os usuários precisam jogar várias etapas, começando com a coleta de madeira, seguida pela criação de ferramentas, depois a construção de fornos, a extração de ferro, e finalmente a escavação subterrânea.

O processo geralmente requer várias horas de jogo para a maioria dos jogadores. No entanto, o Dreamer usou ‘aprendizado por reforço‘ para descobrir novas ações, mantendo as tentativas bem-sucedidas e ignorando as mal-sucedidas. A equipe forneceu pequenas recompensas para cada passo, como fabricar uma tábua e minerar ferro. Eles então reiniciavam o jogo a cada trinta minutos para evitar a memorização de padrões.

Diferentemente dos sistemas de IA mais antigos que ‘assistiam’ ao jogo humano para aprender, o Dreamer operava de forma autônoma, e não exigia demonstrações humanas ou orientação passo a passo. A função de criação do “modelo mundial” interno do sistema permitiu que ele previsse os resultados das ações antes de realizá-las.

“O modelo mundial realmente equipa o sistema de IA com a capacidade de imaginar o futuro”, disse Hafner, conforme relatado pelo Tech Xplore. Jeff Clune, um especialista em IA da Universidade da Colúmbia Britânica, chamou a conquista de “um grande avanço para o campo”, relatou o Tech Xplore.

Enquanto os humanos podem localizar um diamante em aproximadamente 20-30 minutos, Dreamer precisou de nove dias para fazer o mesmo. No entanto, os pesquisadores acreditam que este trabalho tem implicações de longo alcance além dos videogames.

“Isso poderia ajudar os robôs a se ensinarem a alcançar metas no mundo real”, acrescentou Hafner, conforme relatado no Tech Xplore.