Badacze z DeepMind chwalą się Dreamerem. Nowa AI nauczyła się... wydobywać diamenty w Minecrafcie

Zdobycie diamentów jest jednym z kamieni milowych rozgrywki w Minecrafcie. Są one niezbędne do wykonania zaawansowanych narzędzi i pancerzy. Aby je wydobywać, gracze muszą przygotować żelazne narzędzie i wykopać głęboki tunel, co jest ryzykowne – można w nim natrafić na strumień lawy. Fora internetowe roją się od poradników dla nowych graczy, pomagających poradzić sobie z tym wyzwaniem. Ci bardziej zaawansowani potrzebują ok. 20-30 minut, by uzyskać pierwszy diament w grze.

Marzyciel szuka diamentów

Ten temat zainteresował redakcję „Nature” nie tylko dlatego, że Minecraft to jedna najpopularniejszych gier komputerowych na świecie – 200 mln osób uruchamia ją przynajmniej raz w miesiącu. Inżynierowie z DeepMind należącego do Google’a pochwalili się właśnie na łamach tego pisma stworzeniem Dreamera (Marzyciela) – systemu AI, który samodzielnie nauczył się wydobywać diamenty w Minecrafcie.

Jak zdobyć diament w Minecraft  💎

1. Przygotuj żelazne narzędzie
2. Wykop głęboki tunel
3. Ryzyko: uważaj na możliwe strumienie lawy
4. Zaawansowany gracz potrzebuje ok. 30 minut na zdobycie pierwszego diamentu
5. Alternatywa: AI będzie mogła zrobić to za Ciebie. Przeczytaj tekst i dowiedz się więcej

Dreamer nie otrzymał żadnych instrukcji – mógł w otwartym świecie gry robić, co chciał, wykonując także bezsensowne ruchy, jednak był „nagradzany” za każdym razem, gdy przypadkiem zrealizował jedno z 12 działań, które przybliżały go do zdobycia diamentów. W informatyce metodę tę określa się jako uczenie przez wzmacnianie. Co 30 minut badacze resetowali grę, dzięki czemu zmieniał się cały stworzony w niej, bogaty świat – pełen różnych obiektów, wyzwań i przeszkód. Dreamer musiał więc za każdym razem odnajdywać się w nowym środowisku. Po 9 dniach szkolenia osiągnął poziom zaawansowanych graczy.

Dreamer może dużo więcej 

Już wcześniej inny zespół z Uniwersytetu Kolumbii Brytyjskiej w Vancouverze wyszkolił w tym samym zadaniu sztuczną inteligencję, ale ich system play2 uczył się inną metodą – analizując zachowania ludzkich graczy. Powstanie Dreamera jest dużym osiągnięciem, ponieważ przetestowany w bezpiecznym środowisku gry komputerowej algorytm można będzie wykorzystywać także w innych warunkach – np. implementując go w robotach, które poruszać się będą w prawdziwym świecie.

W publikacji podsumowującej dokonania Dreamera badacze z DeepMind przekonują, że ich system zasługuje na swoją nazwę, ponieważ dzięki treningowi wykształcił bogaty, wewnętrzny model świata gry i potrafi wyobrażać sobie konsekwencje swoich działań. Jego umiejętności uczenia się przetestowano już na 150 innych zadaniach.