Vývojári zo Sony AI, Sony Interactive Entertainment a herného štúdia Polyphony Digital odhalili Gran Turismo Sophy, umelú inteligenciu pre automobilové preteky, ktorá dokáže predbehnúť najlepších hráčov vo svete závodných simulácií Gran Turismo. Vedci dúfajú, že ich vývoj pomôže zlepšiť správanie umelej inteligencie v počítačových hrách.
Odborníci z troch spoločností spojili svoje znalosti z rôznych oblastí a vytvorili inteligentného agenta vyškoleného pomocou vzdelávacej platformy pre hlboké posilnenie. Skupiny brali do úvahy základné metódy práce s AI a dizajn hyperrealistických pretekárskych simulátorov.
Výsledkom je, že GT Sophy zvládla nasledujúce zručnosti:
riadenie pretekárskeho auta s hlbokým pochopením dynamiky vozidla a dizajnu pretekárskej dráhy, čo vám umožňuje robiť presné manévre a prekonávať náročné úseky;
systém je schopný rýchlo robiť rozhodnutia a budovať taktiku pretekov. GT Sophy preukázalo, že je dobré nájsť najlepší moment na preformovanie, predbehnutie a blokovanie súperov;
umelá inteligencia rešpektuje nevyslovenú pretekársku etiketu: berie do úvahy trajektóriu protivníkov, vyhýba sa kolíziám a neblokuje hráčov bez šance dostať sa von.
Vývojári na tréning použili učenie posily (RL) – AI agent interagoval s herným svetom a za svoje činy dostával odmenu alebo trest, čo mu pomohlo vybudovať stratégiu pre budúce preteky. Výskumníci tiež použili systém Quantile-Regression Soft Actor-Critic (QR-SAC). Agentovi boli poskytnuté pravidlá pretekov, ktorým rozumel, ktoré jasne upravovali normy jeho správania na trati.
GT Sophy už bola testovaná v reálnych podmienkach počas súťaže Race Together 2021 Challenge, ktorá sa konala v lete a na jeseň 2021. Umelá inteligencia súťažila s najlepšími jazdcami Gran Turismo a porazila ich v časovkách aj vo formáte závodov s certifikáciou FIA. „Dokonca som zabudol, že hrám proti umelej inteligencii. Bolo to veľmi zábavné. V budúcnosti by som chcel viac pretekať s agentom AI,“ povedal šampión FIA Gran Turismo Championships 2020 Takuma Miyazono.
Výskumníci plánujú pokračovať v skúmaní možností AI a ako ich integrovať do herných projektov. Vývojári tiež veria, že GT Sophy môže byť užitočná na zlepšenie autopilotov v skutočných vozidlách.
bbabo.Net