Deweloperzy z Sony AI, Sony Interactive Entertainment i studia gier Polyphony Digital zaprezentowali Gran Turismo Sophy, sztuczną inteligencję do wyścigów samochodowych, która może prześcignąć najlepszych graczy w świecie symulacji wyścigów Gran Turismo. Naukowcy mają nadzieję, że ich rozwój pomoże poprawić zachowanie sztucznej inteligencji w grach komputerowych.

Eksperci z trzech firm połączyli swoją wiedzę z różnych dziedzin, aby stworzyć inteligentnego agenta wyszkolonego przy użyciu platformy uczenia głębokiego wzmacniania. Grupy brały pod uwagę podstawowe metody pracy z AI oraz projektowanie hiperrealistycznych symulatorów wyścigów.

W rezultacie GT Sophy opanowała następujące umiejętności:

prowadzenie samochodu wyścigowego z głębokim zrozumieniem dynamiki pojazdu i konstrukcji toru wyścigowego, co pozwala na wykonywanie precyzyjnych manewrów i pokonywanie trudnych odcinków;

system jest w stanie szybko podejmować decyzje i budować taktykę wyścigu. GT Sophy okazał się dobry w wykrywaniu najlepszego momentu na zmianę formy, wyprzedzanie i blokowanie przeciwników;

sztuczna inteligencja szanuje niewypowiedzianą etykietę wyścigową: uwzględnia trajektorię przeciwników, unika kolizji i nie blokuje graczy bez szansy na wydostanie się.

Twórcy wykorzystali do treningu uczenie przez wzmocnienie (RL) – agent AI wchodził w interakcję ze światem gry i otrzymywał nagrodę lub karę za swoje działania, co pomogło mu zbudować strategię na przyszłe wyścigi. Naukowcy wykorzystali również system Quantile-Regression Soft Actor-Critic (QR-SAC). Agentowi przekazano zrozumiały dla niego regulamin wyścigu, który wyraźnie regulował normy jego zachowania na torze.

GT Sophy została już przetestowana w rzeczywistych warunkach podczas wyścigu Race Together 2021, który odbył się latem i jesienią 2021 roku. Sztuczna inteligencja rywalizowała z najlepszymi kierowcami Gran Turismo i pokonała ich zarówno w jeździe na czas, jak i w formacie wyścigowym z certyfikatem FIA. „Zapomniałem nawet, że gram przeciwko sztucznej inteligencji. To było bardzo śmieszne. W przyszłości chciałbym częściej ścigać się z agentem AI” – powiedział mistrz FIA Gran Turismo Championships 2020, Takuma Miyazono.

Naukowcy planują nadal badać możliwości sztucznej inteligencji i sposoby ich integracji z projektami gier. Twórcy uważają też, że GT Sophy może przydać się do ulepszania autopilotów w prawdziwych pojazdach.

bbabo.Net