Los desarrolladores de Sony AI, Sony Interactive Entertainment y el estudio de juegos Polyphony Digital han presentado Gran Turismo Sophy, una inteligencia artificial para carreras de autos que puede superar a los mejores jugadores en el mundo de simulación de carreras de Gran Turismo. Los investigadores esperan que su desarrollo ayude a mejorar el comportamiento de la inteligencia artificial en los juegos de ordenador.
Expertos de tres empresas combinaron sus conocimientos de diferentes campos para crear un agente inteligente capacitado mediante una plataforma de aprendizaje de refuerzo profundo. Los grupos tuvieron en cuenta los métodos fundamentales de trabajo con IA y el diseño de simuladores de carreras hiperrealistas.
Como resultado, GT Sophy ha dominado las siguientes habilidades:
conducir un automóvil de carreras con un profundo conocimiento de la dinámica del vehículo y el diseño de la pista de carreras, lo que le permite realizar maniobras precisas y superar secciones difíciles;
el sistema puede tomar decisiones rápidamente y crear tácticas de carrera. El GT Sophy ha demostrado ser bueno para detectar el mejor momento para volver a formar, adelantar y bloquear a los oponentes;
La inteligencia artificial respeta la etiqueta tácita de las carreras: tiene en cuenta la trayectoria de los oponentes, evita colisiones y no bloquea a los jugadores sin posibilidad de salir.
Los desarrolladores utilizaron el aprendizaje por refuerzo (RL) para el entrenamiento: un agente de IA interactuaba con el mundo del juego y recibía una recompensa o una penalización por sus acciones, lo que lo ayudó a construir una estrategia para carreras futuras. Los investigadores también utilizaron el sistema Quantile-Regression Soft Actor-Critic (QR-SAC). Al agente se le proporcionó el reglamento de la carrera que entendía, que regulaba claramente las normas de su comportamiento en la pista.
GT Sophy ya se probó en condiciones reales durante el Desafío Race Together 2021, que tuvo lugar en el verano y el otoño de 2021. AI compitió contra los mejores pilotos de Gran Turismo y los venció tanto en contrarreloj como en formato de carrera certificado por la FIA. “Incluso olvidé que estaba jugando contra la inteligencia artificial. Fue muy gracioso. En el futuro, me gustaría competir más con un agente de IA”, dijo Takuma Miyazono, campeón de FIA Gran Turismo Championships 2020.
Los investigadores planean continuar explorando las posibilidades de la IA y cómo integrarlas en proyectos de juegos. Los desarrolladores también creen que GT Sophy puede ser útil para mejorar los pilotos automáticos en vehículos reales.
bbabo.Net