DOI QR코드

DOI QR Code

Developing artificial football agents based upon multi-agent techniques in the AI world cup

AI World Cup 환경을 이용한 멀티 에이전트 기반 지능형 가상 축구 에이전트 구현

  • Lee, Eunhoo (Department of Human-Centered AI, Sangmyung University) ;
  • Seong, Hyeon-ah (Department of AI and Informatics, Sangmyung University) ;
  • Jung, Minji (Department of Human-Centered AI, Sangmyung University) ;
  • Lee, Hye-in (Department of AI and Informatics, Sangmyung University) ;
  • Joung, Jinoo (Department of AI and Informatics, Sangmyung University) ;
  • Lee, Eui Chul (Department of AI and Informatics, Sangmyung University) ;
  • Lee, Jee Hang (Department of AI and Informatics, Sangmyung University)
  • 이은후 (상명대학교 휴먼지능정보공학전공) ;
  • 성현아 (상명대학교 지능정보공학과) ;
  • 정민지 (상명대학교 휴먼지능정보공학전공) ;
  • 이혜인 (상명대학교 지능정보공학과) ;
  • 정진우 (상명대학교 지능정보공학과) ;
  • 이의철 (상명대학교 지능정보공학과) ;
  • 이지항 (상명대학교 지능정보공학과)
  • Published : 2021.11.04

Abstract

AI World Cup 환경은 다수 가상 에이전트들이 팀을 이뤄서 서로 상호작용하며 대전이 가능한 가상 축구 환경이다. 본 논문에서는 AI World Cup 환경에서 멀티 에이전트기반 학습/추론 기술을 사용하여 다양한 전략과 전술을 구사하는 가상 축구 에이전트 구현과 시뮬레이션 결과를 소개한다. 먼저, 역할을 바탕으로 협동하여 상대방과 대전할 수 있는 논리 기반 추론형 멀티 에이전트 기술이 적용된 Dynamic planning 축구 에이전트 9 세트를 구현하였다. 이후, 강화학습 에이전트 기반, 단일 에이전트를 조합한 Independent Q-Learning 방식의 학습형 축구 에이전트를 구현한 후, 이를 멀티 에이전트 강화학습으로 확장하여 역할 기반 전략 학습이 가능한 가상 축구 에이전트를 구현하고 시뮬레이션 하였다. 구현된 가상 축구 에이전트들 간 대전을 통해 승률을 확인하고, 전략의 우수성을 분석하였다. 시뮬레이션 예제는 다음에서 확인할 수 있다 (https://github.com/I-hate-Soccer/Simulation).

Keywords

Acknowledgement

이 성과는 정부(과학기술정보통신부)의 재원으로 한국연구재단의 지원을 받아 수행된 연구임 (No. 2020R1G1A1102683). 본 연구는 삼성미래기술육성센터의 지원을 받아 수행하였음 (No. SRFC-TC1603-52). 본 결과물은 교육부와 한국연구재단의 재원으로 지원을 받아 수행된 사회맞춤형 산학협력 선도대학(LINC+) 육성사업의 연구결과임.