AlphaStar (소프트웨어)

AlphaStar (software)

알파스타는 비디오 게임 스타크래프트 II를 플레이하는 딥마인드의 컴퓨터 프로그램이다.그것은 2019년 1월에 일반에 이름으로 공개되었다.인공지능의 중요한 이정표로서 알파스타는 2019년 8월에 그랜드마스터의 지위를 획득했습니다.

배경

인간을 위해 만들어진 게임은 인공지능 발전의 벤치마크로 외적 타당성을 지닌 것으로 평가된다.IBM의 체스 게임인 Deep Blue(1997년)와 DeepMind의 AlphaGo(2016년)는 주요 이정표로 간주되었습니다. 일부는 StarCraft의 "실시간 플레이, 부분적인 관찰 가능성, 단일 지배적 전략이 없고 특히 빠른 전진 모델을 구축하기 어렵게 만드는 복잡한 규칙, 특히 크고 다양한 AC" 때문에 StarCraft도 중요한 이정표가 될 것이라고 주장합니다.공간을 [1]확보합니다."비록 어렵지만, 스타크래프트는 "규칙이 알려져 있고 세계는 단지 몇 가지 종류의 [2]물체들로 분리되어 있기 때문에" 현재의 기술로는 여전히 다루기 쉬울 수 있다.

스타크래프트 II는 블리자드 [3][4]엔터테인먼트의 인기 있는 온라인 실시간 전략 게임이다.

역사

DeepMind Technologies는 2010년 영국에서 설립되었습니다.2011년 초에 설립자 Demis Hassabis는 StarCraft를 [5]Go와 같은 게임 이후에 "다음 단계 상승"이라고 불렀다.DeepMind는 다양한 Atari 2600 게임에서 초인적인 능력을 가진 자가 학습 봇을 시연하여 2014년에 Google 자회사가 되었습니다.2015년 2월, 컴퓨터 과학자 재커리 메이슨은 딥마인드의 연구가 "5년 또는 10년 후에 스타크래프트에 도달할 것"[6]이라고 예측했다.2016년 3월 알파고가 바둑 세계 챔피언 이세돌에게 승리한 뒤 하사비스는 바둑과 달리 많은 '보드'가 [7][8]보이지 않는 불완전한 정보를 가진 전략 게임이라며 스타크래프트용 AI 구축을 공개적으로 검토했다.2016년 11월 BlizzCon에서 정식 [9]협업이 발표되었으며, 2017년 1분기에는 봇을 위한 개방형 개발 환경을 출시할 계획입니다.

2017년까지 DeepMind는 StarCraft 데이터를 소프트웨어에 입력하는 실험을 하고 있었습니다.2017년 8월 딥마인드와 블리자드는 봇 개발을 지원하는 개발 툴과 65,000개의 과거 게임 데이터를 공개했다.당시 컴퓨터 과학자이자 스타크래프트 토너먼트 매니저인 데이비드 처칠은 로봇이 인간을 이기려면 5년이 걸릴 것이라고 추측했지만 알파고가 예상을 뛰어넘었다는 경고를 했다.와이어드에서 기술 저널리스트인 Tom Simonite는 "아무도 로봇이 곧 우승할 것이라고 예상하지 않습니다.하지만 그렇게 되면 DeepMind가 [10]바둑을 정복한 것보다 훨씬 더 큰 성과가 될 것입니다.

2018년 12월 19일 DeepMind의 봇이 "최고의 프로 선수"인 Grzegorz "MaNa" Komincz를 5-0으로 물리쳤다.딥마인드는 2019년 1월 24일 알파스타라는 이름의 봇을 발표했다.Ars Technica와 다른 회사의 한 기자는 알파스타가 여전히 부당한 이점을 가지고 있다고 주장했다. "알파스타는 API를 사용하여 정확하게 클릭할 수 있는 능력을 가지고 있는 반면, 인간 플레이어는 컴퓨터 마우스의 기계적 한계로 인해 제약을 받는다."알파스타는 또한 게임 내 카메라에 의해 제한되기 보다는 글로벌한 시야를 가졌다.게다가 AlphaStar는 5초 동안의 액션 횟수에 제한이 있었지만, 중요한 순간에 초인적인 액티비티를 시작하기 위해 액션 쿼터를 창 전체에 걸쳐 고르지 않게 할당할 수 있었습니다.DeepMind는 보다 현실적인 제약 속에서 빠르게 알파스타를 재훈련시켰지만 Komincz와의 [11]재대결에서 패했다.2019년 7월부터 알파스타의 새로운 제한 버전은 공개 1v1 유럽 멀티플레이어 [12]사다리에서 "참가"한 플레이어들과 익명으로 경쟁했다.2019년 8월 말까지 알파스타는 인간 선수 [13]중 상위 0.2%에 속하며 그랜드마스터 레벨에 도달했다.

알고리즘

AlphaZero와 달리 AlphaStar는 처음에 인간 대 인간 게임의 데이터베이스에서 최고의 플레이어의 움직임을 모방하는 방법을 배웁니다.이 단계는 DeepMind의 Dave Silver가 말하는 "탐구 문제"를 해결하기 위해 필요합니다.즉, 새로운 전략을 발견하는 것은 "건초더미에서 바늘 찾기"와 같습니다.그런 다음 에이전트가 서로 플레이하고 강화 학습을 전개합니다.이러한 주요 에이전트는 또한 주 [14][15]에이전트의 약점을 드러내는 것을 목적으로 하는 차선의 "익플로이터 에이전트"와 경쟁함으로써 학습합니다.

반응

2018년 12월 5-0으로 패한 뒤 코민츠는 "AI가 그렇게 좋을 줄은 몰랐다"[16]고 말했다.

스튜어트 러셀은 알파스타의 2018년 우승에 대해 "상당히 많은 문제별 노력이 필요했다"며 "스타크래프트에 대한 범용적인 방법은 아직 준비가 되지 않았다"[2]고 평가했다.

Wired UK의 기사는 2019년 7월 경기에 채택된 AlphaStar의 새로운 제약이 이번에는 "[17]공정"하다고 판단했다.스타크래프트 프로 라자 "레이저블레이더" 세카는 알파스타가 "인상적"이라고 말했지만, 공군 부대로만 구성된 비정통적인 군대 구성에 한 게임 만에 굴복하는 기이한 점이 있었다고 말했다.영국의 최고 선수인 조슈아 "리스카이" 헤이워드는 알파스타가 "가장 효율적이고 전략적인 [14]결정을 종종 내리지 못했다"며 실망감을 표시했다.프로 디에고 "켈라주르" 슈위머는 알파스타의 플레이를 "상상할 수 없을 정도로 특이하다; 그것은 정말로 프로 선수들이 스타크래프트의 다양한 가능성 중 얼마나 많은 것을 탐구했는지를 의심하게 만든다"[13]고 말했다.알파스타의 상대는 종종 그들이 봇 [18]게임을 하고 있다는 것을 깨닫지 못했다.

가디언지의 이안 샘플은 알파스타를 인공지능 [19]분야의 '획득'이라고 평가했다.처칠은 이전에 스타크래프트의 한두 가지 요소를 마스터하는 봇을 본 적이 있지만 게임 전체를 [3]다룰 수 있는 것은 알파스타가 처음이라고 말했다.게리 마커스는 딥러닝에 대한 계속적인 회의론을 피력하며 "지금까지 이 분야는 이런 기술을 실험실이나 게임 환경에서 현실 세계로 도입하는 데 어려움을 겪어왔으며, 저는 이 결과가 바로 그런 방향으로 발전한다고 생각하지 않습니다."[14]라고 말했다.AI 연구원 존 닷지는 알파스타에 놀라면서 "앞으로 몇 년 동안은 그런 "초인적인" 퍼포먼스를 기대하지 않았다"고 말했다. 반면 처칠은 "스타크래프트는 '해결된' 수준에 전혀 미치지 못했고, 알파스타는 아직 세계 챔피언 수준에 근접하지도 못했다"[4]고 말했다.

레거시

DeepMind는 AlphaStar의 통찰력이 로봇, 자가운전 자동차, 가상 보조기 등 "불완전하게 관찰된 정보"로 작동해야 하는 사람들에게 도움이 될 수 있다고 주장한다.Silver는 AlphaStar의 [14]대폭적인 개선을 시도하기 보다는 "이 시점에서 휴식을 취할 수 있을 것"이라고 지적했습니다.Silver는 "AlphaStar는 전문적으로 승인된 조건 하에서 완전 무제한 게임 상에서 프로페셔널하게 플레이되는 모든 e스포츠에서 최고 수준의 인간 성능에 도달한 최초의 AI 시스템이 되었습니다.컴퓨터가 바둑, 체스, 포커를 해킹한 이후 기본적으로 커뮤니티의 합의에 따라 스타크래프트 게임이 인공지능의 [19]다음 큰 도전으로 부상했습니다.

컴퓨터 과학자인 노엘 샤키는 "군사 분석가들은 확실히 알파스타의 성공적인 실시간 전략을 전장 계획에서 AI의 이점을 보여주는 분명한 사례로 주목하게 될 것"이라고 못마땅하게 주장한다.[19]반면 실버는 "이것이 어떤 종류의 군사적 용도가 있다고 말하는 것은 체스를 위한 인공지능이 군사적 용도로 사용될 수 있다고 말하는 것과 다름없다"[14]고 주장한다.

「 」를 참조해 주세요.

레퍼런스

  1. ^ Arulkumaran, Kai; Antoine, Cully; Togelius, Julian (July 2019). "AlphaStar: An evolutionary computation perspective". Proceedings of the Genetic and Evolutionary Computation Conference Companion: 314–5. arXiv:1902.01724. doi:10.1145/3319619.3321894. S2CID 59604439.
  2. ^ a b Russell, Stuart (8 October 2019). "Chapter 2: Intelligence in Humans and Machines". Human Compatible: Artificial Intelligence and the Problem of Control (Hardcover ed.). Viking. ISBN 978-0-525-55861-3.
  3. ^ a b Daley, Jason (30 October 2019). "A.I. Mastered Backgammon, Chess and Go. Now It Takes On StarCraft II". Smithsonian Magazine. Retrieved 26 February 2020.
  4. ^ a b Garisto, Dan (30 October 2019). "Google AI beats top human players at strategy game StarCraft II". Nature. doi:10.1038/d41586-019-03298-6. PMID 33116320. S2CID 208116679.
  5. ^ Cheng, Jonathan (22 April 2016). "Computers That Crush Humans at Games Might Have Met Their Match: 'StarCraft'". Wall Street Journal. Retrieved 26 February 2020.
  6. ^ Gibbs, Samuel (27 January 2014). "Google buys UK artificial intelligence startup Deepmind for £400m". The Guardian. Retrieved 26 February 2020.
  7. ^ Byford, Sam (10 March 2016). "DeepMind founder Demis Hassabis on how AI will shape the future". The Verge. Retrieved 26 February 2020.
  8. ^ "Google's Artificial Intelligence Project May Start Playing Video Games". Fortune. Retrieved 26 February 2020.
  9. ^ Byford, Sam (4 November 2016). "Google DeepMind's next gaming challenge: can AI beat StarCraft II?". The Verge. Retrieved 26 February 2020.
  10. ^ "Google DeepMind AI Declares Galactic War on StarCraft". Wired. 9 August 2017. Retrieved 26 February 2020.
  11. ^ Lee, Timothy B. (30 January 2019). "An AI crushed two human pros at StarCraft—but it wasn't a fair fight". Ars Technica. Retrieved 26 February 2020.
  12. ^ Amadeo, Ron (11 July 2019). "DeepMind AI is secretly lurking on the public StarCraft II 1v1 ladder". Ars Technica. Retrieved 26 February 2020.
  13. ^ a b Statt, Nick (30 October 2019). "DeepMind's StarCraft 2 AI is now better than 99.8 percent of all human players". The Verge. Retrieved 26 February 2020.
  14. ^ a b c d e Kelion, Leo (30 October 2019). "DeepMind claims landmark moment for AI in esports". BBC News. Retrieved 26 February 2020.
  15. ^ Vinyals, Oriol; Babuschkin, Igor; Czarnecki, Wojciech M.; et al. (30 October 2019). "Grandmaster level in StarCraft II using multi-agent reinforcement learning". Nature. 575 (7782): 350–354. Bibcode:2019Natur.575..350V. doi:10.1038/s41586-019-1724-z. PMID 31666705. S2CID 204972004.
  16. ^ Heaven, Douglas (21 August 2019). "Mind meld: Artificial intelligence is improving the way humans think". New Scientist. Retrieved 26 February 2020.
  17. ^ Lee, Alex (30 October 2019). "DeepMind has finally thrashed humans at StarCraft for real". Wired UK. Retrieved 26 February 2020.
  18. ^ "DeepMind claims breakthrough as AI masters StarCraft II game". Financial Times. 2019. Retrieved 26 February 2020.
  19. ^ a b c Sample, Ian (30 October 2019). "AI becomes grandmaster in 'fiendishly complex' StarCraft II". The Guardian. Retrieved 26 February 2020.

외부 링크