플레이오프 결과 예측: 통계와 분석분석 | By Ben “CaptainPlanet” Trautman and Jonathan “Reinforce” Larsson, Blizzard Entertainment
플레이-인 경기를 통해 여러분은 무엇을 배우고 느끼셨나요? 오버워치 리그의 많은 내용 중 특히 경기 결과에 대한 예측은 매우 어려운 요소입니다. 분석가 Reinforce의 예측은 통계학자 CaptainPlanet의 SOLOQ예측 시스템을 상대로 2:1의 결과로 더 우세했습니다. 하지만 CaptainPlanet은, 더 강화된 SOLOQ 시스템을 통해 다시한번 플레이오프 결과예측을 가지고 경쟁합니다.
CaptainPlanet: 통계학자의 예측네, 그에게 졌었습니다. 전 많은 교훈을 얻었고 새로운 예측을 위해 다시한번 준비했습니다.
본인은 플레이-인 예측에서 승리 예측 프로그램인 SOLOQ와 OLE(SOLOQ의 기반)의 결정적인 약점을 찾아냈습니다. 그것은 바로 각 시즌(플레이-인)의 첫 매치업의 예측이 힘들다는 것입니다. 물론 이전 경기와 스텟을 통해 예측에 필요한 훌륭한 자료가 존재하지만, 각 팀의 강점과 약점의 특성을 고려하지 않은채 이용할 시 무용지물이 될수 있다는 것입니다.
본인의 예측 결과를 다시 살펴보면 이 모델이 실패한 이유를 알 수 있습니다. 스테이지4 자료에 너무 의존한 나머지 광저우 차지가 청두 헌터즈, 서울 다이너스티 그리고 런던을 이긴 필라델피아 퓨전을 우세하게 이길 것으로 예측했었습니다. 물론 차지는 초반에 매우 좋은 모습을 보여준 것이 사실이며, 퓨전도 동일하게 초반에 좋지 못한 모습을 보여줌으로 인해 본 예측 프로그램에 큰 영향을 끼쳤습니다.
그러므로, 더 높은 예측결과를 얻기 위해 많은 수정사항을 반영한 새로운 SOLOQ 예측 시스템을 구현했습니다. 이 시스템에는 eXperts의 SCRIMBUX의 신뢰할 수 있는 자료를 포함하여 SOLOQ의 기반 자료들을 교체했습니다.
작동 순서는 다음과 같습니다. 우선 전 플레이오프에 진출한 각 팀의 스탭에게 설문(본인의 팀을 제외한)을 통해 각각의 파워랭킹 자료를 수집했습니다. 이 순위를 합한 뒤 플레이 오프 ELOS의 순위와 비교했습니다.
TEAM | ELO ENTERING PLAYOFFS | RANK | SCRIMBUX RANK |
San Francisco Shock | 1,155.3 | 1 | 1 |
Atlanta Reign | 1,105.6 | 2 | 7 |
Seoul Dynasty | 1,086.3 | 3 | 6 |
Hangzhou Spark | 1,075.6 | 4 | 8 |
Vancouver Titans | 1,029.9 | 5 | 2 |
Los Angeles Gladiators | 1,015.4 | 6 | 5 |
New York Excelsior | 980.9 | 7 | 4 |
London Spitfire | 960.7 | 8 | 3 |
(*런던 스핏파이어와 서울 다이너스티의 ELO 점수는 포스트 플레이-인 자료이므로 다른 팀의 평균에 비해 30% 정도 낮습니다.)
SCRIMBUX에 기반한 팀순위 수정을 위해 각 팀의 ELO 스코어의 25%를 공유 스코어로 지정했습니다. 이 점수는 각 팀의 SCRIMBUX 순위와 ELO 스코어의 차이만큼 각 팀에 재분배되었습니다. 이 공유 스코어를 늘려야 보다 평준화가 가능하고 계산에 더 유용합니다. 그래서 ELO 점수와 SCRIMBUX 순위간의 차이 점수에 5배를 곱한 점수를 배분했습니다. 이를 통해 0% ~ 35%의 점수가 각 팀에 재분배 되었습니다.
※ SOLOQ 승리 예측 시스템 이란? (이해를 위한 글쓴이의 추가)오버워치 리그 분석팀이 만든 승리 예측 프로그램 입니다. 각 선수들이 플레이한 각각의 영웅의 능력을 평준화된 수치로 변환하여 각 팀간의 가상 대결을 통해 승리를 예측합니다. SOLOQ 시스템은 몬테카를로 기반 알고리즘을 기반으로 몇만번의 가상 대결을 통해 오차를 포함한 가장 높은 확률을 예측해줍니다.
자세한 사항은 여기를 참고해주세요. ELO 스코어를 통한 SCRIMBUX 스코어의 보정을 통해 우리는 각 팀의 ELO 값을 각 팀에 대해 평준화가 가능했고 ELO 등급을 어느정도 유지함과 동시에 보다 더 정확한 계산을 위해 ELO 스코어를 바람직하게 재분배 할 수 있었습니다. 아래의 표는 플레이오프 결과를 예측하기 위해 SOLOQ 예측 시스템에 투입된 보정된 SCRIMBUX 스코어 입니다.
TEAM | SCRIMBUX CORRECTION ELO |
San Francisco Shock | 1,129.3 |
Vancouver Titans | 1,074.7 |
London Spitfire | 1,049.0 |
Seoul Dynasty | 1,038.1 |
New York Excelsior | 1,037.9 |
Los Angeles Gladiators | 1,037.5 |
Atlanta Reign | 1,026.3 |
Hangzhou Spark | 1,016.9 |
그리고 이 보정된 SCRIMBUX 점수를 이용하여 수정된 SOLOQ 시스템에 투입된
제 최종 플레이 오프 예측은 아래와 같습니다.
SOLOQ 시스템을 이용한 예측 결과를 입력하는 과정에 있어서 전 플레이오프 시즌이 상당히 긴 시즌임을 느꼈습니다. 그럼에도 불구하고 예측 수행을 훌륭하게 잘 소화해 냈으며, 이 예측 결과엔 주목해야할 몇가지가 있습니다. 플레이 오프가 끝날 때 까지 14번의 경기가 수행 될 것이며, 최종 승리자가 되는데 까지 수많은 분기점이 있습니다. 실제로, 예측 시스템에 10만번의 예측을 수행하게 한 결과 15,763의 독립된 경우의 수가 있었습니다.
위 결과는 그 10만번의 예측중 가장 높은 빈도로 나타난 예측 시뮬레이션 결과입니다. 이 예측 결과는 10만번의 예측 연산 중 37번의 경우에서만 발생했습니다. 분명한것은 이제 그 아무것도 알 수 없는 무궁무진한 야생의 플레이오프 세계로 나아간다는 것입니다.
Reinforce: 분석가의 예측 플레이-인 토너먼트와 새로운 영웅 시그마는 플레이오프에 진입하기전 매우 흥미로운 경험이였습니다. 서울 다이너스티는 광저우 차지의 Nero 선수의 파라를 성공적으로 막음으로써 광저우 차지의 기적의 순간들을 무너뜨렸으며 최고의 팀들이 모이는 플레이오프에 진입할 수 있는 기회를 획득했습니다. 이제 그들은 밴쿠버 타이탄즈를 상대로 대결하게 되었습니다.
한편 런던 스핏파이어는 Profit 선수의 맥크리, Birdring 선수의 맥크리 그리고 버드링 선수의 맥크리, 프로핏 선수의 메이... 등 다양한 조합을 실험했습니다. 리퍼와 둠피스트가 주도하는 메타 하에서 그들은 방황하는 것인지 새로운 전략을 수립한 것인지 해석해야 했습니다. 전 그들의 의사결정을 통해 확실히 이해한 다음에 결정하기로 하였습니다. 아마 SCRIMBUCK가 그다지 큰 가치가 있지는 않을 것입니다.
플레이-인 매치를 관전한 뒤 전 리퍼와 둠피스트가 모든것의 시작이라고 확신했습니다. 여기에 맵이나 출전 로스터에 따라 파라, 맥크리, 메이를 섞어 플레이하여 상대의 조합을 카운터 칠 수 있도록 플레이 할 것임을 생각할 수 있었습니다. 이 전제를 바탕으로 각 팀에 소속된 선수들이 메타를 주도하는 영웅에 대한 이해도와 능력치 그리고 적응력과 고착화된 전술적 '방법론' 보다 즉흥적이고 직관적인 의사결정 능력에 제 예측 중점을 두었습니다.
이러한 것을 바탕으로
제 예측 결과는 아래와 같습니다.
제가 우세한 팀으로 평가했던 항저우 스파크는 둠피스트 플레이에 대한 의문을 남김으로써 원래보다 순위를 낮게 평가했습니다. 밴쿠버 타이탄즈와 서울 다이너스티는 파라를 적극적으로 기용할 것으로 예상됩니다.
LA 글래디에이터즈의 Decay 선수와 Surefour 선수는 개인적으로 높은 적응력과 딜러로써의 높은 잠재력을 가지고 있다고 평가하고 있습니다. 스테이지 4 에서 어려움을 겪은 Roar 선수와 Void 선수의 탱커 라인에 보다 덜 의존하는것이 그들에게 좋은 변화점이라고 생각됩니다.
물론 여전히 샌프란시스코 쇼크와 밴쿠버 타이탄즈는 여전이 강력한 팀은건 확실합니다.
sinatraa 선수의 둠피스트 플레이는 최고의 코칭 스탭과 함께 최고의 전술적 플레이를 만들어내고 있으며 그는 앞으로 더 높은 능력을 보여줄 것입니다. 또한 Haksal 선수의 정규 시즌동안 빈틈없는 둠피스트와 파라 플레이는 그들의 팀을 더욱 완벽하게 만드는데 큰 역할을 할 것입니다. 아마 타이탄즈는 대부분의 팀을 이겨낼 것입니다.
그 어떤것도 사실 중요하지 않습니다. 우리는 믿을 수 없는 다양한 상황을 많이 봐왔습니다. 단 몇초의 시간, 단 몇번이 심장이 두근거리는 그 찰나에 많은것이 결정될 것입니다. 정규 시즌을 지나오면서 우리는 타이탄즈와 쇼크가 챔피언임을 알 수 있습니다. 이제 플레이 오프에 진입하였습니다. Overtime(추가 시간)에 돌입하면서 이제 모든것이 점점 선명해지고 있습니다. 우리는 지금 플레이 오프 한가운데에 있습니다. 이제 모든것을 확인할 시간입니다.
윤이브
