[게임제보] [개발자 노트] 캐릭터 밸런스 조정 과정에서의 오류 안내

안녕하세요. DEV 알라논입니다.

 

오늘은 플레이어 여러분께 죄송한 말씀을 전하고자 무거운 마음으로 개발자 노트를 작성합니다.

오늘 테스트 서버 추가 패치를 통해 적용된 캐릭터 밸런스 조정과 관련하여 데이터 분석 과정의 오류가 확인되었습니다.

해당 오류 상황에 대해 안내와 함께 정식 서버에 수정 예정인 사항도 말씀드리고자 합니다.

 

결론부터 말씀드리면, 오늘 테스트 서버에 적용된 윕 아리샤의 상향 조정 내역은 정식 서버 업데이트에서 제외될 예정입니다.

혼란을 드려 대단히 죄송하며, 이러한 결정이 내려지게 된 경위와 원인을 상세히 설명해 드리겠습니다.

 

[테스트서버 밸런스 조정 배경]

개발팀에서는 최근 내부 대미지 로그 데이터를 분석한 결과, 윕을 사용하는 아리샤 캐릭터의 DPS 분포가 전 캐릭터 중 최하위권에 머물러 있는 것을 확인했습니다.

이에 따라 오늘 테스트 서버 업데이트를 통해 아래 스킬들의 대미지를 25% 상향 조정했습니다.

•  - 린포르찬도 피네 (마나 비스 상태, 브레스리스 러시 20단계)
•  - 스트린젠도 슬랩 (마나 비스 상태)
•  - 스트린젠도 슬랩 (세 번째, 네 번째 타격)
•  - 마나 아그레망 (가드 성공 후)
•  - 액티브: 배턴 포 왈츠

 

[데이터 집계 오류 확인]

하지만 테스트 서버 오픈 직후 재검증을 진행하던 중, 밸런스 조정의 근거가 되었던 대미지 로그 집계 시스템에 오류가 있었음을 뒤늦게 확인했습니다.

문제의 원인은 지난 10월 23일 정식 서버에 업데이트되었던 변경점과 관련이 있었습니다.

당시 윕 아리샤의 '마나 비스 활성화 후 원거리 공격 시, 추가 타격이 발생하지 않던 문제'를 수정했습니다.

이 패치로 인해 실제 게임 내 전투에서는 대미지가 정상적으로 적용되고 있었으나, 대미지 로그 집계 과정에서는 '마나 비스 활성화 후 발생하는 모든 추가 타격의 대미지 데이터'가 누락되는 현상이 발생했습니다.

즉, 실제로는 정상적인 대미지를 주고 있었음에도, 로그 데이터로 확인했을 때에는 윕 아리샤의 DPS가 최하위권인 것으로 오인하게 된 것입니다.

 

[정식 서버 적용방향 수정]

누락된 데이터를 복구하여 다시 분석한 결과, 정상적인 데이터 집계 상황에서의 윕 아리샤의 DPS는 평균적인 수준을 유지하고 있음을 확인했습니다.

잘못된 데이터에 기반하여 밸런스를 조정할 경우 오히려 과도한 성능 상향으로 이어질 수 있기 때문에, 부득이 이번 테스트 서버에 적용된 윕 아리샤의 밸런스 상향 조정 내용은 정식 서버 업데이트 시 반영하지 않기로 결정했습니다.

 

[재발 방지 대책]

개발팀에서 밸런스 보조지표로 활용하고 있는 대미지 로그 집계 시스템은 최근 5주간의 데이터를 종합하여 분석하고 있습니다.

이는 주차별로 발생할 수 있는 데이터 편차(노이즈)를 줄이고 보다 정확한 경향성을 확인하기 위함입니다.

하지만 이번 경우에는 5주간의 평균 데이터를 보다 보니, 특정 시점(10월 23일)부터 발생한 대미지 데이터 급락 현상이 기존 데이터에 희석되어 즉각적인 이상 징후로 감지되지 못했습니다.

또한 10월 23일의 아리샤의 변경점이 유틸리티 개선이나 밸런스 조정 보다는 버그 수정으로 분류하여 DPS 변화를 보다 면밀히 살피지 못했던 부분 역시 저희의 실책이었습니다.

 

앞으로는 이런 문제를 방지하기 위해서 기존 5주간의 데이터 분석 프로세스에 더해 '직전 1주'와 '현재 1주'의 데이터를 교차 비교하는 모니터링 절차를 추가하겠습니다.

이를 통해 의도치 않게 대미지 로그 수치가 급변하는 상황을 즉각적으로 감지하고, 데이터의 신뢰성을 확보하겠습니다.

또한 이번 적용 과정에서 경험과 수치에서의 괴리가 발생했을 때, 실제 플레이 경험보다는 수치에 대해 더 큰 믿음을 가지고 판단했던 부분 역시 깊이 반성하겠습니다.

앞으로는 대미지 로그 집계 시스템이 초기 의도처럼 충실한 보조지표로서 활용될 수 있도록 경험 기반의 분석 비중을 더 높이고 실제 플레이 감각과의 교차 검증을 강화하겠습니다.

 

 

데이터 분석 미흡으로 인해 잘못된 밸런스 패치가 안내되고, 이로 인해 플레이어 여러분께 큰 혼란을 드린 점 다시 한번 고개 숙여 사과드립니다.

앞으로는 더욱 정밀한 검증을 통해 정확한 업데이트를 제공할 수 있도록 노력하겠습니다.

 

감사합니다.

https://heroes.nexon.com/common/postview?b=20&n=423