게임 AI 승률 98% 찍고 마지막 2% 욕심부렸다가 72%로 폭망한 개발자 썰

요약 한 개발자가 턴제 오픈소스 전략 게임 '웨스노스 전투(The Battle for Wesnoth)'의 AI 봇을 직접 제작하면서 겪은 좌절과 극복기를 전했습니다. 처음에는 파이썬 공부 겸 가볍게 시작했던 작업이었지만, 점차 몰입도가 지나치게 높아져 몇 달 동안 폐인처럼 AI 개발에만 매달리게 되었습니다. 결국 기본 AI를 상대로 소형 맵에서 전 종족 대상 98%라는 경이로운 승률을 달성했습니다.\n\n하지만 마지막 남은 2%를 채워 완전한 100% 무패 AI를 만들겠다는 욕심이 화근이었습니다. 뮌헨의 어느 무더운 여름밤, 그는 전략적 기반을 완전히 갈아엎는 대대적인 코드 리팩터링을 감행했습니다. 며칠 밤낮을 새워 수정한 코드를 실행하고 테스트를 돌렸으나 결과는 참담했습니다. AI는 연패를 거듭했고, 승률은 72%로 폭락했습니다. 기존의 72%에서 98%까지 올리는 데만 한 달이 걸렸던 터라, 롤백을 해야 할지 버그를 찾아야 할지 잠도 자지 못한 채 극심한 허탈감에 빠졌습니다. 복잡한 시스템에서 단순한 '승률 수치 하나'만으로는 무엇이 잘못되었는지 원인을 분석할 수 없다는 뼈아픈 교훈을 얻은 채, 마침 게임의 파이썬 AI 지원이 중단되면서 그는 일상으로 복귀했습니다.\n\n수년 뒤 바닷가 근처로 이사한 그는 게임에 루아(Lua) 기반 AI 환경이 도입된 것을 보고 다시 개발 욕구에 불이 붙었습니다. 뼈대만 갖춘 AI로 30% 승률을 기록했지만 과거의 실패가 떠올랐고, 바닷바람을 맞으며 노트를 들고 고민한 끝에 데이터 시각화 워크플로를 구상했습니다. 변경점을 줄 때마다 수백 번의 경기 리플레이를 일일이 볼 수도 없고, 단일 승률만으로는 맥락을 알 수 없기에, 유닛 수·비용·골드·점령 마을 수·수입 등 5가지 핵심 지표를 유니코드 스파크라인으로 시각화하고 정규화 압축 거리(NCD) 등의 기법을 접목해 방대한 전투 로그를 기계가 직접 분석하도록 설계하며 해결책을 찾아 나섰습니다.