최고의 하이퍼 캐주얼 게임이 차트 정상에 오르고 상당한 수익을 창출할 수 있었던 것이 A/B 테스트 덕분이라는 점은 더 이상 비밀이 아니고 모든 사람들이 알고 있죠. 수익화 전략을 최적화하는 것부터 게임의 디자인을 개선하거나 앱스토어 최적화를 진행하는 것까지, A/B 테스트는 게임의 성공 가능성을 높이고 성공을 더 오래 이어갈 수 있는 기회를 발견할 수 있도록 도와줍니다. A/B 테스트의 주요 이점은 다음과 같습니다.
- 게임 디자인 변경의 영향을 측정
- ARPU 및 잔존율 향상률 예측
- 게임의 KPI 저하 방지
- 유저와 게임 및 수익화 전략의 상호작용을 파악
하지만 오늘의 주제는 단순히 A/B 테스트의 이점에 대해 이야기하는 것이 아닙니다. 이번 편에서는 슈퍼소닉의 제품 수익화 총 책임자인 Maayan Aharonovitch와 함께 하이퍼 캐주얼 게임 최적화를 위해 꼭 활용해야 하는 5가지 A/B 테스트에 대해 알아보겠습니다. 아래와 같은 테스트 전략을 여러분의 게임에 적용하여 게임의 성과를 결정짓는 요소들의 효과를 극대화하세요.
1. 인터스티셜 광고
인터스티셜 광고는 하이퍼 캐주얼 게임 시장에서 가장 많은 수익을 가져오는 광고 단위입니다. 하지만 많은 개발자들은 이러한 광고 단위가 유저 경험에 부정적인 영향을 줄 것을 우려하여 A/B 테스트를 실시하려는 시도조차 하지 못하고 있습니다. A/B 테스트는 광고 임프레션, 잔존율, 플레이 시간, 그리고 가장 중요한 APPU 등의 게임 내 지표에 미치는 영향을 고려하여 LTV를 극대화할 수 있는 최적의 균형점을 찾을 수 있도록 도와줌으로써 이러한 우려를 해소해줍니다.
특히 다음과 같은 4가지 인터스티셜 테스트를 활용할 필요가 있습니다.
- 트리거 포인트: 레벨 종료 전/후 인터스티셜 광고 표시 비교 – 대부분의 하이퍼 캐주얼 게임에서는 레벨 종료 시 광고를 게재하는 것이 가장 좋은 효과를 발휘하지만, 일부 퍼즐 게임의 경우 레벨이 끝나기 전 광고를 게재함으로써 ARPU를 개선할 수 있습니다.
- 타이밍: 광고 사이 시간 간격 (예: 20초, 30초, 40초)
- 레벨: 광고를 보여주기 시작하는 레벨 – 레벨 1, 레벨 2, 레벨 7 등
- 레벨 중간: 레벨 진행 중 광고 표시 – 레벨 길이가 45초 이상인 게임에 가장 적합합니다.
인터스티셜 광고 전략 최적화는 ARPU 향상에 도움이 될 수 있습니다. 예를 들어, 슈퍼소닉의 게임에 대해 종류별로 A/B 테스트를 실시한 결과 평균적으로 다음과 같은 ARPU 향상 효과를 확인했습니다.
- 5.5%: 트리거 포인트 테스트
- 5%: 타이밍 테스트
- 4%: 레벨 테스트
- 7%: 레벨 중간 테스트
2. 유저 인터페이스(UI)
슈퍼소닉의 이전 아트 디자인 팁에 관한 블로그에서 설명한 바와 같이 단순 명료한 UI는 유저가 게임을 이해할 수 있도록 돕고 수익화 전략을 개선하는 데 필수적입니다. 예를 들어, 잘 만든 UI는 보다 효과적인 방식으로 오퍼를 보여줌으로써 보상형 동영상 광고의 참여율을 높이고, 이에 따라 ARPU를 향상시킬 수 있습니다.
UI에 대한 A/B 테스트를 종종 간과하는 경우가 많습니다. 많은 개발자들이 게임의 메커니즘이나 핵심 게임 플레이를 세밀하게 가다듬는 데에만 초점을 맞추고 있기 때문입니다. 하지만 게임 플레이와 더불어 UI에도 관심을 기울여야 합니다.
예를 들어, 게임 ‘Human Vehicle’의 경우 화면에 표시되는 버튼의 형식, 크기, 모양 등을 변경하는 UI에 관한 A/B 테스트를 통해 7일차 잔존율이 20% 향상되고, 7일차 ARPU가 5% 증가했습니다. 새로운 버전이 모든 유저에게 적용된 이후에는 7일차 ARPU가 9% 개선되었습니다.
3. 사운드 FX
하이퍼 캐주얼 게임의 유저는 다양하며, 폭넓은 연령대를 망라합니다. 연령대가 있는 유저의 경우 사운드 없이 플레이할 수도 있지만, 젊은 층의 경우에는 반대인 경우가 많습니다. 사운드 이펙트는 소리를 켠 상태로 게임을 플레이하는 유저들을 끌어들일 수 있는 아주 좋은 방법이며, 다양한 통계들이 이를 입증하고 있습니다. 슈퍼소닉의 게임은 사운드 이펙트를 통해 평균적으로 7~10%의 ARPU 증가를 이끌어 내었습니다. 테스트를 통해 사운드 이펙트의 효과를 확인한 슈퍼소닉은 개발자들에게 게임의 필수 요소로 사운드를 포함시킬 것을 제안하고 있습니다.
앞서 게임 ‘Human Vehicle’의 예에서는 사운드 이펙트 구현에 대한 A/B 테스트를 통해 1일차 잔존율이 12.9%, ARPU가 10.2% 향상되었습니다.
말하는 토마토를 등장시킨 게임 ‘Color Match’의 사례와 같이, 광고 소재의 사운드 이펙트에 대해서도 A/B 테스트를 실시할 수 있습니다. ‘Color Match’는 사운드 요소에 대한 테스트를 통해 높은 수익 향상과 미국 iOS 전체 차트 1위에 올랐습니다.
4. 랭킹 순위
각 레벨이 끝난 뒤 표시되는 랭킹 순위는 유저가 다른 ‘플레이어’들과 자신을 비교해 볼 수 있는 방법입니다. 랭킹 순위는 임의로 만들어지는 경우도 많지만, 여전히 유저에게 성취감과 만족감을 선사합니다. 유저는 자신의 진행 정도를 보다 명확하게 알 수 있고, 이에 따라 잔존율이 높아집니다.
이를 통해 유저가 게임을 더 오래 플레이할 수록 수익화 기회도 많아지, ARPU도 함께 증가합니다. 이러한 기능은 하이퍼 캐주얼 게임에 도움이 될 수 있습니다. A/B 테스트를 통해 게임 내 지표와 수익 개선 여부를 살펴봄으로써 여러분의 게임에 랭킹 순위를 사용하는 것이 적합한지 확인할 수 있습니다.
슈퍼소닉의 게임 ‘Escalators’의 경우 랭킹 순위에 대한 A/B 테스트를 통해 ARPU가 9% 향상되었습니다. 더불어 차선을 추가하거나 실패 조건을 변경하는 등에 대한 추가적인 A/B 테스트를 함께 실시하여 APPU, 잔존율 등의 KPI를 개선하면서 CPI를 낮게 유지하여 수익성과 효율성을 달성하고 성공적으로 규모를 성장 시킬 수 있었습니다.
5. 환경
하이퍼 캐주얼 게임에서 환경은 배경과 플레이어 영역을 구성하는 모든 비주얼 요소를 의미합니다. 시각적 측면이 매우 중요한 이유는 다른 장르에 비해 게임 플레이가 단순하고 일정한 경향이 있기 때문입니다. 아트 디자인은 게임에 역동적인 느낌을 더해줄 수 있는 핵심적인 수단입니다. 간단한 게임이라도 환경에 변화를 줌으로써 진행되는 느낌을 만들어낼 수 있습니다. 예를 들어, 슈퍼손기의 게임 ‘Human Vehicle’은 배경을 바다에서 모래로 변경하는 간단한 변화를 통해 유저의 참여와 성취감을 이끌어 냄으로써 1일차 잔존율과 ARPU를 개선할 수 있었습니다.
또 다른 예로 게임 ‘Going Balls’는 유저가 보상형 동영상 광고 참여 또는 결제 후에 플레이할 수 있는 보너스 레벨의 환경에 대한 테스트를 실시했습니다. 이로써 잔존율과 수익화의 개선을 통해 ARPU를 5% 향상시킬 수 있었습니다.
새로운 환경에 대한 A/B 테스트는 슈퍼소닉이 개발자에게 가장 먼저 추천하는 테스트 중 하나입니다. 이러한 테스트는 상당한 효과를 발휘한다는 사실이 이미 입증되었기 때문에 슈퍼소닉은 기본 설정 중 하나로 이 테스트를 실시하기를 제안하고 있습니다.
그래서 처음부터 게임의 환경을 다양하게 만드는 것이 좋습니다. 이후 A/B 테스트를 통해 어떤 배경이 어떤 레벨에서 잔존율, ARPU 등의 KPI 측면에서 가장 좋은 성과를 기록하는지 확인합니다. 가장 효과적인 광고 소재에서 영감을 얻어 레벨의 배경을 만드는 것은 아주 좋은 출발점입니다. 이러한 배경이 좋은 성과를 기록할 가능성이 높기 때문이죠.
끊임없는 테스트
A/B 테스트는 소프트 론칭 기간 중에 매우 중요한 역할을 합니다. 또한, 글로벌 출시가 이루어진 이후에도 지속적인 테스트를 통해 성과를 최적화하고 유지해 나갈 수 있습니다. 최근 슈퍼소닉은 게임 ‘Going Balls’의 환경 변화와 더 까다로운 부스터 레벨을 보여주는 40가지 동영상 광고 소재에 대한 A/B 테스트를 실시했습니다. 이 게임은 출시된 지 1년이 넘었지만, 이러한 지속적인 변경을 통해 수익 및 매출이 향상 되었습니다. 또한 차트에서도 순위를 끌어 올려 미국 안드로이드 차트 12위를 기록했으며, 260만 명이 넘는 DAU를 달성하고 있습니다.
이러한 테스트를 통해 더 나은 조건을 가린 후에는 여러분의 게임에 새로운 버전을 적용하고, 7~30일 정도 잔존율과 ARPU에 미치는 영향을 측정하는 것이 좋습니다. 이 기간 동안 테스트의 긍정적인 결과가 반영되고 게임의 성과 지표들이 올바른 방향으로 나아가는 것을 확인할 수 있을 것입니다.
Let's put these tips to good use
Publish your game with Supersonic
