스크린샷 A/B 테스트 종합 가이드

귀하의 앱 또는 게임을 위한 실패하지 않는 A/B 테스트 전략에 대한 이 단계별 가이드를 살펴보십시오.

이 글은 SplitMetrics의 콘텐츠 마케팅 매니저 Liza가 작성한 게스트 블로그입니다.

A/B 테스트가 ASO에 필수적인 이유는 무엇입니까?

모바일 퍼블리셔들이 앱 스토어 최적화(ASO)에 대해 들었을 때 가장 먼저 떠올리는 것은 스토어 메타데이터 개선입니다. 물론, 키워드, 앱 이름, 부제목 등은 앱 스토어 내 앱의 검색 가능성에 매우 중요합니다. 하지만 현명한 마케터들은 텍스트 요소의 영향이 제품 페이지 시각 자료의 중요성을 결코 경시하지 않는다는 것을 알고 있습니다. 특히 전환 성장에 있어서는 더욱 그렇습니다.

결국, 수천 건의 SplitMetrics 테스트 결과에 따르면 앱 스토어 방문객 중 2% 미만이 “더 보기” 버튼을 탭하는 것으로 나타났습니다. 실제로 우리는 시각적 정보를 선호하여 긴 텍스트를 무시하는 경향이 있으며, 주요 앱 스토어에서의 우리의 행동도 예외는 아닙니다.

앱 스크린샷이 스토어 제품 페이지에서 상당 부분을 차지한다는 점을 고려할 때, 이는 사용자들의 많은 관심을 끄는 경향이 있습니다. 그렇기 때문에 스크린샷을 다듬는 것이 다른 스토어 페이지 요소보다 앱의 전환을 급증시킬 더 큰 잠재력을 가지고 있습니다.

하지만 앱 스토어에서 무작위로 스크린샷을 변경하고 즉시 놀라운 결과를 기대하는 것은 소용이 없습니다. 사실, 무엇이 효과가 있을지, 무엇이 앱의 성능을 저하시킬지 알 수 없습니다. 그렇기 때문에 ASO에 있어서 A/B 테스트는 필수입니다.

이미지 출처: SplitMetrics

A/B 테스트 또는 분할 테스트는 가설 검증 방법입니다. 이러한 테스트 과정에서 두 가지 변형이 비교되며, 그 결과는 최고의 성능을 가진 옵션을 식별하는 데 도움이 됩니다. 한편으로는 A/B 테스트 뒤에는 간단한 메커니즘이 있지만, 다른 한편으로는 그 과정이 보이는 것만큼 간단하지는 않습니다.

앱 메타데이터 요소를 완벽하게 만들기 위해 A/B 테스트를 사용하기로 결정했다면, 실질적인 차이를 만들 신뢰할 수 있는 결과를 보장하기 위해 다음의 모든 단계를 따라야 합니다.

ASO에서의 A/B 테스트 초보자 가이드를 확인하십시오

다음은 모든 고품질 A/B 테스트 전략의 핵심 요소입니다:

1. 분석 및 변형 브레인스토밍
2. 스크린샷 디자인
3. A/B 실험 실행
4. 결과 평가
5. 결과 구현 및 후속 실험

이 실패하지 않는 A/B 테스트 전략의 각 단계를 자세히 살펴보겠습니다.

A/B 테스트 전 분석 & 변형 브레인스토밍

가장 먼저 기억해야 할 것은 견고한 가설에 기반하지 않는 A/B 테스트 활동은 실패할 수밖에 없다는 것입니다. 단순히 분할 테스트를 위한 분할 테스트는 의미가 없습니다. 따라서 무엇보다도 입증할 가치가 있는 스크린샷 아이디어를 내놓아야 합니다.

그런 아이디어를 어디서 얻을 수 있을까요? 답변은 간단합니다 – 연구입니다. 주요 앱 스토어를 쇼윈도우처럼 여기고 귀하의 앱 카테고리 및 전반적인 스토어에서 최고의 스크린샷 관행을 파악하십시오. 무엇보다도 업계 리더들을 참고해야 한다는 것은 말할 필요도 없습니다.

앱 스토어 스크린샷과 관련된 최신 트렌드를 파악한 후에는, 아이디어를 우선순위화하고 테스트를 위한 가설을 정교하게 다듬을 때입니다. 최고의 앱 스토어 스크린샷 관행을 어떻게 반영할 수 있을지 생각해보십시오. 다음은 테스트해 볼 가치가 있는 몇 가지 가정입니다:

• 제가 스크린샷의 방향을 변경하면 제 앱의 설치 수가 증가할 것입니다. 예를 들어, Rovio는 세로 스크린샷과 가로 스크린샷을 테스트했습니다. 그 결과, 세로 방향이 승리했으며 Angry Birds 2의 전환율이 13% 증가했습니다.

이미지 출처: SplitMetrics

• 스크린샷이 앱의 기능뿐만 아니라 가치와 이점을 강조한다면 사용자들이 제 앱을 더 자주 설치할 것입니다.
• 사용 가능한 모든 스크린샷을 사용하면 제 앱의 전환에 유리할 것입니다.
• 소셜 증거(사용 후기, 언론 언급, 수상 경력)를 사용하면 앱 스토어 방문객들에게 제 앱이 더 매력적으로 보일 것입니다.
• 첫 번째 스크린샷에 제 앱의 최신 기능을 반영하면 제 앱의 전환이 증가할 것입니다.

이미지 출처: Apple

경쟁 앱의 제품 페이지를 연구하는 것만으로는 분명히 충분하지 않습니다.

• 귀하는 시장에 대한 명확한 비전을 가지고 있어야 합니다.
• 타겟 고객에 대한 심층 분석은 A/B 테스트의 또 다른 성공 요소입니다. 귀하는 이상적인 사용자(연령, 성별, 관심사 등)를 알아야 합니다.
• 트래픽 소스 자격 부여는 이 분석 단계 내에서 또 다른 중요한 활동입니다.

이 단계에는 목표 설정과 실행할 실험 유형 선택도 포함됩니다. 이는 제품 페이지에서의 스크린샷 테스트이거나 검색 결과 및 카테고리 검색 맥락에서의 테스트일 수 있습니다. 첫 번째 실험 유형은 제품 페이지의 전반적인 전환을 높이는 데 도움이 되며, 후자는 경쟁 앱 옆에서 스크린샷이 어떻게 작동하는지 보여줄 것입니다.

최고의 앱 스크린샷을 디자인하고 사용자들이 앱을 다운로드하도록 장려하는 다음 팁들을 읽어보십시오.

변형 생성

이제 테스트할 몇 가지 가설이 있으므로, 실제 스크린샷에 이러한 아이디어를 구현할 때입니다.

예를 들어, ZiMAD는 게임 Bubble Birds 4를 위해 재디자인된 스크린샷을 테스트하기로 결정했습니다. 새로운 스크린샷은 고전적인 게임 스크린샷 레이아웃을 반영했습니다: 이미지 전면에 메인 캐릭터, 게임 플레이 배경, 기능을 강조하는 강력한 캡션.

회사는 게임 카테고리의 모범 사례가 제품 페이지의 전환력을 높일 수 있는지 테스트하고자 했습니다. 하지만 그들은 ‘게임 플레이 배경’에 대해 그렇게 직설적이지 않았습니다: 그들의 새로운 배경은 아트 오버레이, 실제 스크린샷, 그리고 게임 플레이 요소를 포함했습니다. 그 결과, 새로운 버전은 전환에서 32%의 상승을 얻었습니다.

이미지 출처: SplitMetrics

스크린샷에 간단한 패턴(단색 배경 및 기기)을 사용할 계획이라면, 스크린샷 빌더가 많이 있으므로 디자이너 없이도 할 수 있습니다.

이미지 출처: the AppLaunchpad

하지만 더 창의적인 것(연결된 스크린샷 또는 스플래시 화면 스크린샷)을 적용할 계획이라면, 전문 디자이너의 기술이 필수적입니다.

이미지 출처: Apple

A/B 테스트 실험 실행

우선, A/B 테스트를 위한 도구를 선택해야 합니다. Android 앱만 가지고 있다면 Google Play Experiments를 고려할 수 있습니다. Facebook 광고는 광고 배너 내에서 다양한 스크린샷을 테스트할 수 있는 또 다른 옵션입니다.

또 다른 대안은 SplitMetrics입니다. 이는 iOS 및 Android 앱 모두를 위한 실험을 실행하는 데 도움이 되는 올인원 분할 테스트 플랫폼입니다. 또한, 출시 전 실험을 가능하게 합니다.

어떤 플랫폼을 선택하든, 귀하의 실험은 다음 규칙을 준수해야 합니다:

• 사용자들이 자연스럽게 행동하도록 변형은 스토어 페이지처럼 보여야 합니다.
• 트래픽은 변형들 사이에 균등하게 분배되어야 합니다.
• 하나의 테스트에서는 하나의 가설만 테스트하십시오.
• 귀하의 실험은 통계적으로 유의미한 결과를 얻을 수 있을 만큼 충분한 트래픽으로 채워져야 합니다(이 양은 앱의 전환율과 트래픽 품질에 따라 달라집니다: 전환이 높을수록 필요한 사용자 수는 적습니다);
• 분석 단계에서 밝혀낸 트래픽 소스와 타겟팅을 활용하는 것을 기억하십시오;
• 다른 요일의 사용자 행동을 기록하기 위해 일주일 동안 A/B 테스트를 실행하는 것이 합리적입니다.

테스트 결과 평가

대부분의 퍼블리셔가 가장 좋아하는 부분인 결과 평가입니다. 이는 귀하의 가설이 옳았는지 틀렸는지 알게 되는 진실의 순간입니다. 결과는 명확하거나 모호할 수 있으며, 재디자인된 스크린샷이 대조군 버전을 이기거나 전환 감소를 유발할 수도 있습니다.

어떤 식으로든, A/B 테스트에 있어서는 부정적인 결과라는 것은 없다는 점을 명심하는 것이 중요합니다. 사랑하는 새로 디자인된 스크린샷 세트가 잘 작동하지 않더라도, 이는 여전히 제품 페이지의 부주의한 변경과 추가적인 전환 감소를 막은 결과입니다.

예를 들어, Mallzee는 일련의 A/B 테스트를 실행했으며, 그들의 가정 대부분이 틀렸다는 것이 입증되었습니다. 하지만 이 겉보기에는 재앙적인 결과가 회사의 전환율이 25% 하락하는 것을 막았습니다. 이 사례는 테스트가 필수적이며 ASO에서 추측할 여지가 없다는 것을 다시 한번 보여줍니다.

이미지 출처: SplitMetrics

이 단계에서 고급 A/B 테스트 도구를 사용한다면, 앱을 설치하기 전에 스토어 방문객들이 제품 페이지와 어떻게 상호작용하는지 배우고 분석할 수 있습니다. 상호작용 퍼널, 페이지 체류 시간, 스크롤 히트맵 등과 같은 지표들은 타겟 사용자를 더 잘 이해하고 마케팅 전략을 다듬는 데 도움이 될 것입니다.

결과 구현 & 후속 실험

이 단계에서는 두 가지 옵션이 있습니다:

1. 명확한 승리 변형이 있다면, 변경된 스크린샷을 앱 스토어에 즉시 구현할 수 있습니다;
2. A/B 실험 결과를 추가 테스트에 활용할 수 있습니다.

귀하는 “초기 테스트 결과에 꽤 만족하는데 왜 후속 테스트에 시간을 낭비해야 합니까?”라고 물을 수 있습니다. 우선, 성공적인 A/B 테스트를 축하드립니다. 둘째, 전환이 100%가 아니라면 아직 할 일이 많으며, 이는 거의 불가능합니다.

사실, 훌륭한 앱들은 제품 개발을 멈추지 않고 전환에 영향을 미칠 수 있는 모든 요소를 최적화하기 때문에 상위권을 유지합니다. 2016년 Apple이 선정한 최고의 애플리케이션 중 하나인 Prisma를 예로 들어보겠습니다. Prisma는 스크린샷을 최적화하기 위해 일련의 테스트를 실행했으며, 그 결과 전환에서 12.3%라는 인상적인 상승을 가져왔습니다.

이미지 출처: SplitMetrics

앱의 폭발적인 인기를 고려할 때, 이러한 증가는 매일 수천 건의 추가 다운로드를 의미했습니다. 그럼에도 불구하고, 팀은 멈추지 않고 다양한 스크린샷을 계속 시도했습니다.

이러한 실험들은 전환 증가를 더욱 이끌어냈고, 결국 19.7%에 도달했습니다. 이는 항상 개선의 여지가 있다는 것을 다시 한번 증명합니다.

이미지 출처: SplitMetrics

마무리하며

모든 앱 퍼블리셔는 앱 스토어 최적화가 지속적인 과정이라는 것을 이해해야 합니다. 스크린샷에 대한 단일 A/B 테스트는 거의 차이를 만들지 못할 것입니다. 이 ASO 체크리스트는 앱 스토어 최적화를 시작할 때 방향을 잡는 데 도움이 될 수 있습니다. 또한 AppTweak의 궁극적인 ASO 체크리스트를 확인할 수도 있습니다.

iOS 및 Android 사용자들이 스토어에서 다르게 행동한다는 점을 기억하는 것도 중요합니다. 아무리 유혹적이라 할지라도, 예를 들어 Apple App Store에서의 실험 결과를 Google Play의 제품 페이지에 적용하지 마십시오. 이는 심각한 전환 감소를 초래할 수 있습니다.

제품 페이지의 전환을 더 나은 방향으로 바꾸기로 결심했다면, 인내심과 목적의식을 갖추는 것이 중요합니다. 계속 나아가고 스크린샷 레이아웃으로 실험을 계속하여 결과를 확장하십시오. 행운을 빕니다!

이 게시물이 유용했습니까? A/B 테스트 경험에 대해 질문이나 공유하고 싶은 것이 있으십니까? 아래에 댓글을 남겨주십시오!