이메일 A/B 테스트를 올바르게 수행하는 방법(+ 지금 시작하는 10가지 쉬운 아이디어)

이런 저런?

직감에 따라 이메일 마케팅 결정을 내리는 데 지쳤다면(또는 계획에 동의하려고 시도하는 경우) 일부 이메일 A/B 테스트가 필요할 수 있습니다. 약간의 예측과 계획을 통해 직감과 아이디어를 실행 가능한 통찰력으로 전환하여 전체 팀과 공유할 수 있습니다.

이메일 A/B 테스트를 빠르게 진행하기 위해 알아야 할 사항은 다음과 같습니다.

• 테스트할 10가지 이메일 요소
• A/B 테스트를 실행하는 5단계

이메일 A/B 테스트란 무엇입니까?

먼저 이메일을 A/B 테스트한다는 것은 무엇을 의미합니까?

이메일 A/B 테스트 또는 분할 테스트는 하나의 변수가 변경된 동일한 이메일의 두 가지 버전을 생성한 다음 잠재고객의 두 하위 집합에게 전송하여 어떤 버전이 가장 잘 수행되는지 확인하는 프로세스입니다.

다시 말해, 이메일 A/B 테스트는 두 개의 이메일을 서로 비교하여 어느 것이 더 우수한지 확인합니다. 크거나 작은 요소를 테스트하여 다음과 같은 작업에 도움이 되는 통찰력을 얻을 수 있습니다.

• 이메일 디자인을 업데이트하십시오.
• 청중의 선호도에 대해 알아보세요.
• 이메일 성능을 향상시킵니다.

테스트할 수 있는 10가지 이메일 구성 요소

당신은 당신이 모든 이메일에서 디자인 타이밍보다, 지저분 실현하기 위해 만드는 모든 결정에서 목록에 시간이 걸릴 경우 테스트 많은 기회가 있습니다. 생성하면 테스트할 수 있습니다. 시작하기 위해 다음은 A/B 테스트에 대한 10가지 일반적인 이메일 구성 요소입니다.

1. 이름에서

구독자에게 이메일(외부에서)을 알리는 요소 중 하나는 발신인 이름입니다. 원하는 경우 이를 실험할 수 있지만 항상 회사에서 제공한 것임을 분명히 하십시오. 스팸처럼 느껴질 수 있는 너무 평범한 것을 시도하지 마십시오. 예를 들어, Mailchimp는 "Mailchimp", "Jenn at Mailchimp" 및 "Mailchimp Research"를 비롯한 몇 가지 From 이름을 사용합니다.

2. 제목 줄

개설률을 높이려면 제목 줄을 시작하는 것이 가장 일반적입니다. 다양한 스타일, 길이, 톤 및 위치를 실험해 볼 수 있습니다. 예를 들어 Emerson A/B는 백서가 포함된 무료 평가판 이메일에 대해 두 개의 제목 줄을 테스트했습니다.

• 제어: 무료 평가판 및 설치: 자동 스팀 트랩 모니터링으로 에너지 절약 캡처
• 변수: [백서] 실패한 스팀 트랩이 공정 플랜트에 미치는 영향

그 특정 테스트는 백서를 참조하는 제목에 대해 23% 더 높은 공개율을 보여주었습니다.

3. 텍스트 미리보기

제목 줄은 틀림없이 구독자가 이메일을 열도록 유인하는 비용을 주도하지만, 이것이 유일한 옵션은 아닙니다. 전자 상거래 이메일 마케터이자 코스 작성자인 Chase Dimond는 다른 사람이 이메일을 열도록 하는 세 가지 주요 수단(보낸 사람 이름, 제목 줄, 미리보기 텍스트)에 대해 설명합니다.

그는 덧붙입니다.

“대부분의 사람들은 제목에만 집중합니다. 물론 매우 중요하지만 이름과 미리보기/프리헤더 텍스트에서 A/B 테스트를 고려해야 합니다.” —체이스 다이먼드

4. HTML 대 일반 텍스트

HTML 또는 일반 텍스트 이메일을 주로 보내는 경우 반대쪽 잔디가 더 푸르른지 확인하는 것이 좋습니다. 여기 Litmus에서 우리는 몇 개의 세그먼트에 걸쳐 이 두 가지 이메일 스타일을 A/B 테스트했습니다. 몇 가지 테스트를 통해 고객과 비고객 간에 최상의 메시지가 다르며 일반 텍스트 이메일이 이메일 라인업에서 확고한 위치를 차지하고 있음을 발견했습니다.

5. 길이

이메일 디자인 외에도 메시지의 길이를 가지고 놀 수 있습니다. 다음은 스스로에게 물어볼 몇 가지 질문입니다.

• 구독자는 메시지에서 더 많은 콘텐츠와 컨텍스트를 원합니까, 아니면 관심을 끌기에 충분할까요?
• 다양한 유형의 이메일에 이상적인 길이는 얼마입니까? 아니면 다른 장치?
• 모든 세그먼트가 동일한 길이의 이메일을 선호합니까?

6. 개인화

2020년 이메일 현황 보고서에 따르면 이메일을 개인화하는 가장 인기 있는 방법은 이름을 포함하는 것입니다.

이 방법을 사용하면 클릭을 늘릴 수 있지만 개인화 범위를 확장할 수 있습니다. Jaina Mistry는 A/B 테스트 이름 개인화 경험을 공유했습니다.

“제목에 이름을 개인화하면 더 많이 열렸지만 전환율은 낮아졌습니다. 이름부터 눈길을 끌었지만 모두가 개봉 후 행동할 의향이 있는 것은 아니었다”고 말했다. —제이나 미스트리

A/B 테스트의 기반으로 사용할 수 있는 기타 개인화 요소에는 구독자의 고객 상태, 사이트와의 과거 상호 작용, 구매 내역 및 상호 작용한 이메일이 포함됩니다.

7. 자동화 타이밍

대부분의 이메일 A/B 테스트는 이메일에 포함된 내용에 중점을 두지만 이메일을 보낼 시기를 테스트할 수도 있습니다. 예를 들어, 알림을 보내기 전에 사람이 장바구니를 버린 후 시간을 조정할 수 있습니다. 시도해야 할 또 다른 A/B 테스트 방법은 트리거된 시퀀스에서 보내는 이메일 수입니다. Square의 Tyler Michael은 전송 지연, 시간대 현지화 및 요일이 A/B 테스트할 수 있는 모든 타이밍 차원이라고 말했습니다.

8. 복사

이메일 사본의 어조와 위치는 메시지가 독자의 관심을 끄는지 여부에 영향을 미칩니다. "복사" 카테고리의 A/B 테스트는 다음을 포함하여 이메일의 수많은 요소를 다룹니다.

• 본문
• 헤드라인
• 버튼 카피

9. 이미지

양식화된 이메일을 사용하는 경우 비주얼을 A/B 테스트해 보세요. 다른 영웅 이미지가 참여도를 변경합니까? 긴 이메일에 애니메이션 GIF를 사용하여 읽기 시간을 늘릴 수 있습니까? 이메일에 인포그래픽을 포함하면 사람들이 그것을 전달할 가능성이 더 높아지나요? 가능성은 거의 무한합니다.

10. 자동화 및 거래 이메일

이 목록의 최종 이메일 A/B 테스트 요소는 범주 및 알림에 가깝습니다. 모든 이메일을 정기적으로 A/B 테스트하는 것을 잊지 마십시오. 브로드캐스트 이메일만 테스트하는 것은 일반적인 실수이지만 자동화된 트랜잭션 이메일도 테스트하고 개선할 가치가 있습니다. 종종 이러한 이메일은 구독자 참여를 높이는 중요한 역할을 하므로 항상 켜져 있는 이메일을 테스트하는 것이 중요합니다.

이메일 A/B 테스트를 설정하는 방법(올바른 방법)

이메일 A/B 테스트는 이론적으로 간단하지만 많은 부분을 움직일 수 있습니다. 팀과 공유할 정확한 통찰력을 얻으려면 계획하고 분석하는 데 약간의 시간을 투자하세요. 다음은 성공적인(그리고 통찰력 있는) A/B 테스트를 실행하기 위해 수행해야 하는 단계입니다.

목표 선택

많은 프로젝트와 마찬가지로 최종 목표를 염두에 두고 이메일 A/B 테스트를 시작해야 합니다. 가설, 배우고 싶은 것, 개선하고 싶은 측정항목을 선택하세요.

이메일 A/B 테스트를 사용하여 공개율과 같은 캠페인 수준 측정항목을 개선할 수 있지만 그 영향을 더 자세히 추적해 보세요. 예를 들어 전환율은 이메일마다 어떻게 다른가요? 제목 줄은 콘텐츠에 대한 기대치를 설정하므로 받은 편지함보다 그 영향을 더 많이 볼 수 있습니다.

변수 선택

원하는 효과를 알고 나면 가변 구성 요소를 선택할 차례입니다. 한 번에 하나의 변수만 테스트하고 있는지 확인하십시오. 통제 이메일과 가변 이메일 사이에 둘 이상의 차이가 있다면 어떤 변화가 바늘을 움직였는지 알 수 없습니다. 이메일 A/B 테스트를 분리하는 것은 다소 느릴 수 있지만 정보에 입각한 결론을 내릴 수 있습니다.

매개변수 설정

이메일 A/B 테스트 프로세스의 세 번째 단계에서 가장 많은 결정이 내려집니다. 매개변수를 설정할 때 테스트 구성을 보장하는 모든 부분을 결정합니다. 귀하의 결정에는 다음이 포함됩니다.

• 테스트를 실행할 기간입니다. 결과를 기다리며 자리에 앉을 수 있지만 결과가 나오려면 최대 하루를 기다려야 합니다.
• 누가 시험을 받을 것입니까 ? 특정 세그먼트 내에서 A/B 테스트를 하려면 결과가 통계적으로 유의할 만큼 충분히 많은 잠재고객이 있는지 확인하세요.
• 테스트 분할. 테스트를 수신할 세그먼트를 알고 나면 전송을 분할하는 방법을 결정해야 합니다. 절반이 제어를 받고 다른 하나가 가변 버전을 받는 50/50 분할을 수행할 수 있습니다. 또는 제어 버전 A를 20%로 보내고 테스트 버전 B를 다른 20%로 보낸 다음 기다렸다가 나머지 60%에게 승자를 보낼 수 있습니다.
• 측정할 측정항목. 테스트 전에 원하는 메트릭과 데이터를 얻는 방법을 정확히 파악하십시오. 성공을 어떻게 정의할 것인가?
• 기타 교란 변수. 테스트 결과에 영향을 줄 수 있지만 통제할 수 없는 휴일과 같은 변수를 기록해 두십시오.

테스트 실행

이메일 A/B 테스트는 모든 옵션에 관한 것이며 여기에는 테스트 실행 방법이 포함됩니다. 테스트를 실행하는 두 가지 주요 방법은 다음과 같습니다.

• ESP에서 A/B 테스트가 자동으로 실행되도록 설정합니다. ESP가 분할 전송을 관리하도록 하면 관리가 조금 더 쉬울 수 있으며 개방 속도 증가와 같은 표면 수준 목표가 더 많은 간단한 테스트에 좋은 옵션입니다.
• 수동으로 전송을 분할합니다. 두 개의 개별 이메일을 설정하고 이메일을 수동으로 보내는 것은 더 실용적이지만 ESP 이외의 데이터(예: 웹사이트 참여)를 보다 명확하게 볼 수 있습니다. 캠페인 이외의 결과를 추적하려면 이 방법을 사용하십시오.

결과 분석

결과를 분석할 시간이 되면 신중하게 계획한 모든 순간에 감사하게 될 것입니다. 명확한 아이디어를 가지고 들어갔기 때문에 테스트가 끝나면 무엇을 찾아야 하는지 알 수 있습니다. 이제 결과를 비교하고 팀과 공유해야 합니다.

다시 테스트하고 싶지 않다면. 그럴 필요는 없지만 "빛나는 새로운 요소"로 인해 가변 이메일이 향상되었을 가능성이 있습니다. 첫 번째 테스트 결과를 확인하려면 비슷한 테스트(동일한 집단으로!)를 실행하여 학습 내용이 사실인지 확인할 수 있습니다.

Magan Le는 Twitter에서 공유했습니다.

“나는 전체 이미지 대 라이브 텍스트인 것을 했습니다. 모든 이미지는 개방률이 높지만 CTOR는 낮습니다. 내 이론은 사람들이 호기심을 갖고 이미지를 켜서 그것을 보았지만, 일단 본 후에는 관심이 없다는 것을 깨달았다는 것입니다. 반면 라이브 텍스트 사람들은 더 잘 준비되었습니다.” —마간 르

Litmus로 이메일 A/B 테스트 자세히 알아보기

모든 ESP는 동일한 표준 이메일 측정항목에 대한 액세스를 제공하며 웹 분석과 같은 항목을 활용하여 받은 편지함 외부의 동작을 이해할 수도 있습니다. 고급 메트릭을 사용하여 A/B 테스트를 더 자세히 살펴보고 싶다면 Litmus가 더 많은 작업을 도와드릴 수 있습니다.

다음은 Litmus Email Analytics가 통찰력을 향상시킬 수 있는 몇 가지 사용 사례입니다.

• 공개 비율뿐만 아니라 변형 간의 읽기 비율을 비교하여 가장 참여도가 높은 구독자의 관심을 끈 제목 라인 버전을 확인합니다.
• 어떤 콘텐츠가 가장 높은 공유율로 이어지는지 이해하여 학습을 활용하여 추천 프로그램을 성장시킬 수 있습니다.
• 특히 테스트 중인 항목에 광범위한 이메일 클라이언트 지원이 없는 경우 이메일 클라이언트와 장치 간의 A/B 테스트 결과를 분석하십시오.

고급 분석 보고서 및 결과가 있으면 Litmus를 사용하여 결과를 팀과 쉽게 공유할 수 있습니다. 그런 다음 이메일과 나머지 마케팅 채널 믹스에서 전략을 최적화하고 추진할 수 있습니다.

한 곳에서 빌드, QA 테스트 및 결과 분석 팀이 더 나은 이메일을 만들 수 있도록 지원하세요. Litmus를 사용하여 더 높은 성과의 이메일 캠페인을 구축, 테스트 및 완벽하게 만드는 데 필요한 모든 것을 얻으십시오. 무료 평가판 시작 →