מה זו בדיקת A/B ב-SMS

לוקחים את הרשימה, מחלקים אותה לשתי קבוצות אקראיות, שולחים לכל קבוצה גרסה אחרת של אותה הודעה, ומשווים תוצאות. פשוט — אבל רק אם ההבדל בין הגרסאות הוא דבר אחד בלבד.

ב-SMS הבדיקה קלה יותר מאשר באימייל או בפרסום ממומן, כי ההודעה קצרה ומספר המשתנים מצומצם. בדיוק בגלל זה גם הממצאים ברורים יותר.

מה שווה לבדוק, לפי סדר ההשפעה

  1. ההצעה עצמה — "20% הנחה" מול "משלוח חינם" מול "מתנה לקנייה". המשתנה בעל ההשפעה הגדולה ביותר, וגם המוזנח ביותר.
  2. הקריאה לפעולה — "לרכישה" מול "לצפייה במבצע" מול "לפרטים". שינוי של מילה אחת יכול לשנות שיעור הקלקה.
  3. אורך ההודעה — גרסה ממוקדת מול גרסה שמוסיפה הקשר. לא תמיד הקצרה מנצחת.
  4. פנייה אישית — שימוש בשם הלקוח מול פנייה כללית.
  5. תזמון — אותה הודעה בדיוק, בשתי שעות שונות. איך בוחרים את שתי השעות מוסבר במדריך תזמון שליחת SMS.

רעיונות לניסוחים חלופיים אפשר לשאוב מדוגמאות להודעות SMS לעסקים, ולחדד אותם לפי מדריך כתיבת הודעת SMS שיווקית.

הכלל היחיד שאסור לשבור: משתנה אחד

אם גרסה ב' גם קצרה יותר, גם עם קריאה לפעולה אחרת וגם יצאה שעה מאוחר יותר — ואז ניצחה, לא למדתם כלום. לא תדעו מה גרם לזה, ולא תוכלו לשחזר את ההצלחה בקמפיין הבא.

כך נראית בדיקה נכונה

גרסה א': "[שם העסק]: 20% על כל האתר עד שישי. לרכישה: [קישור]"
גרסה ב': "[שם העסק]: 20% על כל האתר עד שישי. לצפייה במבצע: [קישור]"
ההבדל היחיד הוא הקריאה לפעולה — ולכן אפשר לייחס לה את הפער בתוצאה.

כמה נמענים צריך

בדיקה על 100 נמענים בכל קבוצה יכולה להראות פער מרשים שכולו מקרי. ככלל אצבע, כדי לזהות פער אמיתי בשיעורי הקלקה טיפוסיים כדאי לכוון לכמה מאות נמענים לפחות בכל קבוצה — ולהתייחס בחשדנות לפערים קטנים גם אז.

לרשימות קטנות יש פתרון אחר: לבדוק את אותו משתנה על פני כמה קמפיינים ברצף, במקום לפצל רשימה קטנה לשניים. זה איטי יותר, אבל אמין הרבה יותר מהחלטה שמבוססת על עשרים קליקים.

איך מחלקים את הרשימה נכון

החלוקה חייבת להיות אקראית. אם קבוצה א' היא הלקוחות הוותיקים וקבוצה ב' החדשים, אתם לא בודקים את ההודעה — אתם בודקים את ההבדל בין שני קהלים. זו שאלה לגיטימית, אבל היא שייכת לפילוח קהל ורשימות תפוצה ולא לבדיקת ניסוח.

רוצים לבדוק ניסוח בתוך פלח מסוים? קחו את הפלח, ורק אז חלקו אותו אקראית לשניים.

מה מודדים בסוף

לא שיעור מסירה — הוא כמעט זהה בין הגרסאות ולא מושפע מניסוח. מודדים קליקים ייחודיים, ואם אפשר גם המרות בפועל. את שניהם מודדים במערכת האנליטיקס שלכם, דרך הקישור שבהודעה, כמוסבר בקיצור לינקים ומעקב קליקים ב-SMS, ואת ההיררכיה המלאה בין המדדים במדדי הצלחה בשיווק SMS.

שווה להסתכל גם על שיעור ההסרה בכל גרסה. ניסוח שמביא יותר קליקים אבל גם יותר הסרות לא בהכרח משתלם לאורך זמן.

טעויות נפוצות

רוצים לבדוק שתי גרסאות בקמפיין הבא?

Global SMS מאפשרת לנהל כמה רשימות תפוצה בנפרד, כך שתוכלו לשלוח לכל קבוצה גרסה אחרת של ההודעה.

פתיחת חשבון ושליחה ראשונה

התוכן במדריך זה נועד למידע כללי בלבד ואינו מהווה ייעוץ משפטי או תחליף לייעוץ כזה. האחריות לעמידה בהוראות כל דין בנוגע למשלוח הודעות — ובכלל זה קבלת הסכמה, זיהוי השולח ומתן אפשרות הסרה — חלה על השולח בלבד. גלובל סמס בע״מ אינה מספקת ייעוץ משפטי ואינה נושאת באחריות להסתמכות על התוכן שבמדריך. לפרטים ראו את תנאי השירות.