קמפיינים
בדיקת A/B לקמפיין
שלחו עד ארבע גרסאות של קמפיין, ראו מי מנצחת בהקלקות, פתיחות או תשובות ושלחו את המנצחת לשאר הקהל.
במדריך הזה 5 סעיפים
בדיקת A/B שולחת גרסאות שונות של קמפיין לאנשים שונים ומודדת איזו עובדת טוב יותר.
שתי דרכים לבדוק
| באפליקציה | עם ה-AI או ה-API | |
|---|---|---|
| מה משתנה | כל ההודעה: עיצוב ונושא | נושא, עיצוב, תוכן או שם שולח |
| גרסאות | 2–4 | 2–4 |
| מי מקבל את הבדיקה | כולם, בחלוקה שווה | מדגם (5–100%), השאר מחכים למנצחת |
| מנצחת | אתם בוחרים אחרי שליחה, לתיעוד | אתם בוחרים, או Banger בוחר אוטומטית |
באפליקציה
- בשלב עיצוב, בחרו בדיקת A/B לזה. Banger מוסיף גרסה שנייה.
- ערכו כל גרסה. בחרו + וריאנט להוספה עד 4. הגרסאות חייבות להיות שונות.
- המשיכו כרגיל. מסך הבדיקה מציג את חלקה של כל גרסה, כמו 50% / 50%.
- בחרו לשלוח לי בדיקה ובחרו גרסה כדי לבדוק כל אחת.
- שלחו. הקהל מתחלק שווה, וכל נמען מקבל גרסה אחת.
אחרי השליחה הקמפיין מציג תוצאות בדיקת A/B לכל גרסה: מסירה, הקלקות, תשובות, שיפור ורמת ודאות. בחירה מסמן את המנצחת. כולם כבר קיבלו גרסה, ולכן הבחירה לא שולחת עוד דבר.
בדיקה במדגם ושליחת המנצחת
בקשו מה-AI להגדיר זאת. אתם בוחרים:
- Sample size: למשל 20%. יתר ה-80% מחכים.
- Metric: הקלקות אנושיות (ברירת המחדל), פתיחות אנושיות או תשובות.
- החלטה: ידנית או אוטומטית לאחר זמן קבוע (ברירת המחדל 4 שעות), כשגרסה מובילה ברמת ודאות של 95%. במועד הסיום המובילה מנצחת גם אם עדיין אין ודאות.
- Guardrails (רשות): שיעור ביטולי הרשמה או תלונות מרבי שגרסה לא רשאית לעבור.
כשנבחרת מנצחת, יתר הקהל מקבל אותה. אם עוצרים את הבדיקה, הם מקבלים את הגרסה הראשונה. אפשר להתחיל בדיקה רק כשהקמפיין בטיוטה או מושהה.
איך נספרות תוצאות
פתיחות והקלקות סופרות רק אנשים כנראה אמיתיים. הקלקות בוטים ופתיחות דרך שרתי פרטיות, כמו של Apple Mail, מוחרגות. מדגמים קטנים נותנים טווחי ודאות רחבים: כוונו ללפחות 100 אנשים לכל גרסה.
נסו עם ה-AI שלכם
הגדר בדיקת A/B לטיוטת הקמפיין שלי עם שני נושאים. בדוק על 20% מהקהל, מדוד הקלקות ובחר מנצחת אוטומטית אחרי 4 שעות.