בדיקות A/B בקמפיין לידים: מה שווה לבדוק, ומה סתם בזבוז תקציב

בעל עסק חדש בפרסום ממומן מעלה קמפיין לידים, ואחרי שבוע הוא רואה שהעלות לליד גבוהה. הוא מחליט לעשות “בדיקת A/B”: משנה את צבע הטקסט בקריאייטיב, מריץ יומיים, רואה שההפרש קטן, ועובר לבדיקה הבאה. עוד יומיים משנה את סוג הגופן, אחרי יומיים משנה את סדר המילים בכותרת, אחר כך את התמונה. אחרי חודש הוא יושב מול חשבון הפרסום ולא זוכר איזו וריאציה עבדה טוב יותר, למה, וכמה זמן זה רץ. עלות הליד לא ירדה, התקציב נשחק, והוא בטוח שהאלגוריתם של מטא נשבר. אין שם אלגוריתם שבור. יש שם עשר בדיקות שכל אחת מהן קטנה מדי, קצרה מדי, ומכוונת לשכבה הלא נכונה של הקמפיין.

מה באמת שווה לבדוק בקמפיין לידים ומה בזבוז תקציב? בדיקות A/B בקמפיין לידים עובדות רק כשהן מכוונות לשכבות שבאמת יכולות להזיז תוצאה: ההצעה קודם, ההוק של המודעה אחר כך, שכבת הקהל שלישית, ושינויים בטופס אחרונים. כל בדיקה זקוקה לפחות לשבוע רץ ולכמה עשרות טפסים בכל וריאציה כדי שאפשר יהיה להסיק ממנה משהו. שינויים קוסמטיים כמו צבע כפתור, גופן או ניסוח קטן בקופי לא מייצרים הבדל אמיתי בקמפיין לידים, והם המקום שבו התקציב נשחק בשקט.

למה רוב הבדיקות שרואים ברשת פשוט לא עובדות

הבעיה הראשונה היא סטטיסטית. קמפיין לידים ממוצע של עסק קטן בישראל מייצר בין 20 ל-80 טפסים בשבוע, לכל היותר. כשמפצלים את הקהל לשתי וריאציות, כל צד מקבל פחות מחצי מזה, כי מטא לא בהכרח מחלקת שווה בשווה. מה שנשאר זה מדגם של תריסר או שני תריסרים טפסים בכל וריאציה בשבוע. עם מדגם כזה, כל הפרש שנראה משמעותי הוא בפועל תנודתיות של יום שבועי, של מזג האוויר, של אירוע חדשותי גדול, או פשוט של שני משתמשים שהחליטו למלא בטעות.

הבעיה השנייה היא סדר עדיפויות. רוב הבדיקות שרואים בפוסטים של סוכנויות עוסקות בפרטים קטנים בקופי או בעיצוב הקריאייטיב. בפועל, ההשפעה של שינוי בהצעה עצמה גדולה בסדר גודל מההשפעה של שינוי צבע רקע במודעה. בעל עסק שממלא טופס עושה את זה כי ההצעה נכונה עבורו, לא כי המודעה הייתה בגוון פסטלי ולא בכחול חזק. הבדיקות מכוונות למקום הלא נכון, ולכן גם כשמדגם מספיק, ההפרש קטן.

הבעיה השלישית היא זמן. שבוע נחשב מינימום מוחלט, כי סוף השבוע הישראלי משנה את התנהגות הקהל באופן מהותי. ריצה של יומיים ובחירה מנצחת היא ניחוש שלבוש כמו החלטה מבוססת דאטה.

סולם עדיפויות הבדיקה בקמפיין לידים

במקום להריץ מה שנוח, שווה להסתכל על הקמפיין כארבע שכבות שיוצרות תוצאה, ולבחור לבדוק לפי סדר יורד של פוטנציאל שיפור.

שכבה ראשונה, ההצעה. מה בעצם מציעים בטופס. אבחון חינם, מדריך להורדה, שיחת ייעוץ קצרה, הנחה מיידית, הצעת מחיר, קופון. שינוי בהצעה יכול להזיז את שיעור המילוי של הטופס באופן משמעותי, כי הוא נוגע בשאלה הבסיסית של הקורא: האם שווה לי להשקיע דקה במילוי טופס בשביל מה שאני מקבל בתמורה. זו הבדיקה עם הפוטנציאל הכי גדול, ורוב המפרסמים בכלל לא רצים אותה.

שכבה שנייה, ההוק של המודעה. משפט הפתיחה של הקופי, או שנייה הראשונה של הסרטון. זה מה שקובע אם הגולל עוצר או ממשיך. שינוי בהוק לרוב מזיז שיעורי קליק ועלות קליק במידה ניכרת, וגורר אחריו גם שינוי בעלות הליד. עדיף לבדוק שני הוקים שונים לגמרי במהות (למשל שאלה מול הצהרה) ולא שני ניסוחים דומים של אותו רעיון. הנוסחה המלאה לכתיבת מודעה שעוצרת גלילה מפרטת את שאר החלקים של המודעה, וכאן חשוב רק שההוק שנבחר לבדיקה יהיה שונה במהות ולא ניסוח מלוטש של אותו רעיון.

שכבה שלישית, הקהל. שכבת טירגוט שונה, פילוח דמוגרפי אחר, קהל דומה במקום קהל מבוסס תחומי עניין. בדיקה בשכבה הזאת דורשת יותר סבלנות, כי המערכת של מטא צריכה זמן ללמוד כל קהל בנפרד. אם משנים את הקהל בזמן שהמערכת עוד בשלב הלמידה, השוני שרואים בתוצאה לא באמת מגיע ממה שרצה להישאל. יש קשר הדוק בין הזמן שהמערכת מקבלת לבין איכות התוצאה של הקמפיין, וכדאי לקרוא על שלב הלמידה של המערכת ולמה כדאי לא לכבות אחרי יומיים לפני שנוגעים בטירגוט.

שכבה רביעית, הטופס. שאלת סינון נוספת, שינוי בכותרת הראשית של הטופס, סדר שדות. השינויים כאן קטנים, אבל היתרון הוא שהם מגיעים למדגם הכי גדול: כל מי שקליק על המודעה מגיע לטופס. עדיין, שינוי בטופס לא הופך קמפיין שלא עובד לקמפיין שעובד, הוא רק משפר קמפיין שכבר עובד. אם הבדיקה בשכבה הזאת עוסקת בשאלה נוספת, שווה קודם לקרוא איך שאלת סינון בטופס מסננת ומהי הנוסחה שמורידה פחות מדי מהתוצאה, לפני שמריצים בדיקה שאולי תמצא בסוף שהשאלה הפחיתה טפסים בלי לשפר את איכותם.

שגיאת ההשוואה הבין-תקופתית

אחת הטעויות הנפוצות היא להשוות בין מודעה שרצה בשבוע אחד למודעה שרצה בשבוע אחר. זו לא בדיקה, זו השוואה בין תקופות שונות שקורה בהן דברים שונים. יום גשם, סופ“ש חם במיוחד, כתבה בערוץ החדשות שהעלתה מודעות לתחום מסוים, ואפילו שינוי בקצב הכללי של תחרות הפרסום במטא, כל אלה זזים בשקט בין שבוע לשבוע. הפער שרואים בין שתי מודעות שלא רצו במקביל הוא הפער בין שני שבועות, לא בין שתי הוריאציות. מבחן אמיתי חייב הרצה בו-זמנית, בשליטה על הפיצול של הקהל.

זה גם המקום שבו כלי המבחן המובנה של מטא (A/B Test) עדיף על ניסיון להריץ שתי מודעות באותו סט מודעות. במטא הרגילה, שתי מודעות באותו סט מתחרות זו בזו על אותם משתמשים ומחלקות ביניהן את התקציב באופן לא שווה, בהתאם לביצועים המוקדמים. הכלי המובנה מפצל את הקהל אוטומטית לשני חלקים נפרדים לגמרי, נותן לכל וריאציה חתיכה משלה, ומודד את התוצאה בסוף.

בכל מקרה של קמפיין שרץ, גם הבחירות המבוססות ביותר תלויות באיך הקמפיין נבנה מלכתחילה, וזו מפת קמפיין לידים בפייסבוק שממנה נגזר סדר העדיפויות של הבדיקות. המסגרת הגדולה של הקמפיין קובעת אילו שכבות בכלל פתוחות לבדיקה, ואילו כבר סגורות בגלל בחירות מוקדמות שנעשו בהקמה.

טבלת החלטה: מה בודקים, כמה זמן, ומהי הכרעה

הטבלה למטה נועדה לתלייה ליד מסך התכנון של הקמפיין הבא. היא מסכמת את סדר העדיפויות, את הזמן והמדגם המינימליים לכל שכבה, ואת גודל ההפרש שנחשב הכרעה משמעותית בפועל.

שכבה	מה בודקים	פוטנציאל שיפור	מינימום זמן ריצה	מינימום טפסים לוריאציה	הפרש שנחשב הכרעה
הצעה	הצעה אחרת לגמרי (אבחון מול הנחה, מדריך מול שיחה)	הכי גבוה	שבועיים	50	20% ומעלה
הוק / כותרת המודעה	פתיחה שונה במהותה (שאלה מול הצהרה, תרחיש מול מספר)	גבוה	10 עד 14 ימים	50	15% ומעלה
קהל / טירגוט	פילוח שונה (תחומי עניין מול קהל דומה, קבוצת גיל אחרת)	בינוני	שבועיים	80	20% ומעלה
טופס	שאלת סינון נוספת, שינוי כותרת הטופס	נמוך	שבוע עד עשרה ימים	100	10% ומעלה
קוסמטיקה (צבעים, גופנים, ניסוחים קטנים)	לא רלוונטי	זניח	לא שווה להריץ	לא שווה להריץ	אין

שני עקרונות שהטבלה שולפת החוצה. כל שינוי בשכבה גבוהה בטבלה שווה יותר מכל שינוי בשכבה נמוכה ממנה. בדיקת הצעה אחת עדיפה על עשר בדיקות של גופנים. הפרש שהוא פחות מרף ההכרעה של השכבה, עם מדגם קטן, כמעט תמיד יתפוגג בהמשך הריצה. לא לזרוק וריאציה שהפסידה ב-8% אחרי מדגם של 25 טפסים. סביר שהיא לא הפסידה בכלל.

איך להריץ בדיקה נקייה, שלב אחר שלב

לפני שמתחילים לבדוק, שווה להגדיר מראש כמה דברים: מה בדיוק המשתנה שמשתנה בין הוריאציות (רק אחד), מהו הרף שנחשב הכרעה בבדיקה הזאת, ובאיזה תאריך מסיימים ומחליטים. הגדרה מראש מונעת את הפיתוי לעצור בדיקה מוקדם ברגע שנראה שוריאציה אחת “בהובלה”, וזה בדיוק הרגע שבו מסקנות שגויות נופלות. שווה גם לרשום את המסקנה בגיליון פשוט אחרי כל בדיקה, כדי שאחרי שנה יהיה זיכרון של מה בדקנו ומה למדנו.

בדיקות A/B בקמפיין לידים לא הופכות קמפיין רע לקמפיין טוב. הן מזיזות טוב לטוב יותר, וזה שווה, אבל רק כשהמסגרת מוגדרת נכון. הבחירה מה לבדוק, לכמה זמן, ומתי לסיים, היא כמעט כל העבודה. ברגע שהתשתית הזאת קיימת, אפשר לבנות טבלה משלכם על סמך הטבלה כאן, לזמן מישהו שמבין בזה למאמץ הראשון, או להצטרף לליווי שכולל הרצת סדרת בדיקות מסודרת חודש אחד וניתוח בסוף.

שאלות נפוצות

מה זו בעצם בדיקת A/B בקמפיין לידים בפייסבוק?

בדיקת A/B היא הרצה של שתי וריאציות של אותו רכיב בקמפיין, באותו זמן, על קהל מפוצל, כדי לראות איזו מהן מייצרת תוצאה טובה יותר. הרכיב יכול להיות ההצעה, פתיחת המודעה, שכבת הטירגוט או שאלה בטופס. הבדיקה שווה רק כשמשנים משתנה אחד ומשאירים את כל השאר זהה, אחרת אי אפשר לדעת מה גרם להבדל.

מה סדר העדיפויות של הבדיקות?

מלמעלה למטה לפי פוטנציאל השינוי בתוצאה: קודם ההצעה עצמה, אחר כך ההוק של המודעה, אחר כך הקהל, ורק בסוף שינויים קטנים בטופס. בדיקה בשכבה גבוהה יכולה להזיז את עלות הליד באופן ניכר, בעוד ששינוי בטופס שווה כמה אחוזים בלבד. הסדר הזה נוצר מהזירה, לא מהתיאוריה.

כמה זמן צריך להריץ בדיקה?

לפחות שבוע מלא, כולל סוף שבוע, כי התנהגות הקהל בסופ“ש שונה מאמצע השבוע. שבועיים עדיף לרוב הבדיקות, במיוחד לשכבות הטירגוט והקהל שדורשות למידה מחדש של המערכת. פחות משבוע כמעט תמיד מייצר החלטה על סמך רעש.

כמה טפסים צריכים להיכנס בכל וריאציה כדי שאפשר יהיה להסיק?

עיקרון פרקטי מהשטח: פחות מכמה עשרות טפסים בכל וריאציה, כל הפרש הוא כנראה רעש. עדיף להמתין עד שכל וריאציה צברה לפחות 50 טפסים לפני שמסיקים. במקומות שבהם עלות הליד גבוהה וקצב הטפסים איטי, הבדיקה פשוט לא מתאימה, ועדיף לוותר עליה ולסמוך על עיקרון כללי.

האם צבע הכפתור או הגופן בקופי משנים משהו?

בקמפיין לידים בפייסבוק כמעט לא. הטופס עצמו של מטא סגור בפורמט אחיד ובלי שליטה של המפרסם על צבעים וגופנים. שינויים קוסמטיים במודעה עצמה משפיעים פחות ממה שרוב המפרסמים חושבים, כי בעל עסק לא ממלא טופס בגלל צבע, אלא בגלל הצעה שרלוונטית לו.

איך משתמשים בכלי A/B המובנה של מטא?

מטא מציעה כלי מובנה שנקרא מבחן A/B (A/B Test), שמפצל את הקהל אוטומטית בין הוריאציות ומונע מהן להתחרות זו בזו על אותם משתמשים. זו הדרך הנקייה יותר להרצה, בהשוואה לשתי מודעות שרצות באותו סט מודעות ומקבלות תקציב בלתי שווה. הכלי מדווח בסיום איזו וריאציה ניצחה, וגם באיזה פער.

אפשר לבדוק שתי הצעות שונות באותו קמפיין לידים?

כן, וזו אחת הבדיקות הכי כדאיות שיש. פשוט בונים שתי מודעות עם אותה מסגרת ויזואלית ואותו קופי מסביב, אבל שינוי בהצעה עצמה (למשל אבחון חינם מול הנחה של סכום קבוע). חשוב שגם הטופס יקבל התאמה מינימלית לניסוח ההצעה, כדי שהפניה לא תיפגע בין הקליק להשלמה.

מה עושים כשוריאציה אחת מובילה בפער קטן?

בפער של פחות מ-15% על מדגם קטן, מניחים שאין הבדל אמיתי ובוחרים לפי שיקול משני: איזו וריאציה קלה יותר לתחזוקה, איזו יותר קרובה לזהות המותג, איזו נותנת מבט קדימה למהלכים הבאים. פער קטן שנצפה על עשרה טפסים בכל צד הוא כמעט תמיד מקריות, גם כשהוא נראה משמעותי.

אפשר להשוות בין שתי מודעות שלא רצו באותו זמן?

לא. השוואה של מודעה שרצה בשבוע אחד למודעה שרצה בשבוע אחר היא לא בדיקה, אלא ניסיון להסיק מתוך רעש. יום חג, מזג אוויר, אירוע חדשותי גדול, שינוי בקצב האינפלציה של עלות הפרסום, כל אלה זזים בשקט בין שבועות. מבחן אמיתי חייב הרצה בו-זמנית.

אחרי כמה בדיקות הגיוני להפסיק ולעבור לשגרה?

שתי בדיקות טובות בחודש שוות עשר בדיקות רועשות. כדאי להגדיר מראש חמש עד שש בדיקות עיקריות למאמץ הראשוני של הקמפיין, ואחרי שהן רצו לעבור לתחזוקה: בדיקה אחת בכל שבועיים או שלושה, בשכבה שבאמת עדיין יש בה פוטנציאל. מעבר לזה זו התעסקות שגוזלת זמן על חשבון עבודה שווה יותר.