מה מניע את גודל מדגם בדיקות A/B
גודל המדגם של בדיקת A/B תלוי בעיקר בארבע אפשרויות: רמת הביטחון שלך, עוצמת היעד שלך, שיעור ההמרה הבסיסי שלך וההשפעה המינימלית הניתנת לזיהוי שאכפת לך ממנה.
עליות צפויות קטנות יותר דורשות יותר תנועה, בעוד שעליות צפויות גדולות יותר דורשות פחות. שיעורי המרה בסיסיים נמוכים יותר נוטים גם הם להגדיל את המדגם הנדרש.
למה זה חשוב
ביצוע ניסוי עם מעט מדי נתונים מקל על החמצת הבדלים אמיתיים או תגובת יתר לרעש אקראי. תכנון מראש של גודל המדגם מפחית את הפיתוי לעצור מוקדם על סמך תוצאות לא יציבות.
דף זה נותן לך יעד מעשי לכל גרסה, כך שתוכל לשפוט האם בדיקה מציאותית לפני ההשקה.
- הערכת צרכי התנועה לפני ההשקה
- קבעו משכי זמן ריאליסטיים לבדיקות
- הימנעו מניסויים בעלי עוצמה נמוכה
- יישרו צוותים סביב מה שנחשב כעלייה משמעותית
כיצד להשתמש בתוצאה
התוצאה לכל וריאנט מראה לך בערך כמה תצפיות כל וריאנט אמור לקבל. גודל המדגם הכולל הוא התנועה המשולבת על פני שני הוריאנטים.
אם התוצאה נראית גדולה מדי עבור התנועה הזמינה שלך, הצעד הבא בדרך כלל הוא לשקול מחדש את ההשפעה המינימלית הניתנת לזיהוי, ולא להריץ את אותה בדיקה עם פחות נתונים.
כיצד להפוך את התוצאה לתוכנית בדיקה
לאחר שיש לכם יעד דגימה לכל גרסה, השוו אותו לתנועה השבועית כדי להעריך כמה זמן הניסוי יימשך. זה עוזר לכם להחליט אם הבדיקה ריאלית לפני ביצוע עבודת התכנון וההנדסה.
גודל המדגם הוא רק חלק אחד מאיכות הניסוי. מעקב נקי, קו בסיס יציב וכלל עצירה ברור עדיין חשובים מכיוון שמדגם גדול לא יכול להציל בדיקה שבוצעה בצורה גרועה.
- הערכת משך זמן מתנועה לפי גרסה, לא מתנועה כוללת באתר
- בחר את האפקט המינימלי הניתן לזיהוי לפני ההפעלה
- שמור על יציבות ההקצאה והמעקב במהלך הריצה
- הימנעו מעצירה מוקדמת כאשר התוצאות נראות מבטיחות באופן זמני