דוגמאות לגודל מדגם של בדיקות A/B

דמיינו דף עם שיעור המרה בסיסי של 10% ועלייה יעדית של 2 נקודות אחוז. סוג כזה של הגדרה מייצר לעתים קרובות דרישת דגימה ניתנת לניהול אך עדיין משמעותית.

זוהי דוגמה טובה משום שהיא נמצאת בטווח שצוותי צמיחה ומוצר רבים עובדים איתו בפועל.

כעת דמיינו קו בסיס של 2% ועלייה של 0.3 נקודות אחוז. המדגם הנדרש עולה במהירות מכיוון שההשפעה קטנה וקו הבסיס נמוך יחסית.

זו הסיבה שאפקטים קטנים מאוד של מטרה יכולים להפוך ניסויים ללא מעשיים עבור חוויות עם תנועה נמוכה.

דוגמאות כמו אלה מראות שהשאלה המרכזית אינה רק כמה תנועה יש לכם. אלא האם ההשפעה שאכפת לכם ממנה גדולה מספיק כדי לזהות אותה בתוך התנועה שאתם יכולים לאסוף באופן מציאותי.

זה מה שהופך תכנון גודל מדגם למסנן אסטרטגי לניסויים.

דוגמאות שימושיות ביותר לבניית אינטואיציה לגבי האופן שבו הנחות מקיימות אינטראקציה. הן מראות כיצד קו בסיס, גודל אפקט ועוצמה יכולים להזיז את דרישת התנועה הרבה יותר ממה שאנשים מצפים.

מה שדוגמאות לא צריכות לעשות זה להחליף את תשומות התכנון שלך. אפילו מבחן שנראה דומה מאוד יכול להזדקק לדגימה שונה אם קהל היעד, המדד או קו הבסיס מתנהגים אחרת.