معدل التحويل الأساسي في تخطيط اختبار A/B

يختلف تأثير التغيير من 2% إلى 3% عن تأثير التغيير من 20% إلى 21%، على الرغم من أن كليهما قد يبدو بسيطًا نظريًا. يؤثر خط الأساس على تباين النتائج، وبالتالي يؤثر على حجم العينة المطلوب.

ولهذا السبب، فإن بيانات التحكم الحديثة أفضل من التخمين التقريبي.

عادةً ما تُستمد أفضل البيانات الأساسية من بيانات حديثة وقابلة للمقارنة من نفس خطوة مسار التحويل أو سياق التجربة. إذا تغيرت الموسمية أو مصدر الزيارات أو تركيبة الجمهور، فقد تكون البيانات الأساسية القديمة مضللة.

إذا كان عدم اليقين مرتفعًا، يقوم مخططو الاختبار أحيانًا بحساب نطاق باستخدام أكثر من خط أساس معقول.

تجنّب استخدام الأهداف الطموحة كمعايير أساسية. يجب أن يعكس المعيار الأساسي الواقع الحالي، لا ما تأمل في تحقيقه. قد تؤدي المعايير الأساسية المتفائلة إلى تقديرات مضللة لحركة المرور وتخطيط غير سليم للاختبارات.

أفضل أساس هو البيانات الحديثة من نفس الجمهور ونفس المرحلة في مسار التحويل التي تنوي اختبارها. قد يكون المتوسط ​​العام للموقع مضللاً إذا أُجريت التجربة على شريحة أضيق أو أكثر تقلباً.

عندما يكون عدم اليقين مرتفعاً، فمن الأفضل غالباً تقدير نطاق أحجام العينات باستخدام أكثر من خط أساس معقول. وهذا يمنح الفريق نطاقاً تخطيطياً بدلاً من شعور زائف بالدقة.