מחשבון מבחן A/B - מובהקות סטטיסטית

מובהקות סטטיסטית פירושה שההבדל בין הווריאנטים שלך אינו נובע ככל הנראה מצירוף מקרים. תוצאה נחשבת בדרך כלל למובהקת ברמת ביטחון של 95% - כלומר יש רק סיכוי של 5% שההבדל הוא אקראי.

באופן כללי, אתה צריך לפחות 1,000 מבקרים לכל וריאנט לתוצאות משמעותיות. המספר המדויק תלוי בשיעור ההמרה הבסיסי שלך ובאפקט המינימלי שניתן לזיהוי. הבדלים קטנים יותר דורשים יותר נתונים.

הרץ מבחנים לפחות 1-2 מחזורים עסקיים מלאים (בדרך כלל 2-4 שבועות) גם אם אתה מגיע למובהקות מוקדם יותר. זה מתחשב בהשפעות של ימי השבוע ושינויים בתנועה. לעולם אל תפסיק מבחן מוקדם על סמך תוצאות ראשוניות.