Haben Sie genug Traffic für A/B-Tests?

Geben Sie Ihre monatlichen Besucher und Ihre Conversion-Rate ein. Der Checker sagt Ihnen in einfachen Worten, welche Art von Tests Ihr Traffic tatsächlich zulässt.

Monatliche Besucher

Besucher pro Monat auf der Seite, die Sie testen möchten

Conversion-Rate (CR %)

Aktuelle Conversion-Rate dieser Seite

%

Anzahl der Varianten

Inklusive Kontrollgruppe

Sie kennen Ihre Conversion-Rate nicht? Starten Sie mit einem Branchen-Benchmark:


Ihr Traffic-Urteil

Ja, aber nur für mutige Änderungen. Ein 4-Wochen-Test kann bei Ihrem Traffic nur einen Uplift von 44,8 % oder mehr erkennen. Testen Sie große Würfe wie Angebote, Layouts und Überschriften. Verzichten Sie auf kleine Anpassungen, denn diese erreichen hier nie Signifikanz.

Zum Vergleich: Um einen typischen Uplift von 20 % zu erkennen, braucht es etwa 21.116 Besucher pro Variante. Bei Ihrem Traffic entspricht das ungefähr 18 Wochen Testdauer.

TestdauerBesucher pro VarianteKleinster erkennbarer Uplift
2 Wochen2,33366%
4 Wochen4,66644.8%
6 Wochen7,00035.9%
8 Wochen9,33330.8%

Welche Art von Änderung gewinnt so deutlich?

Mittlerer Gewinn-Uplift nach Änderungstyp, aus echten Tests auf Mida: Hero-Bild 20,2 %, Styling 22,2 %, Fließtext 22,8 %, CTA-Text 24,7 %, Layout 25 %, Preisdarstellung 27,5 %, Headline 29,1 %, Split-URL 32,3 %, Social Proof 32,5 %, Formular 71,1 %. Lesen Sie dies zusammen mit der Tabelle oben: Liegt Ihr kleinster nachweisbarer Uplift über dem Median eines Änderungstyps, würden die meisten Gewinner dieses Typs mit Ihrem Traffic nie Signifikanz erreichen. Alle Daten finden Sie in den A/B-Test-Benchmarks.

Mida plant das bei jedem Test für Sie und sagt Ihnen, wann ein Ergebnis belastbar ist. Kostenlos für bis zu 100.000 getestete Nutzer pro Monat, was für die meisten Websites auf dieser Seite ausreicht.

Mida kostenlos testen

Wie viel Traffic brauchen Sie wirklich?

Es gibt keine einzelne Zauberzahl, denn der benötigte Traffic hängt von zwei Faktoren ab: Ihrer Conversion-Rate und der Größe des Uplifts, den Sie erkennen möchten. Niedrige Conversion-Raten und kleine Uplifts treiben den Bedarf schnell in die Höhe. Bei einer Conversion-Rate von 2 % braucht es für einen relativen Uplift von 20 % bei 95 % Konfidenz und 80 % Power etwa 21.000 Besucher pro Variante. Bei einer Conversion-Rate von 10 % benötigt derselbe Test etwa 3.800.

Deshalb fragt dieser Checker nach Ihren Zahlen, statt einen Schwellenwert zu nennen. Er rechnet Ihren monatlichen Traffic in Besucher pro Variante über Zeiträume von 2 bis 8 Wochen um und kehrt dann die Standardformel für die Stichprobengröße um, um den kleinsten Uplift zu ermitteln, den jeder Zeitraum zuverlässig erkennen kann. Das Ergebnis basiert auf dem 4-Wochen-Zeitraum, dem Idealwert, innerhalb dessen die meisten Teams testen. Die Faustregeln nach Traffic-Bereich finden Sie in Wie viel monatlichen Traffic Sie für den Start mit A/B-Tests brauchen.

So lesen Sie Ihr Ergebnis

Ja. Ein 4-Wochen-Test kann einen Uplift von 20 % oder weniger erkennen. Das deckt die Ergebnisse ab, die die meisten guten Varianten tatsächlich erzielen, sodass klassische A/B-Tests für Sie funktionieren: Textänderungen, Layoutänderungen, Preisdarstellung, einfach alles.

Ja, aber nur für mutige Änderungen. Ein 4-Wochen-Test kann nur Uplifts zwischen 20 % und 50 % erkennen. Solche Uplifts kommen vor, aber fast nur durch große Würfe: ein anderes Angebot, eine umstrukturierte Seite, ein neuer Überschriften-Ansatz. Testen Sie solche Dinge. Ein Test der Button-Farbe ist bei diesem Traffic ein Münzwurf, der nie endet.

Noch nicht. Selbst großzügige Testzeiträume können nur Uplifts über 50 % erkennen, die echte Varianten selten liefern. Klassische Signifikanztests liefern meist "nicht signifikant", egal wie gut Ihre Ideen sind. Am ehrlichsten ist es, bis zum Traffic-Wachstum anders zu arbeiten; siehe unten.

Was tun, wenn der Traffic nicht reicht

Testen Sie größere Würfe. Der benötigte Traffic sinkt mit dem Quadrat der Effektgröße. Eine Änderung, die mutig genug ist, die Conversions plausibel um 40 % zu bewegen, braucht nur ein Viertel des Traffics einer Änderung von 20 %. Testen Sie Angebote, Seitenstruktur und Überschriften-Ansätze, nicht Farbtöne und Abstände.

Testen Sie dort, wo der Traffic ist. Führen Sie Ihren Test auf der Seite mit dem meisten Traffic im Funnel durch oder in einem Schritt mit hoher Conversion. Ein Checkout-Schritt mit 40 % Conversion braucht weit weniger Besucher als eine Landingpage mit 1 %.

Bündeln Sie Änderungen. Fassen Sie mehrere zusammengehörige Verbesserungen in einer Variante zusammen. Sie erfahren weniger über jede einzelne Änderung, aber der Gesamteffekt ist größer und testbar. Später, wenn der Traffic wächst, können Sie die Bündelung wieder auflösen.

Umsetzen und beobachten. Bei weniger als etwa 1.000 Besuchern pro Monat setzen Sie die Verbesserung um, an die Sie glauben, spielen sie für alle aus und vergleichen einige Wochen davor und danach. Das ist ein schwächerer Beleg als ein kontrollierter Test, aber besser als ein Test, der mathematisch zu keinem Ergebnis kommen kann.

Probieren Sie unsere weiteren kostenlosen A/B-Test-Tools

Häufig gestellte Fragen

Wie viel Traffic benötigen Sie für A/B-Tests? +
Das hängt von Ihrer Conversion-Rate und der Größe des Uplifts ab, den Sie erkennen möchten, nicht von einer einzigen magischen Zahl. Als Richtwert: Bei einer Conversion-Rate von 2 % braucht man, um einen relativen Uplift von 20 % bei 95 % Konfidenz und 80 % Power zu erkennen, etwa 21.000 Besucher pro Variante. Bei einer Conversion-Rate von 10 % benötigt derselbe Test etwa 3.800 pro Variante. Websites mit etwa 10.000 oder mehr monatlichen Besuchern auf der getesteten Seite können bei mutigen Änderungen in der Regel aussagekräftige Tests durchführen; unter etwa 1.000 monatlichen Besuchern kommt klassisches A/B-Testing selten zu einem Ergebnis.
Kann ich mit weniger als 1.000 Besuchern pro Monat A/B-Tests durchführen? +
Mit klassischen Signifikanztests nur selten. Bei diesem Traffic können selbst in einem 8-wöchigen Test meist nur Uplifts von 50 % oder mehr erkannt werden, und echte Gewinnervarianten verändern eine Kennzahl selten so stark. Bessere Optionen: Testen Sie jeweils ein mutiges Redesign und bewerten Sie es über einen längeren Zeitraum, bündeln Sie mehrere Änderungen in einer Variante, testen Sie stattdessen auf Ihrer Seite mit dem meisten Traffic oder nutzen Sie qualitative Methoden, bis der Traffic wächst.
Was kann ich tun, wenn ich nicht genug Traffic für A/B-Tests habe? +
Vier praktische Ansätze: Testen Sie größere Veränderungen (ein neues Angebot, Layout oder eine neue Überschrift bewegt die Zahlen weit mehr als eine Button-Farbe, und große Uplifts lassen sich mit weniger Traffic erkennen), testen Sie dort, wo der Traffic ist (Ihre Seite mit dem meisten Traffic, nicht Ihre Lieblingsseite), bündeln Sie mehrere zusammenhängende Änderungen in einer einzigen Variante, damit es einen größeren Effekt zu messen gibt, und verlängern Sie den Testzeitraum, wobei Sie akzeptieren, dass nur große Effekte zu einem Ergebnis führen.
Wie viel Traffic ist für A/B-Tests mindestens nötig? +
Ein allgemeingültiges Minimum gibt es nicht, aber nützliche Faustregeln: Unter etwa 10.000 monatlichen Besuchern auf der getesteten Seite sind nur sehr große Änderungen (grob Uplifts ab 30 %) erkennbar, weshalb klassisches A/B-Testing dann Glückssache ist. Zwischen 10.000 und 100.000 monatlichen Besuchern können Sie mutige Änderungen testen, etwa Layouts, Angebote und Ansätze für Überschriften. Ab etwa 100.000 monatlichen Besuchern können Sie die kleineren Uplifts erkennen, die iteratives Testen hervorbringt. Geben Sie oben Ihre eigenen Zahlen ein, statt sich auf die Faustregel zu verlassen, denn Ihre Conversion-Rate verschiebt die Schwelle ebenso stark wie Ihr Traffic.
Wie berechne ich den minimal erkennbaren Effekt (MDE) für meinen Traffic? +
Der minimal erkennbare Effekt ist der kleinste relative Uplift, den ein Test bei seiner Stichprobengröße zuverlässig erkennen kann. Dieser Checker berechnet ihn für Sie: Er rechnet Ihre monatlichen Besucher in Besucher pro Variante über Zeiträume von 2, 4, 6 und 8 Wochen um und löst dann die Standardformel für die Stichprobengröße rückwärts auf, um den kleinsten MDE zu ermitteln, den jeder Zeitraum bei 95 % Konfidenz und 80 % Power unterstützt. Ist der angezeigte MDE größer als der Uplift, den Sie realistisch erwarten, kann der Test zu keinem Ergebnis kommen, und Sie brauchen mehr Traffic, eine mutigere Änderung oder einen längeren Zeitraum.
Verringert eine höhere Conversion-Rate den benötigten Traffic? +
Ja, deutlich. Die Besucherzahl, die nötig ist, um denselben relativen Uplift zu erkennen, sinkt in etwa proportional zu Ihrer Conversion-Rate: Eine Seite mit 10 % Conversion-Rate braucht für denselben Test etwa ein Fünftel des Traffics einer Seite mit 2 %. Deshalb ist es oft machbar, einen Schritt mit hoher Conversion (etwa das Hinzufügen zum Warenkorb oder die Anmeldung) zu testen, wenn der Test einer Landingpage mit niedriger Conversion nicht machbar ist.

Weitere kostenlose A/B-Test-Rechner:

Stichprobengrößen-Rechner Laufzeit-Rechner Signifikanz-Rechner SRM-Rechner

Die A/B-Test-Plattform für Menschen, denen
Website-Performance wichtig ist

Mida ist 10-mal schneller als alles, was Sie je in Betracht gezogen haben. Überzeugen Sie sich selbst.

Dekorative GrafikDekorative GrafikDekorative GrafikDekorative Grafik