Herkömmliche Statistiken für Offlinedaten gibt es schon seit über 100 Jahren. Die ursprünglichen Methoden helfen Unternehmen heute allerdings kaum noch dabei, Entscheidungen auf Basis von Echtzeitdaten zu fällen. Wenn Sie sich Ergebnisse in Echtzeit ansehen, wie dies bei den meisten Optimierungsplattformen möglich ist, erhalten Sie zwar beeindruckende Ergebnisse, diese Ergebnisse haben häufig allerdings kaum Substanz. Wenn Sie bestimmte Voraussetzungen missachten, kann Ihre Fehlerquote bis zu 30 % betragen.
Zu diesen Voraussetzungen zählt zum Beispiel das Festlegen einer Samplegröße und das Definieren eines minimal messbaren zu erreichenden Effekts. Beachten Sie diese Voraussetzungen nicht, haben Änderungen an Ihrer Website oder an Ihrem Produkt bestenfalls keinerlei Auswirkungen, im schlimmsten Fall beeinträchtigen sie allerdings Ihr Gesamtergebnis.
Blog lesenUnsere neue Stats Engine unterstützt Sie bei Ihren Experimenten und in Ihrer Entscheidungsfindung – ganz ohne Voraussetzungen. Gemeinsam mit Statistikern der renommierten Stanford University haben wir einen neuen und revolutionären statistischen Ansatz zur Optimierung der Nutzererfahrung entwickelt. Als Grundlage für diesen Ansatz dient unsere Erfahrung im Umgang mit über 8.000 Optimizely-Kunden, die mit unserer Hilfe über 7 Milliarden Benutzererfahrungen optimiert haben.
E-Book herunterladenBei herkömmlichen Statistiken kann das Abrufen der Ergebnisse vor Erreichen der festgelegten Samplegröße dazu führen, dass Sie Ergebnisse für signifikant halten, die es in Wirklichkeit gar nicht sind. Mit der Stats Engine können Sie Ihre Ergebnisse jederzeit ansehen. Dank sogenannter Folgetests steigt die statistische Signifikanz Ihrer Ergebnisse mit der Zeit und der Datenmenge. Das Warten auf Ergebnisse hat ein Ende.
Je mehr Ziele und Varianten Sie einem Experiment hinzufügen, desto höher liegt das Risiko, dass Sie verfälschte Ergebnisse erhalten. Die Stats Engine von Optimizely korrigiert die Ergebnisse beim Einsatz vieler Ziele und Varianten mithilfe der False Discovery Rate. Sie können also unbegrenzt viele Ziele und Varianten testen, ohne dass Sie ungenaue Ergebnisse zu befürchten haben.
Das Festlegen einer Signifikanz von 95 %
führt zu
zu einer richtigen Entscheidung.
Das Festlegen einer Signifikanz von 95 %
führt zu
zu einer richtigen Entscheidung, falls Sie die Risiken nicht kennen.*
* Wir haben Millionen A/A-Tests mit beiden Frameworks simuliert und die jeweilige Fehlerquote berechnet. Dafür haben wir den Prozentsatz der Experimente bestimmt, für die unter Einhaltung einer Continuous Monitoring-Richtlinie eine Gewinner- oder Verlierervariante ermittelt wurde (über 1.000 Besucher).
Möchten Sie wissen, wie sich die Stats Engine auf Ihre Ergebnisse auswirkt?
Mehr InformationenTreffen Sie anhand Ihrer Ergebnisse immer statistisch fundierte Entscheidungen, sobald die Daten verfügbar sind.
Sie müssen im Voraus keine Samplegröße oder Testdauer festlegen. Zudem können Sie sich abschließende Ergebnisse bis zu zweimal schneller ansehen.
Wie Sie Ihre Tests ausführen, muss nicht geändert werden. Die Stats Engine funktioniert so, wie Sie es von einem solchen Tool erwarten, ohne dass zusätzlicher Arbeitsaufwand für Sie anfällt.
Antworten auf Ihre häufig gestellten Fragen
Optiverse öffnen