[Product Release] Neue A/B-Test-Ergebnisseite

Man wird nicht zur Top Rated A/B-Testing-Lösung oder zu einer der am schnellsten wachsenden Start-Ups Europas gekürt, ohne sich ständig weiterzuentwickeln! Nach einem Jahr harter Arbeit mit Kunden und Consultants haben wir unsere A/B-Test-Ergebnisseite verbessert und um neue Features erweitert, um noch besser den Anforderungen unserer User gerecht zu werden. Die Beta-Version der neuen Seite ist ab sofort über das Kameleoon-Dashboard erhältlich. Holen Sie sich eine Tasse Kaffee und lesen Sie mehr über alle Neuheiten!

Anzeige von empfohlenen Aktionen

Auf einen Blick sehen Sie die Aktionen, die wir speziell für Ihre Tests empfehlen. So errechnet Kameleoon z.B. in Echtzeit die verbleibende Zeit, bevor Sie Ihre Testergebnisse auswerten können. Müsste der Test noch länger laufen, informieren wir Sie und geben die Zahl der voraussichtlichen Tage vor Testende an. Automatische Audience-Empfehlung Die Experten unter Ihnen wissen, dass ein A/B-Test je nach Besuchersegment unterschiedlich ausfallen kann. In manchen Fällen kann eine Variante bei Segment 1 gut ankommen, bei Segment 2 dagegen gar nicht. Der gesamten Audience die gleiche Variante anzubieten, ist daher nicht immer sinnvoll. Damit Sie wirklich alle Businesschancen nutzen, analysieren unsere hauseigenen Machine Learning-Algorithmen permanent die Performance Ihrer Tests und identifizieren die Varianten, die am besten bei gegebenen Besuchersegmenten ankommen. Sie kümmern sich um die gesamte Ergebnisanalyse und verwandeln automatisch Ihre A/B-Tests in Personalisierungsmöglichkeiten. In einem Klick können Sie die Erfahrungen bestimmter Besuchersegmente anpassen oder neue Erfahrungen für Segmente mit großem Wachstumspotenzial schaffen. Dieses Feature ist in Kürze erhältlich. Für nähere Informationen können Sie eine Demo anfordern.  

Neue Dataviz und verbesserte Segmentierung

Unser Versprechen: Schneller Zugriff auf relevante Daten, d.h. für Sie schnellere Entscheidungen! Unsere Ergebnisseite basiert auf leistungsstarker Dataviz und zahlreichen Segmentierungsmöglichkeiten und lässt sich so perfekt an Ihre Bedürfnisse anpassen.

Neue Indikatoren für fundierte Entscheidungen

Wir haben neue Performance-Indikatoren in unsere Ergebnisseite integriert.

• Konfidenzintervall: Über die durchschnittliche, auf registrierten Conversions basierende Verbesserungsrate hinaus bieten wir nun auch das Konfidenzintervall dieser Rate, d.h. wir geben die Wahrscheinlichkeit an, mit der die Verbesserung zwischen zwei Werten liegt.

• Verlässlichkeit der Ergebnisse: Als erprobter A/B-Tester wissen Sie natürlich, dass ein Test erst beendet werden kann, wenn das Konfidenzniveau stabilisiert ist. Dieser Graph steht nach wie vor zur Verfügung. Hinzugefügt wurde die bildliche Darstellung der Stabilisierung des Konfidenzniveaus.

Sind alle Kästchen rechts markiert, ist das Niveau stabilisiert und der Test kann beendet werden.

Neue, verbesserte Graphiken

Viele unserer Kunden verbinden mehrere Ziele mit ihrem Test. Und das ist richtig so, denn es ermöglicht, den Einfluss der Optimierungshypothesen auf die gesamte User Journey und alle Businessziele zu verstehen. Deshalb haben wir unsere Gesamtansicht (das "Spinnengewebe") überarbeitet, in der Sie die Performance aller Varianten bzgl. der unterschiedlichen Ziele auf einen Blick erkennen können. Wir haben die Ergebnisseite darüber hinaus um neue Graphen bereichert: Conversion-Rate, Zahl der Besuche, Zahl der Conversions, Konfidenzlevel, usw. Und das ist noch nicht alles: Sie können die Ergebnisse Ihres Ziel innerhalb des Graphen aufschlüsseln. Neue Graphen folgen in den nächsten Monaten. Hier eine kleine Vorschau:

• Traffic-Aufteilung pro Variante
• Entwicklung der Traffic-Aufteilung zwischen Varianten
• Möglichkeit, Heatmaps in die Ergebnisseite einzufügen und untereinander zu vergleichen

Sie haben außerdem die Möglichkeit, einen Teil des Graphen heranzuzoomen und die Testergebnisse einer gegebenen Zeitspanne genauer zu analysieren.

Erweiterte Segmentierung und Filterung der Ergebnisse

Die neue Ergebnisseite geht über die einfache Aufschlüsselung der Ergebnisse pro Ziel oder nach alten/neuen Besuchern hinaus. Sie können Ihre Ergebnisse nach 25 Kriterien filtern oder aufschlüsseln und die Auswirkungen einzelner Elemente (Wetter, Herkunft des Traffics, Zeitspanne des Besuchs, aufgerufene Seiten, usw.) auf die Conversion-Rate identifizieren.

Differenzierung zwischen einmaliger und multipler Conversion pro Besuch oder zwischen Besuch und Besuchern

Die neue Ergebnisseite bietet eine höhere Flexibilität und kann so noch genauer an Ihre Businessziele angepasst werden. Sind Sie E-Merchant? Dann ist eine Steigerung um 10% des Warenkorbwerts unter dem Blickwinkel „pro Besucher“ ganz unterschiedlich zu deuten als unter dem Blickwinkel „pro Besuch“. Basiert Ihr Business Model auf Mitgliedschaft oder Werbeeinnahmen (Preisvergleich-Webseite, Medien) und Sie möchten die Klickrate optimieren? In diesem Fall ist es sinnvoll, multiple Conversions (pro Besucher) mit der Gesamtzahl der Besuche mit Conversion zu vergleichen.

Steuern Sie Ihre A/B-Tests in Echtzeit

Echtzeit ist das Herzstück von Kameleeoons Technologie, sowohl bei der Analyse als auch bei der Aktivierung der Daten. Dank der kontinuierlichen Verbesserung unserer Statistik-Features wird die inhärente Latenz auf ein Minimum reduziert. Auf der Ergebnisseite bringt Echtzeit folgende Vorteile:

Zugang zu Daten sofort nach Testbeginn

Wenn Sie Analytics-Lösungen benutzen, kennen Sie bestimmt das Warten während der Aktualisierung der Daten. Auf unserer neuen Ergebnisseite brauchen Sie nicht mehrere Stunden zu warten, um die neuesten Daten einzusehen. 

Echtzeit-Benachrichtigung über Testverhalten

Sie können nicht permanent Ihr Dashboard im Auge behalten. Deshalb haben wir ein Benachrichtigungssystem entwickelt, das Sie automatisch über die wichtigen Aspekte Ihres Tests informiert. Die Benachrichtigungen können personalisiert werden. Sie können die Benachrichtigungen so einstellen, dass Sie informiert werden, wenn eine Variante klar gewonnen hat, sobald die definierte Schwelle des Konfidenzlevels erreicht ist, eine Anomie bei der Conversion entdeckt wurde, oder über andere Informationen, die wichtig für Sie sind.

Verfolgen Sie die Performance Ihrer Tests auch von unterwegs

Wir wissen, dass Sie nicht nur an Ihrem Schreibtisch arbeiten. Deshalb können Sie schon ganz bald die Ergebnisseite auch auf mobilen Endgeräten aufrufen. Und die Performance Ihrer Tests immer und überall verfolgen.

Auf Ihre Businessziele zugeschnittene Ergebnisse

Unsere Statistiken passen sich Ihren Bedürfnissen an, damit Sie so schnell wie möglich verlässliche Ergebnisse erhalten. Dafür bieten wir zwei unterschiedliche Methoden: Den Frequentist-Ansatz für Webseiten mit hohen Besucherzahlen und den Bayes’schen Ansatz, mit dem Tendenzen auch ohne viel Traffic relativ schnell ausgemacht werden können (wahrscheinliche Ergebnisse werden angezeigt und können den Entscheidungszyklus beschleunigen). Allerdings muss bei beiden Methoden das Konfidenzlevel stabilisiert sein, bevor die Testergebnisse als Entscheidungshilfen eingesetzt werden können.

Überarbeitete UX

Unsere neue Ergebnisseite soll dazu beitragen, Ihre tägliche Arbeit zu vereinfachen. Wir haben alle Informationen und Features nach Relevanz sortiert. Die Parameter, die sich auf die Testdaten auswirken, sind oben auf der Seite angesiedelt, die Testeinstellungen sind im rechten Panel zusammengefasst.

Teststeuerung direkt auf der Ergebnisseite

Mit der neuen Ergebnisseite können Sie die Traffic-Aufteilung verändern, eine Variante bearbeiten, eine Simulation (Targeting und Prüfung) oder Voransicht starten, ohne den Editor öffnen zu müssen. Diese Aktionen können direkt auf der Ergebnisseite vorgenommen werden. Wir haben eine Timeline hinzugefügt, auf der alle Aktionen eines Tests nachverfolgt werden können.   

Vereinfachtes Teilen der Ergebnisse

Es ist für eine effiziente Optimierungskultur sehr wichtig, Testergebnisse intern zu teilen. So werden alle Teams einbezogen und motiviert. Bisher konnte die Ergebnisseite nur einsehen, wer in den Kameleoon-Account eingeloggt war. Jetzt können Ergebnisse über eine passwortgeschützte öffentliche URL geteilt werden. Die Beta-Version ist ab sofort direkt über das Kameleoon-Dashboard zugänglich. Halten Sie die Augen offen! In den nächsten Wochen werden all diese neuen Features progressiv eingestellt!