Erste Schritte mit A/B-Tests — SBOS Insights

Von Jonathan Corley.

5 Minuten Lesedauer

Das Corporate-Marketing-Team von Sitecore hat in diesem Jahr SBOS hinzugezogen, um die Aktualisierung Sitecore.com zu unterstützen. Dieser Blog ist Teil einer Serie, in der beschrieben wird, wie SBOS die Optimierung der Website für den Unternehmenswert unterstützt hat. 

Nachdem wir bei einem Workshop vor Ort eine strategische Roadmap entwickelt hatten, setzten wir mehrere neue Personalisierung Szenarien auf dem gesamten Gelände ein, um sie für Unternehmenswert zu optimieren. Wir haben auch bestehende Taxonomien verfeinert und Foundation-Datenpunkte im Marketing Control Panel konfiguriert, einschließlich Ziele, Kampagnentaxonomie und Profile für den Musterabgleich. 

Durch die Ausrichtung der Ziel-Conversions (und ihres relativen Werts) auf der gesamten Website wurden grundlegende Engagement-Metriken wie der Wert pro Besuch festgelegt. Da wir in der Lage waren, das Engagement von Besuchern und Segmenten auf der Website zu messen, waren wir bereit, A/B-Tests zu untersuchen.

Wir begannen mit einem Aufruf, Teams für die Einführung von A/B-Tests auf mehreren Seiten auszurichten, um die Konversion spezifischer Ziele zu verbessern. Darin haben wir einige Konzepte besprochen, die in dieses Videos behandelt werden, darunter: Starten eines Tests, Messen der Ergebnisse und Organisieren eines laufenden Testprogramms.  

Content Testing in Sitecore

In Sitecore befindet sich das Experience Optimization Tool direkt auf dem Launchpad. Im Sitecore-Lexikon ist der Begriff selbst ein Synonym für Testen. Die Erlebnisoptimierung ermöglicht es Marketern, verschiedene Erlebnisse – verschiedene Versionen von Inhalten – zu zeigen, um zu erfahren, was das Engagement auf der Website am besten fördert. Die Testfunktionen sind in Sitecore flexibel. Ich schaue mir gerne die verschiedenen Testmöglichkeiten in zwei Kategorien an: Tests mit einer Variablen oder Tests mit mehreren Variablen

Tests mit einer Variablen

Ich empfehle, mit einem Einzelvariablentest zu beginnen.

Der gebräuchlichste Test ist ein einfacher Komponententest, bei dem einige verschiedene Varianten einer einzelnen Komponente auf einer Seite erstellt und gegeneinander getestet werden. Marketer können auch ganze Seitenlayouts mit einem Versionstest oder Seitenersetzungstest testen. Bei einem Versionstest werden verschiedene Versionen einer Seite verglichen, während bei einem Seitenersetzungstest die Auswirkungen völlig unterschiedlicher Seiten in der Websitestruktur verfolgt werden.

Ob Komponenten, Versionen oder ganze Seiten, alles drei dieser Tests durchlaufen Varianten einer einzelnen Variablen. 

Tests mit mehreren Variablen

Bei den letzten beiden Testtypen handelt es sich um Tests mit mehreren Variablen: Personalisierung Tests und multivariate Tests.

Personalisierungstests können für Komponenten gestartet werden, für die Personalisierung Regeln bereits konfiguriert sind. Sie helfen Ihnen, die Wirkung personalisierter Inhalte besser zu verstehen. Wenn Sie einen Personalisierungstest starten, "hält" Sitecore automatisch die Hälfte des Traffic, der jede Bedingung erfüllt, als Kontrollgruppe zurück. Diese Kontrollgruppe wird der Standardtestvariante ausgesetzt. Ich habe vor, die Hold-Back-Strategie (bei der Sitecore die Hälfte der Traffic, die jede Personalisierung-Regel erfüllt, als Kontrollgruppe "zurückzuhalten") und die Messung Personalisierung Tests in einem kommenden Blog zu diesem Thema zu beschreiben.

Schließlich haben Sie die Möglichkeit, multivariate Tests zu starten. Stellen Sie sich vor, Sie haben eine Heldenkomponente mit 3 verschiedenen Varianten und einen Call-to-Action mit 3 verschiedenen Varianten. In einem multivariaten Test durchläuft das System alle möglichen Kombinationen dieser beiden Komponenten (dies nimmt exponentiell zu und schafft 9 verschiedene mögliche Erfahrungen). Multivariate Tests können leistungsfähig sein, aber im Vergleich zu einem Test mit einer einzelnen Variablen erfordern sie ein viel größeres Volumen an Traffic, um die statistische Signifikanz nachzuweisen.

Planung von Hypothesen

Sie können hier eine Kopie der Test Hypothesis template.pptx.

AB-Testbild 1.png

Oben sehen Sie ein Beispiel für eine Hypothese, die während des SBOS Engagements für Sitecore.com generiert wurde. Auf hoher Ebene testen Sitecore-Marketer die Auswirkungen der Optimierung des Untertitels auf der Seite "Der Weg zur Personalisierung". Standardmäßig hat der Held einen kurzen einzelnen Satz. Die Testvariante ist mit einem Untertitel versehen, der Gründe für den Download des Whitepapers auflistet. Diese einseitige Hypothesenfolie listet den Testtyp auf – einen einfachen A/B-Komponententest. Die Vermarkter fügten die Seiten-URL und eine einfache Hypothese in einfachem Englisch hinzu. Beachten Sie, dass sich das Ziel auf ein spezifisches Ziel auf der Skala des Engagement Value konzentriert: "Laden Sie allgemeines Asset herunter." Das Marketingteam hat auch ein Start- und Enddatum für den Test angegeben.

Best Practices für Tests

Beziehen Sie ein breites Team in die Planungssitzungen zur Personalisierung und Optimierung ein. Dies stellt sicher, dass alles Teammitglieder, die an der Planung beteiligt sind, organisationsweit mitmachen. Beginnen Sie mit ein paar kleinen Tests auf Seiten mit hoher Wirkung. Starten Sie Ihren ersten Test nicht auf der Homepage. 

Erwägen Sie, erste Tests auf Landingpages zu starten, während Sie Ihren Prozess entwickeln. Beginnen Sie immer mit einer Hypothese. Es ist wichtig, ein einzelnes Ziel auf der Website zu identifizieren und dann über die Auswirkungen des Tests auf dieses spezifische Ziel zu berichten. Dies hält das Marketingteam bei der Überprüfung der Ergebnisse ehrlich. Wenn Sie sich verpflichten, Berichte über die Konversionsrate / Conversion-Rate des Ziels zu erstellen, das Sie optimieren möchten, besteht kein Risiko, dass Sie sich die Ergebnisse herauspicken. 

Planen Sie abschließend einen wiederkehrenden Anruf, der dem Austausch von Testergebnissen gewidmet ist. Kommen Sie in einen Rhythmus der Übertragung von Ergebnissen. Unabhängig davon, ob es sich um monatliche oder vierteljährliche Tests handelt, können Sie ein größeres Team mit wichtigen Stakeholdern in Ihrem Unternehmen einbeziehen, um nur die Ergebnisse der letzten Tests zu teilen. Teilen Sie sowohl positive als auch negative Testergebnisse mit. Die einzigen Elemente, die in diesem Aufruf besprochen werden, sollten Testergebnisse sein, andere Elemente in relevantere Anrufe ziehen. Sie werden wahrscheinlich überrascht sein, welche Ideen aus unerwarteten Bereichen des Unternehmens kommen, wenn Sie mit der Weitergabe von Testergebnissen beginnen.

Das interne Sitecore-Team begann mit der Verwendung von Trello, um geplante Optimierungsmaßnahmen zu verwalten. Unserem Kanban-Board wurde eine neue Spalte "Aktiver Test" hinzugefügt. So haben alle Beteiligten einen klaren Überblick über laufende und anstehende Tests. Zum Zeitpunkt der Veröffentlichung hat Sitecore mehrere grundlegende Komponententests geplant und wird die Ergebnisse später in dieser Blog-Serie veröffentlichen.  

Möchten Sie herausfinden, ob Ihre Website bereit für die Optimierung ist? Laden Sie die Vorlage Scan Check herunter und erfahren Sie hier mehr über den Ermittlungsprozess.

2022 JonathanCorley_headshot.jpg

Jonathan Corley

Director of Experience Strategy, Customer Transformation

Sitecore