Plattform zum Experimentieren: Sollen Sie bauen oder kaufen?

Optimizely hat 2013 die Kategorie des digitalen Experimentierens erfunden und hat mehr Experimentierkunden und mehr Experimente auf unserer Plattform durchgeführt als jeder andere. Manchmal verlassen uns unsere größeren Kunden, um eine interne Plattform zum Experimentieren aufzubauen. Wir haben auch erlebt, dass viele dieser Kunden einige Jahre später zu uns zurückkehren.

Zusätzlich zu dieser historischen Wissensbasis haben wir vor kurzem 15+ große experimentierende Unternehmen befragt, die aktuelle Kunden, ehemalige Kunden, wiederkehrende Kunden oder Nicht-Kunden sind, die alle ein internes Experimentier-Tool aufgebaut haben oder den Aufbau eines solchen in Betracht ziehen.

Bevor Sie die Augen verdrehen und wegklicken, hören Sie uns zu. Wir versprechen Ihnen, Ihnen ein umfassendes Bild der besten Option für Ihr Unternehmen zu geben. Lassen Sie uns in die wichtigsten Überlegungen eintauchen und die Erkenntnisse aus Optimizelys umfangreichen Erfahrungen in diesem Bereich nutzen - sowohl die Erfolge als auch die Misserfolge.

TL;DR

• Unternehmen, die Plattformen bauen, gehen selten mit der methodischen Strenge vor, die die Entscheidung verdient.
• Kunden, die ihr eigenes System aufbauen, geben in der Regel mehr aus, um weniger zu bekommen, aber es gibt triftige Gründe dafür.
• Es gibt einen richtigen Weg, die Entscheidung zu treffen, und Optimizely verfügt über das Fachwissen, um jedes Unternehmen in die Lage zu versetzen, die Entscheidung für seine Zwecke gut zu treffen.

Das Grundprinzip von Build- vs. Buy-Entscheidungen

Alle Unternehmen werden mit der Frage konfrontiert, ob sie etwas kaufen oder bauen sollen. Es wurde schon viel darüber geschrieben. Das Grundgerüst ist ziemlich einfach:

• Bauen Sie nur das, was für Ihr kundenorientiertes Produkt von zentraler Bedeutung ist oder wo es einen bedeutenden Wettbewerbsvorteil darstellt.
• Kaufen Sie alles andere.

Optimizely versucht, dieses Prinzip genauso anzuwenden wie jeder andere auch: Obwohl wir ein Technologieunternehmen sind, haben wir selbst Hunderte von Technik-Anbietern.

Warum denken Unternehmen, dass sie eine interne Plattform aufbauen sollten?

Die Idee einer maßgeschneiderten Plattform kann für Unternehmen aus folgenden Gründen verlockend sein:

1. Der Instinkt der Ingenieure zu bauen

Ingenieure sind die Schöpfer von digitalen Erlebnissen. Sie sind die wichtigsten Teams für den digitalen Erfolg. Natürlich ist ihr erster Instinkt oft der, zu bauen. Jedes Unternehmen, mit dem wir gesprochen haben, gab zu, dass die Entscheidung für eine eigene Plattform mit einem Ingenieur begann, der eine eigene Lösung bauen wollte.

2. Wahrnehmung von Kosteneinsparungen

Sobald die Kosten für eine Plattform eines Drittanbieters ein bestimmtes Niveau überschreiten, reagieren Unternehmen instinktiv auf die Kosten und glauben, dass sie durch den Aufbau eines internen Tools Geld sparen können.

3. Amazon hat es so gemacht

Es gibt eine kleine Gruppe riesiger Technologieunternehmen mit einer Marktkapitalisierung von über 250 Milliarden Dollar, einzigartigen Kulturen und der größten Anzahl von Top-Ingenieuren, die gute interne Tools entwickelt haben. Wenn jemand von diesen Unternehmen an einem etwas kleineren oder technisch weniger anspruchsvollen Unternehmen teilnimmt, geht er oft davon aus, dass die Vorgehensweise dieselbe ist.

Die unternehmensinterne Plattform für das Experimentieren kämpft damit, die angestrebten Ziele in Bezug auf Kosten, Geschwindigkeit und Funktionen zu erreichen.

4. Kosten

Die Entscheidung, eine neue Plattform aufzubauen, wird selten durch eine solide Kostenmodellierung gerechtfertigt. Hinzu kommt das Fehlen einer umfassenden Anforderungserfassung und eines durchgängigen Plans. Da die Idee in der Regel von den Ingenieuren ausgeht, werden die nicht-technischen Anforderungen und Prozesse unterschätzt, die für eine hohe Geschwindigkeit bei Experimenten entscheidend sind, selbst in den anspruchsvollsten, großen Unternehmen. Das gilt zunächst für die Baukosten im Vorfeld und dann auch für die laufende Wartung.

Wir haben mit zahllosen Interessenten oder Kunden zusammengearbeitet, die über den Aufbau einer Plattform nachdenken. Wir haben ein robustes, unvoreingenommenes Kostenmodell erstellt, das wir gemeinsam mit dem Unternehmen vervollständigen. Das Ergebnis ist jedes Mal dasselbe: Eine interne Plattform kostet mehr und bringt weniger. Das liegt daran, dass Optimizely seit über 10 Jahren Hunderte von Ingenieuren mit dem Aufbau unserer Plattform zum Experimentieren beschäftigt. Es gibt einfach keinen Weg, um all diese Zeit und Mühe herumzukommen.

5. Geschwindigkeit

Der ROI des Experimentierens ist ein Faktor der Qualität und der Schnelligkeit. Für diese Übung lassen wir die Qualität der Experimente beiseite und gehen davon aus, dass alle Experimente, die durchgeführt werden, die "richtigen" Experimente sind. Sie brauchen Schnelligkeit, denn das Experimentieren zeigt, dass selbst die klügsten Unternehmen nur in 10-20% der Fälle das beste digitale Erlebnis erraten können.

Quelle: Lehren aus 127k Experimenten

Wenn Sie nur in 1-2 von 10 Fällen richtig liegen, müssen Sie sehr viele Wetten abschließen!

Wir stellen immer wieder fest, dass selbst mit den vorhandenen internen Tools bei Unternehmen mit einem Umsatz von mehr als 100 Mrd. Dollar die Geschwindigkeit viel geringer ist, als sie mit Optimizely sein könnte.

Was ist die Ursache für den Geschwindigkeitsverlust?

Wenn Unternehmen interne Tools entwickeln, sammeln sie keine umfassenden Anforderungen. Da die Idee in der Regel von Ingenieuren stammt, ist ihre Definition einer funktionalen Experimentierplattform eine Blackbox, die zwar Experimente durchführen kann, aber völlig von teuren Ingenieursstunden abhängig ist, um auch nur grundlegende Aufgaben im Zusammenhang mit dem Experimentieren zu erledigen, ohne dass Nicht-Ingenieure etwas sehen oder tun können.

1. Keine Schnittstelle und UX

   Sie unterschätzen die Zeit- und Effizienzkosten einer einfach zu bedienenden Benutzeroberfläche für alle Beteiligten, einschließlich der Ingenieure.

   • Neue Ingenieure können nicht herausfinden, wie man Experimente durchführt, so dass es schwieriger ist, das Experimentieren zu skalieren.
   • Stakeholder, die einen Großteil der Planungsarbeit leisten, wie Marketing Manager oder Produktmanager, können keine Arbeit im Zusammenhang mit dem Experimentieren leisten. Viele kleine, nicht-technische Aufgaben müssen von Ingenieuren wiederholt durchgeführt werden.

2. Laufzeit der Experimente

   Unabhängig von der Qualität des statistischen Algorithmus ist schon die Überprüfung eines Experiments ein großer Aufwand, da das Programm eine Blackbox ist. Wenn dieser große Lift durchgeführt wird, kann er zu dem Ergebnis führen, dass der Test keine Signifikanz erreicht hat, was bedeutet, dass eine Aufgabe, die bereits bei einmaliger Durchführung teuer ist, nun mehrfach pro Experiment durchgeführt wurde. Einige interne Systeme 'lösen' dieses Problem, indem sie vorgegebene Testlaufzeiten festlegen, aber das ist in vielen Anwendungsfällen eine Verschwendung, wenn der Test die statistische Signifikanz zu früh erreicht.

3. Datenanalyse

   Selbst eine einfache Testanalyse erfordert mehrere, plattformübergreifende Schritte durch Analysten. Auf der Optimizely-Plattform dauert es 5 Minuten, bis Sie unsere Ergebnisseite sehen.

   

4. Genauigkeit der Daten

   Es ist schwer, Zielgruppen nach dem Zufallsprinzip zusammenzustellen und dann über Besuche oder Plattformen hinweg konsistent zu halten. Wir hatten mehrere große Kunden, die uns verlassen haben, um ihre eigene Plattform aufzubauen, nur um ein paar Jahre später zurückzukehren, weil sie mehr als 100 A/A-Tests durchgeführt haben und nie glaubwürdige Ergebnisse liefern konnten. Niemand möchte Tests durchführen, wenn er den Daten nicht traut!

5. Governance + Sichtbarkeit

   Da es sich bei diesen Systemen oft um Blackboxen handelt, die nur von Ingenieuren geändert werden können, besteht eine höhere Wahrscheinlichkeit, dass fehlerhafte Implementierungen oder fehlerhafte Varianten länger in Betrieb bleiben. Wenn etwas schief geht, weil niemand sehen kann, was vor sich geht, ist es schwieriger zu diagnostizieren und die Plattform und die Disziplin verlieren schnell an Glaubwürdigkeit in der Organisation.

6. Dokumentation

   Jede Technik erfordert eine umfangreiche Dokumentation, damit mehr Teams daran arbeiten können. Diese Dokumente auf dem neuesten Stand zu halten, ist eine unglaubliche Menge an Arbeit, für die sie keine Zeit haben.

Wie wirkt sich das im Laufe der Zeit aus?

Wenn der Plan, eine unternehmensinterne Plattform zu bauen, anfänglich gefasst wird, kann es zwar zu einer Abstimmung kommen, aber da das Projekt nur selten vollständig erfasst wird, übersteigt die Zeit bis zur Wertschöpfung die Erwartungen aller Beteiligten. Dies führt oft dazu, dass die verfügbaren Ressourcen abnehmen, bevor das Projekt die versprochene Funktionalität erreicht.

Wann ist es eine gute Idee zu bauen?

Obwohl der Kauf oft die beste Wahl ist, gibt es Szenarien, in denen der Aufbau einer eigenen Plattform gerechtfertigt sein kann:

• Sie sind Amazon: Es gibt eine sehr kleine Anzahl von Unternehmen mit einer Marktkapitalisierung von über 250 Milliarden Dollar, hoher technischer Kompetenz und einer einzigartigen Unternehmenskultur, bei denen das Experimentieren vom ersten Tag an so tief in ihrer DNA verankert war, dass sie zum richtigen Zeitpunkt den richtigen Betrag investiert haben, um eine gute interne Plattform aufzubauen, und die dadurch tatsächlich einige glaubwürdige Wettbewerbsvorteile haben.
• Existenzielles Datenrisiko + Kontrolle: Für die wenigen Unternehmen mit einer Marktkapitalisierung von mehr als 250 Mrd. USD, insbesondere für Unternehmen, die bereits Datenverletzungen, Skandale oder behördliche Untersuchungen hinter sich haben, kann es sich lohnen, zu sagen, dass keine dritte Partei jemals Zugang zu den Daten der ersten Partei hat.
• Hybride Ansätze: Einige unserer Kunden möchten einige Komponenten der Plattform zum Experimentieren selbst entwickeln und andere kaufen. Die Umstände sind zu unterschiedlich, um allgemeine Trends zu erfassen, aber dies kann eine Option in der Mitte sein.

Wie Sie die richtige Entscheidung für Ihr Unternehmen treffen

Die Debatte über den Kauf oder den Aufbau einer Plattform ist nicht pauschal zu beantworten. Führen Sie zunächst eine gründliche Analyse durch. Führen Sie eine umfassende Kosten-Nutzen-Analyse durch und berücksichtigen Sie dabei nicht nur die anfänglichen Entwicklungskosten, sondern auch die laufende Wartung, die Opportunitätskosten und mögliche Einschränkungen.

Optimizely hat Forrester Consulting beauftragt, eine Total Economic Impact™ (TEI)-Studie durchzuführen und die möglichen finanziellen Auswirkungen der Einführung von Optimizely aufzuzeigen. Was noch, fragen Sie?

• Bewerten Sie Ihre Kernkompetenzen: Fragen Sie sich, ob der Aufbau einer Plattform zum Experimentieren mit den Hauptschwerpunkten und Wettbewerbsvorteilen Ihres Unternehmens übereinstimmt. Aber wie finden Sie die richtige Plattform für Ihre Bedürfnisse? Unsere RFP-Vorlage zum Experimentieren zeigt Ihnen, welche Fragen Sie sich stellen sollten.
• Berücksichtigen Sie die langfristigen Auswirkungen: Denken Sie über den unmittelbaren Bedarf hinaus und bewerten Sie, wie sich Ihre Wahl auf die Skalierbarkeit, Flexibilität und Ressourcenzuweisung in den kommenden Jahren auswirken wird. Zum Beispiel müssen Ihre Experimente eine statistische Signifikanz erreichen. Der Stichprobengrößenrechner von Optimizely sorgt dafür, dass Sie nicht mehr auf eine vorgegebene Stichprobengröße warten müssen, um die Gültigkeit Ihrer Ergebnisse zu gewährleisten.
• Holen Sie den Rat von Experten ein: Wenden Sie sich an erfahrene Praktiker und Anbieter in diesem Bereich. Wenn Sie eine Plattform haben oder daran denken, eine aufzubauen, kommen Sie zu uns! Wir führen für Sie eine Bewertung der Gesamtbetriebskosten und der Geschwindigkeit durch, wenn Sie eine Plattform kaufen oder bauen.

Optimizely kann Ihnen helfen...

1. Optimizely-Kunden: Wenn Sie eine interne Plattform aufbauen oder jemand in Ihrem Unternehmen darüber nachdenkt, eine solche Plattform aufzubauen: Wenden Sie sich bitte umgehend an Ihren Customer Success Manager oder an mich (pete.gray@optimizely) und wir werden kostenlos eine Total Cost of Ownership-Studie durchführen. Wir wollen wirklich nur das Beste für Sie: Lassen Sie uns Ihnen helfen, diese Entscheidung richtig zu bewerten. Denken Sie daran, das Beste an unserer Beratung: Sie ist kostenlos, sie ist fundiert und Sie können damit machen, was Sie wollen!
   
2. Nicht-Optimizely-Kunden: Wenn Sie eine Plattform haben oder daran denken, eine aufzubauen, kommen Sie zu uns! Wir führen für Sie eine Bewertung der Gesamtbetriebskosten und der Geschwindigkeit durch, wenn Sie eine Plattform kaufen oder aufbauen!