Drip
FallstudienProzessApex
Für dich umgesetztWir machen dein ganzes TestingMit dir umgesetztDein Team testet in Apex, mit unserem Research
BlogRessourcenArtifactsStatistik-ToolsBenchmarksResearch
Prüfen, ob dein Shop passt
Prüfen, ob dein Shop passtShop prüfen
Tool-Vergleich55 Min. Lesezeit

A/B-Testing-Tools für Online-Shops 2026: 15 Plattformen im Vergleich

Fünfzehn Tools, geordnet danach, was sie testen können, auf welchen Shopsystemen sie laufen, wo sie deine Daten speichern und was der Einstieg kostet. Zu jeder Aussage nennen wir die Belegstufe.

Fabian GmeindlCo-Founder, DRIP
22. Sept. 2026Veröffentlicht
Neu von DRIP

Apex by DRIP sagt vorher, welche A/B-Tests wahrscheinlich gewinnen, bevor sie live gehen.

Basiert auf unserer eigenen A/B-Test-Datenbank, einer der größten im E-Commerce: 4,3 Millionen Tests aus 151.000 Shops, gesammelt seit 2011.

So funktioniert ApexKostenlos starten
Dieser Artikel ist Teil von Der komplette Guide zu A/B-Testing-Tools für E-Commerce

Ein A/B-Testing-Tool, das zu jedem Online-Shop passt, gibt es nicht. Wähl nach dem Engpass, der dich Geld kostet. Enden deine Tests immer wieder ohne Effekt, liegt der Engpass bei der Auswahl der Tests: Apex by DRIP gibt jeder Testidee vor dem Start eine Likelihood to Win, auf Basis von 4,3 Millionen A/B-Tests aus 151.000 Shops. Der Wert ordnet die Idee im eigenen Backlog des Shops ein und ist keine Gewinnwahrscheinlichkeit im strengen Sinn. Willst du Preise und Versand auf Shopify testen, sieh dir Intelligems, ABConvert oder Elevate an. Brauchst du No-Code-Tests zum Festpreis auf jedem Shopsystem, startet Varify.io bei 199 € im Monat bei jährlicher Zahlung. Entscheidet der Umgang mit Daten in der EU, hosten ABlyft und Convert in Deutschland. Brauchst du Statistik auf Enterprise-Niveau und serverseitige Tests, kommen Optimizely und Kameleoon in Frage. Entscheidet das Budget, ist Shopify Rollouts ab dem Grow-Tarif enthalten, und GrowthBook ist selbst gehostet kostenlos.

Inhalt
  1. 01Welches A/B-Testing-Tool sollte ein Online-Shop 2026 wählen?
  2. 02Welches Tool passt zu welchem Anwendungsfall?
  3. 03Welche 15 Tools gibt es auf einen Blick?
  4. 04Was entscheidet mehr als Funktionslisten?
  5. 05Was ist ein A/B-Testing-Tool für einen Online-Shop?
  6. 06Warum kostet der aktuelle Aufbau mehr, als es scheint?
  7. 07Wie schneiden die 15 Tools Fakt für Fakt ab?
  8. 08Was leisten die neun wichtigsten Tools im Detail?
  9. 09Welche sechs weiteren Plattformen solltest du kennen?
  10. 10Was ändert sich, wenn du vom Testing-Tool zum Testprogramm wechselst?
  11. 11Wie sollte ein Shop ein A/B-Testing-Tool auswählen?
  12. 12Wie lautet das Fazit für 2026?
Lesefortschritt0%
gelesen

01Welches A/B-Testing-Tool sollte ein Online-Shop 2026 wählen?

Wähl das Tool, das den Engpass beseitigt, der dich Geld kostet: Tests auswählen, Tests umsetzen, Preise testen, Budget oder Compliance. Jeder dieser Engpässe führt in diesem Vergleich zu einem anderen Tool, und keines gewinnt in jeder Hinsicht.
Offenlegung
Apex ist unser Produkt. Wir haben es gebaut und wir verkaufen es. Lies den Apex-Abschnitt mit diesem Wissen. Die Reihenfolge der Profile ist keine Rangliste. Dies ist ein Dokumentationsvergleich, kein Praxistest: Wir haben Anbieterseiten, Dokumentationen, Preisseiten und Bewertungsportale gelesen und geben wieder, was die Anbieter veröffentlichen. Preise und Funktionen haben wir im Oktober 2026 auf den Anbieterseiten geprüft. Anbieter ändern beides oft. Prüf deshalb vor dem Kauf noch einmal an der Quelle.

Das Kurzfazit, ein Satz pro Engpass:

  1. Enden deine Tests immer wieder ohne Effekt, liegt dein Engpass bei der Auswahl der Tests. Dafür ist Apex by DRIP gebaut: Jede Testidee bekommt vor dem Start eine Likelihood to Win, gestützt auf eine Datenbank beobachteter A/B-Tests. Sie ordnet die Idee im eigenen Backlog des Shops ein und ist keine Gewinnwahrscheinlichkeit im strengen Sinn.
  2. Ist dein Backlog voll und geht wenig live, liegt dein Engpass bei der Umsetzung. Varify.io (jedes Shopsystem, Festpreis pro Domain) oder Shoplift (Shopify-Themes, bearbeitet im Shopify Theme Editor) nehmen Entwicklern diese Arbeit ab.
  3. Willst du Preise, Versandkosten und Angebote auf Shopify testen, deckt Intelligems alle drei ab, mit Berichten zu Gewinn und Warenkosten (COGS). ABConvert und Elevate starten günstiger.
  4. Ist das Budget der Engpass, starte mit Shopify Rollouts, das ab dem Grow-Tarif enthalten ist, oder hoste GrowthBook selbst. Es ist Open Source und kostenlos.
  5. Entscheidet die Compliance, dokumentieren ABlyft (Hosting in Deutschland, keine personenbezogenen Daten gespeichert) und Convert Experiences (Server in Frankfurt, ISO 27001, SOC 2 Type 2) ihren Umgang mit Daten ausführlich.

Hinter den fünf Engpässen steht ein Muster. Was viele Shops am Ende brauchen, ist kein weiterer Editor. Sie brauchen einen Ort, an dem Ideen, Tests und Ergebnisse zusammenliegen. Dann wird der nächste Test nach dem ausgewählt, was die letzten gezeigt haben. Darauf kommen wir im Abschnitt über Testprogramme zurück.

Jedes Profil trägt eine Belegstufe: 1 für Produktaussagen, die der Anbieter dokumentiert, 2 für Dokumentation durch Dritte oder Verzeichnisse, 3 für benannte Fallstudien mit Zahlen, 4 für Bewertungsportale, 5 für Zahlen, die der Anbieter ohne Beleg nennt. Eine Stufe sagt, wie eine Aussage gestützt ist, nicht, ob sie stimmt.

02Welches Tool passt zu welchem Anwendungsfall?

Zwölf häufige Anwendungsfälle und das passende Tool, jeweils mit dem Einstiegspreis, wie ihn der Anbieter im Oktober 2026 veröffentlicht hat. Apex passt zu Shops, deren Tests immer wieder ohne Effekt enden. Die anderen elf Empfehlungen decken Umsetzung, Preise, Compliance, Enterprise und Budget ab.
Anwendungsfälle und Empfehlungen. Einstiegspreise wie von den Anbietern veröffentlicht, geprüft im Oktober 2026.
AnwendungsfallEmpfehlungWarumEinstiegspreis
Tests enden immer wieder ohne EffektApex by DRIPEine Likelihood to Win pro Testidee, aus 4,3 Millionen beobachteten A/B-TestsNicht veröffentlicht; kostenlose Stufe ohne Kreditkarte für einen Shop
Preis-, Versand- und Angebotstests auf ShopifyIntelligemsTestet Preise, Versand, Angebote, Checkout und Inhalte, mit Gewinn und Warenkosten (COGS) pro Test69 $ im Monat (Smart Content, Einstiegsstufe); Pläne mit Preistests haben eine Mindestlaufzeit von 3 Monaten
Theme- und Template-Tests auf ShopifyShopliftVarianten werden im Shopify Theme Editor gebaut, bayessche Probability to Win99 $ im Monat (Core, bis 50.000 Besucher), 74 $ bei jährlicher Zahlung
No-Code-Tests auf jedem Shopsystem zum FestpreisVarify.ioFestpreis pro Domain mit unbegrenztem Traffic, Hosting in Frankfurt199 € im Monat bei jährlicher Zahlung (Growth)
Agenten über den ganzen TestablaufVWO (Wingify)Wingz-Agenten für Recherche, Ideen, Umsetzung, Start und Rollout, mit FreigabeschrittenNicht veröffentlicht; ein Drittanbieter nennt 665 $ im Monat (Growth, jährlich, 100.000 getrackte Nutzer)
Statistik auf Enterprise-Niveau und serverseitige TestsOptimizelySequenzielle Stats Engine, Prüfung des Sample Ratio, Bandits, mehr als 20 SDKsNicht veröffentlicht; Median laut Drittanbieter 81.447 $ im Jahr
Enterprise in der EU mit Agenten und Feature FlagsKameleoonPBX-Agenten, MCP-Server, serverseitige Flags, ISO 27001 und SOC 2 Type 2Ab 495 $ im Monat (PBX Starter)
Strenger Datenschutz für EntwicklerteamsABlyftHosting in Deutschland, keine personenbezogenen Daten oder IP-Adressen gespeichertKostenloser Plan; bezahlte Pläne auf Anfrage
Ein kostenloser nativer Einstieg auf ShopifyShopify RolloutsIm Shopify-Admin eingebaut; Theme, Checkout und KundenkontenAb dem Grow-Tarif enthalten (79 € im Monat bei jährlicher Zahlung)
Günstige Preis- und Versandtests auf ShopifyElevatePreis-, Versand- und Checkout-Tests in einer Shopify-App99 $ im Monat (Standard, bis 1.000 Bestellungen)
Tests direkt im Data Warehouse oder selbst gehostetGrowthBookOpen Source; die Auswertung läuft in deinem eigenen Data WarehouseKostenlos (selbst gehostet oder Cloud Starter); Pro 40 $ pro Nutzer im Monat
EU-Hosting mit Zertifizierungen und öffentlichen PreisenConvert ExperiencesServer in Frankfurt, ISO 27001, SOC 2 Type 2, drei Statistik-Engines299 $ im Monat bei jährlicher Zahlung (Growth)

03Welche 15 Tools gibt es auf einen Blick?

Fünfzehn Tools: für wen sie gebaut sind, welche Shopsysteme sie unterstützen, der Einstiegspreis, wo Daten verarbeitet werden und wie viele öffentliche Bewertungen sie haben. Manche sind Shopify-Apps, manche laufen als Skript oder SDK auf jeder Website. VWO und AB Tasty sind Produktmarken desselben Unternehmens, Wingify.
Auswahlliste, geprüft im Oktober 2026 (VWO und AB Tasty am 6. Oktober). Bewertungen: Quelle, Note und Anzahl.
ToolGebaut fürShopsystemeEinstiegspreisDatenstandortBewertungen (Quelle, Note, Anzahl)
Apex by DRIPShops, deren Tests ohne Effekt endenInstallation als Shopify-AppNicht veröffentlicht; kostenlose Stufe für einen ShopEU und Großbritannienkeine öffentlichen
IntelligemsPreis-, Angebots- und Inhaltstests auf ShopifyShopify; headless über npm-Paket69 $ im Monat (Smart Content)Übermittlung nach Kanada und USAApp Store 4,8 (198)
ShopliftWachstumsstarke DTC-Marken auf ShopifyShopify, Plus; kein Headless99 $ im Monat (Core), 74 $ jährlichUSAApp Store 4,9 (133)
Varify.ioUnternehmen und Agenturen jeder GrößeJeder Shop, der JavaScript lädt199 € im Monat bei jährlicher ZahlungAWS Frankfurt plus CloudflareOMR 4,8 (113)
VWO (Wingify)Teams, die agentische Experience Optimization wollenShopify-App; andere nicht recherchiertNicht veröffentlicht; 30 Tage Test ohne KreditkarteNicht Teil unserer RechercheG2 4,4 (929)
OptimizelyTeams für Web, Backend, Mobile, EdgeJede Website per Snippet; 20+ SDKsNicht veröffentlicht; kostenloser Plan für Feature FlagsRechenzentren in der EU verfügbarG2 4,2 (411)
KameleoonMarketing-, Produkt- und EntwicklungsteamsSnippet, SDKs; Integration für Shopify PlusAb 495 $ im Monat (PBX Starter)Region nicht angegebenOMR 4,5 (192)
ABlyftAgenturen bis Konzerne, EntwicklerteamsJede Website; keine Shopify-AppKostenloser Plan; bezahlt auf AnfrageDeutschlandOMR 4,9 (129)
Shopify RolloutsShopify-Händler im Online StoreShopify; keine Headless-StorefrontsEnthalten; Experimente ab Grow (79 €/Monat, jährlich)Nicht veröffentlichtkeine öffentlichen
ABConvertWachsende Shopify-Marken und CRO-TeamsShopify; kein Headless99 $ im Monat (Starter), 74 $ jährlichRegion nicht veröffentlichtApp Store 4,7 (83)
Convert ExperiencesMarketer, Agenturen, Entwickler, Growth-TeamsShopify-App plus weitere Plattformen299 $ im Monat bei jährlicher ZahlungFrankfurt, DeutschlandG2 4,6 (98)
GrowthBookEntwickler, Daten-, Produkt- und Growth-TeamsJede Website per Skript oder SDKKostenlos; Pro 40 $ pro Nutzer im MonatAWS, EU-Region; oder selbst gehostetG2 4,6 (25)
Visually.ioE-Commerce-Unternehmer und Teams auf ShopifyShopify, Plus; headless über Hydrogen19 $ im Monat (bis 200 Bestellungen)Übermittlung nach Kanada und USAApp Store 4,8 (147)
ElevateShopify-Shops, vom neuen Shop bis unbegrenztShopify; headless per SDK in Premium49 $ im Monat (Basic, bis 1.000 Bestellungen)Nicht veröffentlichtApp Store 4,9 (143)
AB Tasty (Wingify)Wingify-Plattform, verkauft als ProduktmarkeNicht Teil unserer RechercheNicht veröffentlichtNicht Teil unserer RechercheG2 4,4

Die Reihenfolge dieser Tabelle ist die Reihenfolge der Profile weiter unten, keine Rangliste. Die Bewertungszahlen stammen aus verschiedenen Portalen. Vergleiche sie deshalb innerhalb einer Quelle, nicht über Quellen hinweg.

04Was entscheidet mehr als Funktionslisten?

Vier Engpässe entscheiden, welches Tool sich lohnt: Tests auswählen, Tests umsetzen, Budget und Compliance. Funktionslisten sehen bei allen Anbietern ähnlich aus, dein Engpass nicht. Schnelleres Testen zahlt sich erst aus, wenn die Auswahl besser wird, nicht vorher.

Funktionstabellen lassen fünfzehn Tools ähnlich aussehen. Was sie unterscheidet, ist das Problem, das sie beseitigen sollen. Benenne also deinen Engpass, bevor du Funktionen vergleichst.

Engpass 1: Tests auswählen

Enden Tests immer wieder ohne Effekt, liegt das Problem vor der Umsetzung: bei der Frage, welche Ideen in den Backlog kommen und welche davon laufen. Ein schnellerer Editor löst das nicht, er bringt nur mehr Tests ohne Effekt live. Hier unterscheiden sich die Tools stärker als irgendwo sonst. Manche erzeugen Ideen, wenige ordnen sie, und Apex zeigt pro Idee eine Vorhersage, gestützt auf eine veröffentlichte Datenbank beobachteter Tests.

Engpass 2: Tests umsetzen

Ist der Backlog voll und geht wenig live, ist die Kapazität für die Umsetzung der Engpass. Dann entscheiden der Editor, die QA-Werkzeuge, die KI-Builder und der Weg für Entwickler. Prüf im Test, was jemand aus deinem Team ohne Programmierkenntnisse allein bauen kann und wofür es weiterhin einen Entwickler braucht.

Engpass 3: Budget

Die Preismodelle unterscheiden sich stärker als die Preise: pro Besucher, pro getestetem Nutzer, pro Bestellung, pro Nutzerplatz, pro Domain oder auf Anfrage. Ein Plan, der bei normalem Traffic günstig aussieht, kann die Stufe wechseln, wenn ein Sale-Monat Sitzungen oder Bestellungen nach oben treibt. Rechne die Kosten für deinen stärksten Monat durch, nicht für den Durchschnitt.

Engpass 4: Compliance

Wo Daten verarbeitet werden, welche Zertifizierungen es gibt und wie die Einwilligung gehandhabt wird, unterscheidet sich in dieser Liste stark: von Hosting in Deutschland bis zur Verarbeitung in den USA. Braucht deine Rechtsabteilung vor der Unterschrift einen Auftragsverarbeitungsvertrag, eine Liste der Unterauftragsverarbeiter oder ein ISO-27001-Zertifikat, fallen mehrere Tools heraus. Frag nach Dokumenten, nicht nach Siegeln.

Warum Auswahl vor Tempo kommt

Die Gewinnquoten zeigen es. Laut Ronny Kohavi gewinnen branchenweit 10 bis 20 Prozent der Experimente. In DRIPs eigenen Tests stieg die Gewinnquote von 27 Prozent im Jahr 2024 (808 Tests) auf 56 Prozent zwischen April und Juni 2026 (278 Tests). Eine Gewinnquote hängt auch von der Statistik dahinter ab: Eine lockere Schwelle erzeugt mehr Gewinner auf dem Papier und weniger im Umsatz. Vergleiche Gewinnquoten danach, wie sie ermittelt wurden, nicht nach der Schlagzeile.

Wer bei einer Gewinnquote von 15 Prozent mehr Tests startet, verliert immer noch die meisten davon. Und jeder verlorene Test kostet Umsetzungszeit und Traffic. Tempo zahlt sich erst aus, wenn die Auswahl besser wird, nicht vorher.

05Was ist ein A/B-Testing-Tool für einen Online-Shop?

Ein A/B-Testing-Tool für einen Online-Shop teilt die Besucher auf die aktuelle Version einer Seite, eines Preises oder eines Ablaufs und auf eine oder mehrere geänderte Versionen auf. Dann misst es, welche Version mehr einbringt. Es erledigt drei Aufgaben: auswählen, was getestet wird, den Test bauen und laufen lassen, das Ergebnis auswerten.

Das Tool teilt die Besucher zufällig auf eine Kontrollversion und eine oder mehrere Varianten auf und hält fest, was jede Gruppe tut: in den Warenkorb legen, zur Kasse gehen, bestellen, Umsatz. Weil beide Gruppen gleichzeitig denselben Traffic sehen, lässt sich der Unterschied der Änderung zuschreiben, im Rahmen dessen, was die Statistik erlaubt.

Für einen Online-Shop hat das Tool drei Aufgaben.

  • Auswählen: entscheiden, welche Ideen getestet werden und in welcher Reihenfolge. Dazu gehören Recherche, der Ideen-Backlog, die Priorisierung und bei manchen Tools eine Vorhersage oder eine Rangfolge vor dem Start.
  • Bauen und ausspielen: die Variante in einem visuellen oder einem Code-Editor erstellen, auf allen Geräten prüfen, die richtigen Besucher ansprechen, den Traffic aufteilen und starten. Preis-, Versand- und Checkout-Tests brauchen einen tieferen Zugriff auf das Shopsystem als Seitentests.
  • Auswerten: entscheiden, ob die Variante gewonnen hat, bei welcher Kennzahl und mit welcher Sicherheit. Für einen Shop zählen Umsatz pro Besucher und Gewinn pro Besucher mehr als Klicks. Heatmaps pro Variante erklären, warum ein Ergebnis zustande kam.

Fast jedes Tool in diesem Vergleich ist stark beim Bauen und Ausspielen. Weniger Tools werten in Shop-Kennzahlen wie dem Gewinn pro Test aus, und noch weniger helfen bei der Auswahl. In dieser Lücke liegt der Unterschied zwischen einem Testing-Tool und einem Testprogramm.

Wo Shopify Rollouts aufhört und spezialisierte Tools anfangen

Shopify Rollouts ist im Shopify-Admin eingebaut. Ab dem Grow-Tarif plant es Änderungen am Haupt-Theme, an Checkout und Kundenkonten, an Rabatten und Produktkatalogen und testet sie per A/B-Test, ohne ausgewiesene Zusatzgebühr.

Die Grenzen dokumentiert Shopify selbst. Experimente melden Kennzahlen der Conversion-Art, keine Umsatz- oder Warenkorbwert-Kennzahlen. Die statistische Methode ist nicht veröffentlicht. Preise lassen sich nicht testen. Änderungen an Liquid-Templates können nicht Teil eines Rollouts sein. Headless-Storefronts sind nicht abgedeckt. Ein spezialisiertes Tool lohnt sich, wenn du Umsatz oder Gewinn pro Test brauchst, Preis- oder Versandtests, eine dokumentierte statistische Methode, Heatmaps pro Variante oder Hilfe bei der Auswahl der Tests.

06Warum kostet der aktuelle Aufbau mehr, als es scheint?

Sichtbar sind die Kosten für das Tool-Abo. Die größeren Kosten verteilen sich auf eine Agentur, ein Testing-Tool, ein Analytics-Tool und einen Ideen-Backlog in Tabellen. Und sie stecken in den Tests, die verlieren, weil niemand sehen konnte, was vorher schon getestet wurde.

Ein typisches Testprogramm im Shop hat vier Teile, die nicht miteinander sprechen. Eine Agentur oder ein Freelancer schreibt Ideen und baut Varianten. Ein Testing-Tool teilt den Traffic auf. Ein Analytics-Tool enthält die Zahlen, denen das Team vertraut. Und der Backlog liegt in einer Tabelle oder einem Projektboard, die Gründe für frühere Ergebnisse in Foliensätzen.

Die versteckten Kosten liegen zwischen den Teilen. Die Ergebnisse im Testing-Tool weichen vom Analytics-Tool ab, also gehen Meetings dafür drauf, Zahlen abzugleichen. Erkenntnisse liegen in Foliensätzen, die niemand öffnet, also werden Ideen doppelt getestet. Und wenn die Agentur wechselt, geht die Historie mit.

Was sich aufsummiert, sind die verlorenen Tests. Bei einer branchenweiten Gewinnquote von 10 bis 20 Prozent findet ein Programm mit 12 Tests im Jahr etwa ein bis zwei Gewinner, ein Programm mit 38 Tests im Jahr etwa vier bis acht. Jeder verlorene Test hat trotzdem Designzeit, Umsetzungszeit, QA und Wochen an Traffic gekostet, in denen eine bessere Idee hätte laufen können.

Was du messen solltest
Bevor du Tool-Preise vergleichst, zähl für die letzten zwölf Monate drei Dinge: wie viele Tests gelaufen sind, wie viele beim Umsatz gewonnen haben und wie viele Stunden jeder Test von der Idee bis zum Ergebnis gebraucht hat. Das Tool, das die zweite Zahl verändert, zählt meist mehr als der Preis pro Monat.

07Wie schneiden die 15 Tools Fakt für Fakt ab?

Zwei Tabellen. Tabelle 1 zeigt die Positionierung jedes Tools in den eigenen Worten, was es testen kann, die Shopsysteme, den Datenstandort und den Einstiegspreis. Die zweite ist ein Funktionsraster mit festen Werten: Ja, Add-on, Enterprise, Nein, Nicht veröffentlicht, Nicht gefunden.

Beide Tabellen beruhen auf den Seiten der Anbieter, gelesen im Oktober 2026 (VWO und AB Tasty am 6. Oktober, alle anderen am 10. Oktober). Wo ein Anbieter nichts sagt, steht das so in der Tabelle.

Tabelle 1: Positionierung, Umfang, Shopsysteme, Datenstandort und Einstiegspreis, geprüft im Oktober 2026
ToolPositionierung in den Worten des AnbietersKann testenShopsystemeDatenstandortEinstiegspreis
Apex by DRIPSagt vor dem Start voraus, welche Tests wahrscheinlich gewinnenSeiten, Elemente, A/A, Redirects, Holdout, Flags, gestufte Rollouts. Preise, Versand und Angebote sind nicht unter den dokumentierten Testarten von ApexInstallation als Shopify-AppEU und GroßbritannienNicht veröffentlicht; kostenlose Stufe, ein Shop
Intelligems„Decide Confidently. Grow Profitably.“Seiten, Themes, Preise, Rabatte, Bundles, Versand, Checkout (Plus), Post-PurchaseShopifyÜbermittlung nach Kanada und USA69 $ im Monat
Shoplift„The CRO Platform Built for Shopify“Templates, Theme-Elemente, Preise (Advanced, Pro), Versandschwellen; kein CheckoutShopify, Liquid-StorefrontsUSA99 $ im Monat
Varify.io„The A/B testing platform that scales with you“Produkt-, Kategorie-, Warenkorb-, Start-, Landingpages; Plus-Checkout (App)Jeder Shop, der JavaScript lädtFrankfurt (AWS)199 € im Monat, jährlich
VWO (Wingify)„the Agentic Experience Optimization Platform“Seiten, Shopify-Themes per Split-URL; Preise „coming soon“Shopify-App; andere nicht abgedecktNicht abgedecktNicht veröffentlicht
Optimizely„Test everything, regret nothing“Seiten-DOM, serverseitig per SDKs, Shopify-Checkout gemessenJede Website per Snippet; SDKsRechenzentren in der EU verfügbarNicht veröffentlicht
Kameleoon„Build experiments in minutes by chatting with AI“Seitenelemente, serverseitige Funktionen per FlagsSnippet; Integration für Shopify PlusRegion nicht angegeben495 $ im Monat
ABlyft„Your A/B Testing Platform“Seiteninhalte, Redirects, Shopify-Themes und -TemplatesJede Website per SnippetDeutschlandKostenloser Plan; bezahlt auf Anfrage
Shopify Rollouts„Schedule theme changes and A/B test with Rollouts“Theme, Checkout, Kundenkonten, Rabatte, Kataloge; keine PreiseShopifyNicht veröffentlichtAb Grow enthalten
ABConvert„The A/B testing platform built for Shopify merchants“Preis, Versand, Angebot, Redirect, Template, Theme, visuell, Checkout, kombiniertShopify, kein HeadlessRegion nicht veröffentlicht99 $ im Monat
Convert Experiences„Proven A/B Testing Tool“Seiten, Themes, Preise (Cart Transform), Versand per JavaScriptShopify plus Integrationen für weitere PlattformenFrankfurt299 $ im Monat, jährlich
GrowthBook„The warehouse-native platform used by modern product teams“Seiteninhalte, URL-Redirects, jeder Codepfad per FlagsJede Website per Skript oder SDKAWS-EU-Region oder selbst gehostetKostenlos; Pro 40 $ pro Nutzer
Visually.io„One-stop, AI powered A/B testing & personalization platform“Themes, Rabatte, Preise, Versand, Produktseiten, Warenkörbe, Checkouts, UpsellsShopify und Shopify PlusÜbermittlung nach Kanada und USA19 $ im Monat
Elevate„All-in-one AB testing“Seiten, Themes, Preise, Versand, Angebote, Checkout (Plus), BilderShopifyNicht veröffentlicht49 $ im Monat
AB Tasty (Wingify)„the Agentic Experience Optimization Platform“Wie VWO: Preise „coming soon“Nicht abgedecktNicht abgedecktNicht veröffentlicht

So liest du das Funktionsraster. Ja: vom Anbieter dokumentiert. Add-on: gegen Aufpreis verfügbar. Enterprise: im Enterprise-Plan verfügbar. Nein: Der Anbieter sagt, dass es nicht unterstützt wird. Nicht veröffentlicht: Der Anbieter sagt nichts dazu. Nicht gefunden: Wir haben es in der gelesenen Dokumentation nicht gefunden, was nicht heißt, dass es nicht existiert. Bei Apex bedeutet Nicht veröffentlicht, dass die Funktion nicht Teil der Produktbeschreibung auf drip-apex.com ist, die dieser Vergleich verwendet. Bedeutung der Spalten: Preistests umfasst Preis- und Angebotstests, Heatmaps heißt Heatmaps pro Variante, Vorhersage heißt eine Vorhersage aus früheren Tests, KI baut heißt, dass KI Varianten baut, MCP schließt jede Anbindung an ChatGPT oder Claude ein, Auto-Stopp heißt ein automatischer Guardrail-Stopp, Cookielos heißt ein cookieloser Modus.

Tabelle 2: Funktionsraster, geprüft im Oktober 2026
ToolVisueller EditorCode oder SDKServerseitigPreistestsHeatmapsVorhersageKI bautMCPAuto-StoppCookielos
Apex by DRIPJaJaNicht veröffentlichtNicht veröffentlichtJaJaJaJaJaNicht veröffentlicht
IntelligemsJaJaNicht veröffentlichtJaNicht gefundenNicht gefundenJaJaNicht veröffentlichtNicht gefunden
ShopliftJaJaNicht veröffentlichtJaNicht gefundenNicht gefundenJaJaNicht gefundenNicht veröffentlicht
Varify.ioJaJaEnterpriseNicht veröffentlichtNeinNicht gefundenAdd-onJaEnterpriseJa
VWO (Wingify)Nicht gefundenNicht gefundenNicht gefundenNeinNicht gefundenNicht gefundenJaJaJaNicht gefunden
OptimizelyJaJaJaNicht gefundenNicht gefundenNicht gefundenJaJaNicht gefundenNicht gefunden
KameleoonJaAdd-onJaNicht gefundenNicht gefundenJaJaJaNicht gefundenNicht gefunden
ABlyftJaJaNicht gefundenNicht gefundenNicht gefundenNicht gefundenJaJaNicht veröffentlichtJa
Shopify RolloutsJaNeinNicht veröffentlichtNeinNicht veröffentlichtNicht gefundenNicht veröffentlichtNicht gefundenNicht veröffentlichtNicht veröffentlicht
ABConvertJaJaNicht gefundenJaNicht gefundenNicht gefundenNicht gefundenJaNicht gefundenNicht gefunden
Convert ExperiencesJaJaJaJaJaNicht gefundenJaJaNicht veröffentlichtNicht veröffentlicht
GrowthBookJaJaJaNicht gefundenNicht gefundenNicht gefundenJaJaJaNicht veröffentlicht
Visually.ioJaJaNicht gefundenJaNicht gefundenNicht gefundenJaJaNicht gefundenNicht gefunden
ElevateJaJaNicht veröffentlichtJaNicht gefundenNicht gefundenJaJaNicht gefundenNicht gefunden
AB Tasty (Wingify)Nicht gefundenNicht gefundenNicht gefundenNeinNicht gefundenNicht gefundenJaJaJaNicht gefunden

Hinweise zu Zellen, die Kontext brauchen:

  • Apex: Das Tracking läuft serverseitig; die Spalte Serverseitig fragt nach der serverseitigen Ausspielung von Tests. KI baut bezieht sich auf die MCP-Anbindung, über die ein Shop-Betreiber Tests aus ChatGPT oder Claude heraus baut und auswertet.
  • Shoplift: Varianten werden im Theme Editor von Shopify bearbeitet. Preistests brauchen Advanced oder Pro. Lift Assist fügt einen gestalteten Theme-Abschnitt ohne Inhalt ein. Claude und ChatGPT werden über eine HTTP-API angebunden; einen MCP-Server haben wir nicht gefunden.
  • Varify.io: Das Bauen mit KI verbraucht Credits, die du als Paket kaufst oder über einen eigenen API-Schlüssel abrechnest. Serverseitige Ausspielung und automatischer Stopp gibt es im Enterprise-Plan.
  • VWO und AB Tasty: Unsere Recherche vom 6. Oktober 2026 umfasste den Agenten-Ablauf von Wingify, die Preise und die Shopify-App. Editoren, serverseitige Ausspielung und Datenstandort waren nicht Teil davon, deshalb steht in diesen Zellen Nicht gefunden. Auto-Stopp bezieht sich auf den Guardrail Agent, der Verstöße rückgängig macht.
  • Kameleoon: Der Code-Editor ist im Starter-Plan ein Add-on. Vorhersage bezieht sich auf die vom Anbieter angegebene Ideenbewertung von PBX Ideate, trainiert auf „20,000+ experiments“.
  • Shopify Rollouts: Rabatte können Teil eines Rollouts sein, Preise nicht. SimGym, eine separate Shopify-App, simuliert Käufer vor dem Start. Sie ist auf Commerce-Sitzungen trainiert, nicht auf früheren A/B-Tests.
  • GrowthBook: Der AI Visual Editor gehört zu Pro und Enterprise. Auto-Stopp bezieht sich auf das automatische Zurücksetzen bei Safe Rollouts in Pro.
  • Visually.io: Preistests brauchen den Scale-Plan mit mindestens 600 Bestellungen im Monat oder Shopify Plus mit 7.500 oder mehr im Pro-Plan.
  • Elevate: Die KI erzeugt Produktbilder für Bildtests. Der MCP-Server liest Daten, kann aber keine Experimente ändern.

08Was leisten die neun wichtigsten Tools im Detail?

Neun Profile im selben Aufbau: ein Überblick, die Kernfunktionen, die Grenzen, wann das Tool nicht die richtige Wahl ist, und ein Fazit in drei Sätzen. Die Reihenfolge ist Apex by DRIP, Intelligems, Shoplift, Varify.io, VWO, Optimizely, Kameleoon, ABlyft und Shopify Rollouts. Sie ist keine Rangliste.

Jedes Profil stützt sich auf Anbieterseiten, Dokumentationen, Preisseiten und Bewertungsportale, gelesen im Oktober 2026. Aussagen der Anbieter sind als solche gekennzeichnet.

Apex by DRIP: am besten geeignet für Shops, deren Tests immer wieder ohne Effekt enden

  • Am besten geeignet für: Shops, deren Tests immer wieder ohne Effekt enden: Der Engpass ist die Auswahl der Tests, nicht ihre Umsetzung.
  • Kann testen: Seiten und Seitenelemente, parallele Tests auf demselben Traffic mit optionalen Ausschlussgruppen, A/A-Tests, Redirect-Tests, globale Holdout-Gruppe, Feature Flags und gestufte Rollouts.
  • Shopsysteme: Installation als Shopify-App (Installation mit zwei Klicks über einen Link, serverseitiges Tracking, First-Party-Daten).
  • Datenstandort und Compliance: DSGVO umgesetzt; Hosting in der EU und in Großbritannien; Auftragsverarbeitungsverträge für US-Tools; ISO 27001 und SOC 2 in Arbeit, noch ohne Zertifizierung; Einwilligung für die meisten DSGVO-Apps auf Shopify unterstützt.
  • Einstiegspreis und Bindung: Preise sind nicht veröffentlicht; es gibt eine kostenlose Stufe ohne Kreditkarte für einen Shop; Gespräch buchen.
  • Hauptstärke: das Gedächtnis aus Millionen beobachteter Tests hinter jeder Idee. So wird die Auswahl besser, bevor etwas gebaut wird.
  • Hauptgrenze: Der Preis ist nicht veröffentlicht.
  • Belegstufe: Produktaussagen dokumentiert auf drip-apex.com (1); Zahlen zu Datenbank und Holdout vom Anbieter genannt in der Pressemitteilung vom 29. September 2026 (5); keine Bewertungen Dritter, weil es noch kein öffentliches Bewertungsprofil gibt.

Kernfunktionen. Apex by DRIP ist eine A/B-Testing-Plattform für Unternehmen mit Online-Verkauf. Sie sagt vorher, welche Tests wahrscheinlich gewinnen, bevor sie live gehen, und baut auf einer der größten A/B-Test-Datenbanken im E-Commerce auf. DRIP nennt die Methode Prediction-Based Experimentation. Einfach gesagt: Wir wissen, was Shops wie deiner getestet haben und welche Tests gewonnen haben. Apex hat drei Ebenen: ein Testgedächtnis, ein Testing-Tool und begleitete Umsetzung.

Das Testgedächtnis umfasst 4,3 Millionen A/B-Tests aus 151.000 Shops, gesammelt seit 2011. Jede Testidee bekommt vor dem Start eine Likelihood to Win: einen Prozentwert pro Testidee, angezeigt zusammen mit der Zahl der Tests, die ihn stützen. In einer Holdout-Prüfung innerhalb eines Shops gewann das obere Drittel der Ideen 1,4- bis 1,6-mal so oft (Pressemitteilung vom 29. September 2026). DRIP hat außerdem Anfang September 2026 Vorhersagen für 33 Marken erstellt und eingefroren. Die ersten Ergebnisse veröffentlicht DRIP ab November 2026.

Fußnote zur Likelihood to Win
Die Likelihood to Win ordnet eine Idee im Vergleich zum eigenen Backlog des Shops ein. Sie ist keine Gewinnwahrscheinlichkeit im strengen Sinn.

Das Testing-Tool baut, startet und wertet Tests direkt im Shop aus. Experimente lassen sich als Code konfigurieren, in einem Code-Editor bearbeiten oder in einem visuellen Builder namens Operator bauen, mit Vorschau-Links über die CLI und QA in der Vorschau. Die CLI ist der Weg für Entwickler. Über eine MCP-Anbindung baut und liest ein Shop-Betreiber Tests aus ChatGPT oder Claude heraus, ohne Terminal.

Die Ergebnisse beruhen auf Statistik mit festem Testzeitraum und Konfidenz. Jeder Test zeigt die Hauptkennzahl, den Uplift und den Umsatz während der Laufzeit. Auf Shopify zeigt Apex den Gewinn pro Test. Ein Shop kann also auf den Gewinn nach Rabatten, Warenkosten und Rückerstattungen optimieren. Guardian stoppt einen Test automatisch, wenn eine Schwelle für Umsatzverlust erreicht ist. Kunden sehen vier QA-Prüfungen: alle Geräte, Tracking und Targeting, Responsive, Übereinstimmung mit dem Design.

Heatmaps und Verhalten werden pro Variante gezeigt: Klicks, Scrolltiefe, durchschnittlicher Fold und Funnel-Schritte. Eine Engagement-Ansicht zeigt Absprungrate, Lesetiefe und ob Besucher weiterstöbern. Integrationen mit Clarity und Hotjar sind in der Beta. Ein Analytics-Bereich deckt Akquise, Verhalten, Zielgruppen und Quellen ab, auch ChatGPT. Der Apex-Chat in der App beantwortet, was als Nächstes getestet werden sollte, warum ein Test gewonnen hat und wie sich Besucher bewegt haben. Seine Antworten nennen Quellen. Der Backlog ordnet Ideen automatisch ein und gibt jeder einen Wert.

Die dritte Ebene ist die begleitete Umsetzung: Tests werden zusammen mit dem DRIP-Team gebaut, geprüft, gestartet und ausgewertet. DRIP hat mehr als 4.000 eigene Tests durchgeführt und mehr als 250 Online-Shops betreut, darunter SNOCKS, AG1, Hornbach und KoRo.

Apex bewertet jede Testidee anhand von 4,3 Millionen beobachteten A/B-Tests aus 151.000 Shops und zeigt, wie viele Tests hinter jedem Wert stehen. Die nächstgrößere veröffentlichte Zahl in diesem Vergleich ist Kameleoons Ideate mit mehr als 20.000 Experimenten; Varify nennt 10.000 oder mehr Testmuster; kein anderer Anbieter in diesem Vergleich veröffentlicht die Zahl der Tests hinter seinen Empfehlungen (Anbieterseiten geprüft im Oktober 2026).

Grenzen. Der Preis ist nicht veröffentlicht. Es gibt eine kostenlose Stufe ohne Kreditkarte für einen Shop. Darüber hinaus führt der Weg zum Preis über ein gebuchtes Gespräch. Braucht dein Einkaufsprozess eine Preisliste vor jedem Gespräch, ist das ein echter Nachteil von Apex.

Wann Apex nicht die richtige Wahl ist:

  • Ein Team, das schon heute gut auswählt, welche Tests gewinnen, hat weniger von der Vorhersage-Ebene.
  • Ein Shop, der noch keinen Test pro Woche live bringen kann, sollte diese Routine vorher mit einem leichteren Tool aufbauen. Vorhersagen zu kaufen, bevor die Umsetzung steht, ist die falsche Reihenfolge.
  • Wer vor einem Gespräch eine veröffentlichte Preisliste braucht.

Fazit. Apex by DRIP setzt beim Engpass vor der Umsetzung an: bei der Auswahl der Tests. Es verbindet ein Testgedächtnis aus 4,3 Millionen A/B-Tests aus 151.000 Shops, ein Testing-Tool mit Heatmaps pro Variante und Gewinn pro Test und begleitete Umsetzung mit dem DRIP-Team. Seine Grenze: Der Preis ist nicht veröffentlicht. Es gibt eine kostenlose Stufe ohne Kreditkarte für einen Shop, der nächste Schritt ist ein Gespräch.

Kostenlos starten

Intelligems: am besten geeignet für Preis-, Versand- und Angebotstests auf Shopify

  • Am besten geeignet für: Shopify-Händler, die neben Inhalten auch Preise, Versandkosten und Angebote testen und das Ergebnis als Gewinn lesen wollen.
  • Kann testen: Preise (pro SKU, Abo, mehrere Währungen), Rabatte, Geschenke, Bundles, Upsells, Versandkosten und Versandschwellen, Themes, Templates, Landingpages, Seiteninhalte, Checkout-Blöcke (Shopify Plus), Angebote nach dem Kauf.
  • Shopsysteme: Shopify, jeder Tarif; Checkout-Tests brauchen Plus, Tests von Versandkosten brauchen Advanced oder Plus. Headless-Storefronts mit Hydrogen und React über das Paket @intelligems/headless.
  • Datenstandort und Compliance: Hosting-Region nicht veröffentlicht; laut Datenschutzerklärung werden Daten „transferred outside of Europe, including to Canada and the United States“. Auftragsverarbeitungsvertrag, Seite mit Unterauftragsverarbeitern, SOC 2, ISO 27001, cookieloser Modus: nicht gefunden.
  • Einstiegspreis und Bindung: Smart Content 69 $ im Monat oder 660 $ im Jahr in der Einstiegsstufe (0 bis 1.000 Bestellungen); Unlimited ab 349 $ im Monat mit 3 Monaten Mindestlaufzeit und ohne Testphase; 14 Tage Testphase bei den anderen Plänen; keine kostenlose Stufe; Preis pro Shop nach monatlichem Bestellvolumen, „no per-visitor charges and no overages“ (geprüft im Oktober 2026).
  • Hauptstärke: Eine Shopify-App testet Preise, Versand, Angebote, Checkout und Inhalte, mit Berichten zu Gewinn und Warenkosten (COGS).
  • Hauptgrenze: Es unterstützt Shopify und kein anderes Shopsystem, und Preistests brauchen eine Integration, die Intelligems mit deinem Team baut, und 3 Monate Mindestlaufzeit.
  • Belegstufe: 1 für Produkt, Dokumentation und Preise; 2 für Preisangaben Dritter; 4 für Bewertungen; 3 und 5 für Aussagen des Anbieters.

Kernfunktionen. Intelligems beschreibt sich mit „Decide Confidently. Grow Profitably.“ und „Most tools optimize for clicks. We optimize for profit.“ Das Unternehmen aus New York ist seit Dezember 2021 im Shopify App Store und nennt „100,000+ Tests run“ und „5,000+ Stores“ (Angabe des Anbieters). Der Schwerpunkt liegt auf kommerziellen Tests: Preise, Rabatte, Bundles, Versandkosten und Versandschwellen, Checkout-Blöcke und Angebote nach dem Kauf, dazu Tests von Themes, Templates und Inhalten.

Tests entstehen in einem Visual Builder, einem AI Visual Builder, mit CSS und JavaScript oder über JavaScript und eine External API. Der Atlas Experience Agent baut aus einer Textbeschreibung Tests für Inhalte, Themes, Templates, Redirects sowie JS oder CSS. Laut Intelligems unterstützt der Agent Angebote, Checkout, Angebote nach dem Kauf, Preise und Versand noch nicht. Ein Atlas-QA-Agent prüft in allen Konten den Aufbau vor dem Start. Ein Test kann bis zu fünf Gruppen haben, für parallele Tests gilt „no limit“ (ein Versandtest gleichzeitig), und sich gegenseitig ausschließende Experimente gibt es auf Anfrage in der Beta.

Die Statistik nutzt „a Bayesian statistical model and Monte Carlo simulations“ mit 95-Prozent-Intervallen. Intelligems empfiehlt „300+ orders per test group“ und „7+ days“. Jedes Experiment meldet Umsatz, Gewinn und Warenkosten, dazu den Gewinn pro Besucher. Automatischer Stopp, Guardrails und Prüfungen des Sample Ratio sind nicht veröffentlicht. Zu den Integrationen gehören GA4, Segment, Klaviyo, Clarity, Heatmap.com und Hotjar, dazu „direct connections to Snowflake and your data warehouse“. Eigene Heatmaps oder Aufzeichnungen: nicht gefunden.

Bei der KI schlagen Smart Test Recommendations (Beta) Testideen aus den Leistungsdaten des eigenen Shops vor, und Atlas „ranks them by estimated profit impact“. Gestartet wird weiterhin von Hand. Ein MCP-Server mit OAuth bindet Claude, ChatGPT, Gemini und Grok an. Er liest Ergebnisse und kann Entwürfe anlegen und Tests starten, pausieren oder beenden, jeweils mit einem Bestätigungsschritt. MCP, Atlas und der AI Visual Builder sind in jedem bezahlten Plan enthalten. Im Shopify App Store hat Intelligems 4,8 aus 198 Bewertungen (10. Oktober 2026).

Grenzen. Laut Intelligems werden derzeit Shopify-Shops unterstützt und kein anderes System. Preistests brauchen eine Integration, die Intelligems mit deinem Team baut und die „typically“ „3-5 business days“ dauert, und Smart Pricing und Unlimited haben 3 Monate Mindestlaufzeit ohne Testphase. Der Support läuft über Slack und E-Mail ohne Live-Chat. Schwache Bewertungen nennen langsamen Support, eine Einrichtung, die Code braucht, und den Preis. Eine Hosting-Region, einen Auftragsverarbeitungsvertrag oder Sicherheitszertifizierungen haben wir nicht gefunden.

Wann Intelligems nicht die richtige Wahl ist:

  • Shops auf Shopware, WooCommerce, Magento oder einem anderen Shopsystem.
  • Teams, die Preistests ausprobieren wollen, bevor sie sich binden: Smart Pricing und Unlimited haben keine Testphase.
  • Teams, die Support per Live-Chat brauchen.
  • Käufer, die SOC 2, einen Auftragsverarbeitungsvertrag oder EU-Hosting vorab dokumentiert brauchen: nicht gefunden.

Fazit. Intelligems ist eine Shopify-App, die um kommerzielle Tests gebaut ist: Preise, Versand, Angebote und Checkout, ausgewertet als Gewinn. Dazu kommen ein visueller Editor für Inhalte, KI-Agenten zum Bauen und ein MCP-Server. Es passt zu Shopify-Shops mit genug Volumen für Preistests und der Geduld für 3 Monate Mindestlaufzeit, nicht aber zu Käufern, die EU-Datendokumentation vorab brauchen.

Shoplift: am besten geeignet für Theme- und Template-Tests auf Shopify

  • Am besten geeignet für: Shopify-Marken, die Themes und Templates in dem Editor testen wollen, den sie schon nutzen.
  • Kann testen: Templates für Startseite, Kategorie, Produkt, Seite, Blog, Artikel, Warenkorb und Suche; Header, Footer, Navigation, globale Stile und Warenkorbtyp; Preise in Advanced und Pro (Shops mit einer Währung); Abo-Preise über Recharge 2.0; Versandschwellen über die JavaScript-API; Produktbilder über Redirect-Tests. Checkout-Seiten: nicht unterstützt.
  • Shopsysteme: Shopify und Shopify Plus. Headless-Storefronts (Hydrogen, Next.js) sind „not currently supported“.
  • Datenstandort und Compliance: Daten werden „transferred to and processed in the United States“; Auftragsverarbeitungsvertrag mit EWR-Standardvertragsklauseln Modul 2 und UK IDTA; Einwilligung über die Customer Privacy API von Shopify. ISO 27001 und SOC 2: nicht gefunden.
  • Einstiegspreis und Bindung: Core 99 $ im Monat oder 74 $ im Monat bei jährlicher Zahlung, bis 50.000 Besucher im Monat; Advanced 399 $ monatlich oder 299 $ jährlich; Pro jährlich abgerechnet, ab 699 $ im Monat. Abgerechnet nach eindeutigen Besuchern der ganzen Website, „not tested visitors“; 14 Tage Testphase; keine kostenlose Stufe (geprüft im Oktober 2026).
  • Hauptstärke: Tests laufen auf den eigenen Themes und Templates von Shopify, bearbeitet im Theme Editor, mit einer vom Anbieter genannten Einbuße bei der Ladezeit von 1 bis 4 Punkten.
  • Hauptgrenze: nur Shopify-Storefronts auf Liquid-Basis, ohne Headless, Checkout oder A/B/n-Tests.
  • Belegstufe: 1 für Produkt und Preise, mit vermerkten Widersprüchen bei den Preisen; 2 für Unternehmensdaten; 4 für Bewertungen; 3 und 5 für Aussagen des Anbieters.

Kernfunktionen. Shoplift nennt sich „The CRO Platform Built for Shopify“ und eine Plattform „built for high-growth DTC brands“. Das Unternehmen aus New York ist seit Dezember 2024 im Shopify Plus Certified App Program. Der Ansatz: in Shopify bleiben. Varianten werden im Shopify Theme Editor bearbeitet statt in einem eigenen Editor, mit Liquid oder JavaScript für Code-Änderungen und einer JavaScript-API für individuelle Tests.

Zu den Tests gehören ein Vorschaumodus und eine QA-Checkliste. Für parallele Tests gilt „no limit“, sie werden automatisch nach Testart getrennt. Jeder Test läuft mit zwei Gruppen, standardmäßig im Verhältnis 50/50; A/B/n wird nicht unterstützt. URL-Redirect-Tests decken Produktbilder und andere Fälle ab, die das Theme nicht abbilden kann. Preistests kamen im September 2025 zu Advanced und Pro hinzu, für Shops mit einer Währung und nicht für Produkte, die mit Replo, PageFly und anderen aufgeführten Page Buildern gebaut sind.

Shoplift nutzt „Bayesian statistical methods“ mit einer Hauptkennzahl namens Probability to Win. Ein Ergebnis muss „for multiple days“ halten, bevor Shoplift es als Leaning, High Confidence, Clear Winner oder nach zwei Wochen als No Change einstuft. Eine andere Seite des Anbieters sagt, es „requires 95% statistical significance before declaring a winner“. Die Richtlinie lautet „at least 10,000 visitors per variant and 14 days“. Zu den Kennzahlen gehören Umsatz, Bestellungen, Warenkorb-Hinzufügungen und Umsatz pro Besucher. Gewinnkennzahlen, Prüfungen des Sample Ratio, Holdouts und automatischer Stopp: nicht gefunden. Heatmaps kommen über Integrationen mit Heatmap.com, Hotjar und Clarity; GA4 gibt es in Advanced und Pro.

Lift Assist ist „Shoplift's recommendation engine which dynamically provides theme sections“: Es dupliziert das Template und fügt einen Abschnitt ein, gestaltet mit den importierten Stilen der Marke, aber es „does not automatically add content“. Shoplift sagt, es stütze sich auf „test ideas from hundreds of top brands“ und „millions of shopper sessions“ (Angabe des Anbieters). Eine HTTP-API verspricht Teams: „Command Your CRO Program From Claude or ChatGPT“; einen MCP-Server haben wir nicht gefunden. Shoplift macht drei Angaben zur Ladezeit: 2 bis 4 Punkte, etwa 2 Punkte und 1 bis 2 Lighthouse-Punkte. Pro bietet zusätzlich einen Account Manager und zweimal im Monat Strategie-Termine. Im Shopify App Store hat Shoplift 4,9 aus 133 Bewertungen (10. Oktober 2026).

Grenzen. Shoplift testet keine Checkout-Seiten, unterstützt keine Headless-Storefronts und führt keine Tests mit mehr als zwei Gruppen durch. Preistests brauchen Advanced oder Pro und einen Shop mit einer Währung. Der Preis hängt an allen Besuchern der Website, und über dem Limit des Plans pausieren die Tests. Schwache Bewertungen kritisieren Preis und Zuverlässigkeit. Die Daten werden in den USA verarbeitet, und Preisseite und App Store nennen für einige Pläne unterschiedliche Preise.

Wann Shoplift nicht die richtige Wahl ist:

  • Headless-Shopify oder jeder Shop, der nicht auf Shopify läuft.
  • Tests mit drei oder mehr Varianten.
  • Tests von Checkout-Seiten.
  • Preistests in Shops mit mehreren Währungen oder bei Produkten, die mit Replo oder PageFly gebaut sind.

Fazit. Shoplift macht den Theme Editor von Shopify zum Testing-Tool. Für Teams, die dort schon arbeiten, bleibt die Einarbeitung kurz. Es deckt Templates, Theme-Elemente und in höheren Plänen Preise ab, mit bayesscher Statistik und einer vom Anbieter genannten Einbuße bei der Ladezeit von wenigen Punkten. Es endet bei Checkout, Headless und A/B/n-Tests, und es rechnet nach allen Besuchern der Website ab.

Varify.io: am besten geeignet für No-Code-Tests auf jedem Shopsystem zum Festpreis

  • Am besten geeignet für: Teams auf jedem Shopsystem, die No-Code-Tests zum Festpreis mit unbegrenztem Traffic wollen.
  • Kann testen: Produkt-, Kategorie-, Warenkorb-, Start- und Landingpages über das Snippet; Checkout auf Shopify Plus über die separate App „Varify: Checkout A/B Testing“; Split-URL, mehrseitige Tests und Personalisierung in allen Plänen. Tests von Preisen, Versandschwellen und Empfehlungen sind nicht als Funktionen veröffentlicht.
  • Shopsysteme: jeder Shop, der JavaScript lädt; der Anbieter nennt Shopify, WooCommerce, Magento, Shopware und Eigenentwicklungen, dazu Single-Page-Apps mit React und Vue. Ein Snippet, installiert „Via GTM or directly“.
  • Datenstandort und Compliance: AWS in Frankfurt plus Cloudflare; der Anbieter nennt „GDPR, CCPA, HIPAA and revDSG“; „In principle, no cookies are set“; Auftragsverarbeitungsvertrag zum Herunterladen. SOC 2 ist als „SOON“ markiert; ISO 27001: nicht gefunden.
  • Einstiegspreis und Bindung: Growth 199 € im Monat bei jährlicher Zahlung (2.388 € im Jahr) oder 249 € monatlich, eine Domain, fünf aktive Experimente; Pro 249 € im Monat jährlich oder 349 € monatlich; Enterprise ab 799 € im Monat. KI-Credits kosten extra. 15 Tage Testphase, „No credit card details, no active cancellation“; keine kostenlose Stufe (geprüft im Oktober 2026).
  • Hauptstärke: ein Festpreis pro Domain mit unbegrenztem Traffic, ab 199 € im Monat bei jährlicher Zahlung.
  • Hauptgrenze: Die Standardstatistik besteht aus einseitigen frequentistischen Tests; zweiseitige und bayessche Methoden brauchen Pro.
  • Belegstufe: 1 für Produkt, Preise und Compliance; 4 für Bewertungen; 5 für die Leistungszahlen und den Eintrag als Claude-Connector.

Kernfunktionen. Varify.io nennt sich „The A/B testing platform that scales with you“ und verspricht „Transparent pricing. Unlimited Traffic. Powerful testing.“ Das Unternehmen aus dem Raum München nennt „2,704 teams worldwide“. Das Preismodell ist der deutlichste Unterschied: eine feste Gebühr pro Domain, „Same price, unlimited traffic“, wo andere Tools in diesem Vergleich nach Besuchern, Bestellungen, Nutzerplätzen oder getrackten Nutzern abrechnen.

Jeder Plan enthält den visuellen und den Code-Editor, Vorschau-Links und einen QA-Modus. Growth erlaubt fünf aktive Experimente, Pro hebt die Grenze auf. Ausschlussgruppen und serverseitige Ausspielung (eine API seit April 2026) gibt es im Enterprise-Plan, und serverseitige Tests brauchen für die Auswertung weiterhin einen clientseitigen Tracking-Block. Auf Shopify läuft das Snippet in jedem Tarif, und seit dem 6. Mai 2026 testet eine separate App Checkouts auf Shopify Plus für 119 $ im Monat.

Varify sagt: „We do not have our own tracking.“ Die Ergebnisse kommen aus dem Analytics des Kunden, etwa GA4, Clarity oder Hotjar in allen Plänen und BigQuery, Adobe Analytics oder Mixpanel in Pro. Seit dem 18. September 2026 gibt es optional ein cookieloses Varify Tracking in Echtzeit. Die Standardstatistik ist „a frequentist method with one-sided tests“, Chi-Quadrat für Raten und ein t-Test für Umsatz, signifikant ab 95 Prozent. Umsatz-Signifikanz und ARPU sind in jedem Plan enthalten. Den automatischen Stopp gibt es seit Juli 2026 im Enterprise-Plan; sequenzielles Testen und Bandits sind als „SOON“ markiert.

Varify hat 2026 KI ergänzt: ein KI-Audit für Ideen, Varianten per Prompt, eigene API-Schlüssel für Anthropic, Google oder OpenAI, einen Varify-MCP-Server, der „create, start, pause experiments“ kann, und eine KI-Auswertung von Experimenten. Laut Anbieter beruhen die Empfehlungen auf „CRO patterns from real experiments“, und er nennt „10,000+ test patterns“. Varify gibt ein Snippet von 11,5 KB an, das meist in unter 30 Millisekunden lädt (Angabe des Anbieters). Bewertungen: 4,8 aus 113 bei OMR Reviews und 4,9 aus 57 bei G2 (10. Oktober 2026). Gelobt werden die einfache Bedienung, der visuelle Editor, der Festpreis und der schnelle Support.

Grenzen. Die Standardstatistik besteht aus einseitigen frequentistischen Tests, und die zweiseitigen und bayesschen Optionen brauchen Pro. Jeder Plan deckt eine Domain ab. Gewinnkennzahlen, Guardrails, Prüfungen des Sample Ratio und Holdouts: nicht gefunden. SOC 2 ist geplant, nicht abgeschlossen. Rezensenten bei OMR nennen eine teils unübersichtliche Oberfläche, eine verbesserungswürdige Dokumentation, die Auswertung in Google Analytics und ein Targeting, das technisches Know-how verlangt.

Wann Varify.io nicht die richtige Wahl ist:

  • Teams, die heute sequenzielles Testen oder Bandits brauchen: Beides ist als „SOON“ markiert.
  • Aufbauten mit mehreren Marken oder Ländern auf vielen Domains: Jeder Plan deckt eine Domain ab.
  • Käufer, die heute SOC 2 oder ISO 27001 verlangen.
  • Teams, die Gewinn- oder Guardrail-Kennzahlen im Testing-Tool selbst wollen: nicht gefunden.

Fazit. Varify.io ist ein No-Code-Testing-Tool für jedes Shopsystem, gehostet in Frankfurt, mit Festpreis pro Domain und unbegrenztem Traffic. 2026 kamen das Bauen mit KI und ein MCP-Server hinzu, für die Ergebnisse nutzt es dein eigenes Analytics. Achte auf die einseitige Standardstatistik und die Pläne mit einer Domain.

VWO (Wingify): am besten geeignet für Agenten über den ganzen Testablauf

  • Am besten geeignet für: Teams, die Agenten von der Recherche bis zum Rollout wollen, mit Freigabeschritten durch Menschen, auf einer Plattform.
  • Kann testen: Seiten; auf Shopify Theme-Tests über Split-URL, wobei das Skript nicht auf Checkout-Seiten läuft. Preistests sind „coming soon“; Angebotstests und ein Landingpage-Builder stehen nicht in der Produktliste (6. Oktober 2026).
  • Shopsysteme: eine Shopify-App seit dem 1. März 2024: kostenlos zu installieren, bezahltes Abo nötig, null Bewertungen mit Stand 3. September 2026. Andere Shopsysteme waren nicht Teil unserer Recherche.
  • Datenstandort und Compliance: nicht Teil unserer Recherche vom 6. Oktober 2026; frag den Anbieter.
  • Einstiegspreis und Bindung: Pläne Growth, Pro und Enterprise ohne öffentliche Preise, gestaffelt nach getrackten Nutzern im Monat. Ein Drittanbieter nennt Preise für VWO Testing aus der App von 665 $ im Monat (Growth, jährlich) und 1.336 $ (Pro) bei 100.000 getrackten Nutzern (mida.so, 19. Mai 2026). Der kostenlose Starter-Plan ist weggefallen; 30 Tage Testphase ohne Kreditkarte.
  • Hauptstärke: Agenten für Recherche, Ideen, Umsetzung, QA, Start, Rollout und Guardrails auf einer Plattform, die Autonomie eingestellt als „a dial, not an all or nothing“.
  • Hauptgrenze: keine öffentlichen Preise, keine Preis-, Angebots- oder Checkout-Tests live und eine Shopify-App ohne Bewertungen.
  • Belegstufe: 1 für Produktseiten und Releases; 2 für Preise von Dritten; 4 für G2 und Trustpilot; 5 für Umsatz- und Kundenzahlen.

Kernfunktionen. VWO und AB Tasty haben ihre Fusion am 20. Januar 2026 angekündigt, mit „ARR surpassing $100 million“ und „more than 4,000 customers“. Am 16. September 2026 ist das gemeinsame Unternehmen als Wingify neu gestartet, „the Agentic Experience Optimization Platform“. VWO und AB Tasty bleiben als Produktmarken bestehen, vwo.com und abtasty.com leiten jetzt auf wingify.com weiter, und das Unternehmen sagt: „Nothing about this launch asks our customers to start over.“ Wingify hat seinen Hauptsitz in Neu-Delhi und ein Büro in Köln.

Das Produkt ist jetzt um Agenten unter dem Namen Wingz gebaut. Ein Insight Agent „reads funnels, replays, forms, and surveys; finds the segments that behaved differently and why“. Ein Hypothesis Agent „turns evidence into ranked, testable ideas and drafts the variations“, und die Empfehlungen „are presented for human review“. Ein Synthetic Testing Agent „tests a change on synthetic visitors built from your real segments“, vor dem Start. Wingz „interprets the design intent and builds the variation“ aus Text, Figma, einem Screenshot oder einem PDF, und das Ergebnis ist „visible and editable before anything ships“.

Der Experiment Agent bereitet Zielgruppe, Varianten, Kennzahlen und Start vor, und „Nothing goes live without approval“. Die Statistik läuft auf dem bayesschen SmartStats, Umsatzprognosen kommen mit Konfidenzintervallen. Ein Rollout Agent „stages a feature out, holds on a guardrail, reverts, resumes“, und ein Guardrail Agent macht Verstöße rückgängig. Die Autonomie reicht von „propose-and-approve“ bis Autopilot, und „the safeguards never switch off: an approval gate, guardrail metrics, traffic caps, a kill switch, and a permanent holdout“. Wingz ist über MCP an Claude, ChatGPT, Cursor und Gemini angebunden, und Enterprise-Kunden können ihr eigenes Modell mitbringen. Die Agenten sind „trained on AB Tasty's proprietary data and user insights“; eine Größe des Datenbestands oder eine veröffentlichte Gewinnvorhersage haben wir nicht gefunden.

Wingify nennt „200+ Customer Success Experts“ und im Enterprise-Plan einen eigenen Success Manager. Einen begleiteten Experimentation-Service, bei dem das Team des Anbieters die Tests baut und betreibt, haben wir nicht gefunden. Bei G2 hat VWO Testing 4,4 aus 929 Bewertungen und AB Tasty 4,4 mit Leader-Badges für Sommer 2026. Bei Trustpilot hat VWO 2,2 aus 93 Bewertungen, mit Beschwerden über Preise bei der Verlängerung und über die Abrechnung (Stand 4. September 2026).

Grenzen. Die Preise sind nicht öffentlich, und der kostenlose Plan ist weggefallen. Preistests sind „coming soon“, Angebots- und Checkout-Tests sind nicht live. Auf Shopify hat die App keine Bewertungen, das Skript läuft nicht auf Checkout-Seiten, und Theme-Tests laufen über Split-URLs. Nach der Fusion bleiben bestehende Verträge unverändert, und die Plattformen wachsen „over time“ zusammen; ein Drittanbieter erwartet steigende Preise im Mittelstand. Den Datenstandort hat unsere Recherche nicht abgedeckt. Frag danach.

Wann VWO nicht die richtige Wahl ist:

  • Teams, die einen öffentlichen Preis brauchen, bevor sie mit dem Vertrieb sprechen.
  • Shops, die jetzt Preise, Angebote oder den Checkout testen wollen.
  • Shopify-Händler, die Apps nach den Bewertungen im App Store auswählen.
  • Teams, bei denen der Anbieter die Tests bauen und betreiben soll: Einen begleiteten Service haben wir nicht gefunden.

Fazit. VWO, jetzt zusammen mit AB Tasty Teil von Wingify, verkauft den ganzen Ablauf von der Recherche bis zum Rollout als Satz von Agenten mit Freigabeschritten und Guardrails. Es ist eine Plattform für Teams mit dem Budget für einen Enterprise-Vertrag und den Leuten, die Agenten beaufsichtigen. Kommerzielle Tests auf Shopify, öffentliche Preise und ein begleiteter Service gehören mit Stand Oktober 2026 nicht dazu.

Optimizely: am besten geeignet für Experimentation im Enterprise-Umfeld mit tiefer Statistik

  • Am besten geeignet für: Enterprise-Teams, die Experimente über Web, Backend, Mobile und Edge durchführen und dokumentierte Statistik und Zertifizierungen brauchen.
  • Kann testen: alles im DOM der Seite über das Snippet; serverseitige Logik über mehr als 20 SDKs; A/B-, multivariate, mehrseitige und Bandit-Tests; Feature Flags mit schrittweisen Rollouts und Kill Switches. Der Shopify-Checkout wird über ein Custom Pixel gemessen, nicht verändert. Funktionen für Preise, Versand und Rabatte: nicht gefunden.
  • Shopsysteme: jede Website über ein JavaScript-Snippet im Head der Seite, auch Shopify-Themes; keine Testing-App im Shopify App Store; ein Connector für Shopify Plus synchronisiert Katalog- und Verkaufsdaten in die Optimizely Data Platform.
  • Datenstandort und Compliance: ISO 27001:2022, ISO 27017, ISO 27018, „SOC 2 Type 2 Attestation“, PCI DSS; „Your data will be stored in EU data centers“, mit „the majority“ der Produkte in der EU Data Boundary; Auftragsverarbeitungsvertrag mit Standardvertragsklauseln plus Zusätzen für Großbritannien und die Schweiz; öffentliche Liste der Unterauftragsverarbeiter.
  • Einstiegspreis und Bindung: nicht veröffentlicht: „Every Optimizely plan is individually packaged.“ Ein kostenloser Feature-Experimentation-Plan erlaubt ein gleichzeitiges Experiment. Vendr nennt einen Median von 81.447 $ im Jahr über 126 Käufe, mit einer Spanne von 26.460 $ bis 261.075 $, für das gesamte Optimizely-Portfolio (Drittanbieter, geprüft im Oktober 2026).
  • Hauptstärke: ein breiter, dokumentierter Satz aus Statistik und Agenten in einem Produkt: sequenzielle Stats Engine, Erkennung von Sample-Ratio-Abweichungen, Bandits, ein MCP-Server und Agenten zum Bauen von Tests, ausgeliefert im Lauf von 2026.
  • Hauptgrenze: keine öffentlichen Preise und ein Vertrags-Median laut Drittanbieter von etwa 81.000 $ im Jahr.
  • Belegstufe: 1 für Produkt, Statistik und Compliance; 2 für Unternehmensdaten und Preise; 4 für Bewertungen; 5 für Aussagen des Anbieters.

Kernfunktionen. Optimizely, gegründet 2010, wurde 2020 von Episerver übernommen. Episerver hat 2021 den Namen Optimizely angenommen und 2024 NetSpring für Analytics direkt im Data Warehouse gekauft. Web Experimentation wird als „Agentic Experimentation“ verkauft, unter der Zeile „Test everything, regret nothing“. Feature Experimentation ergänzt SDKs für Backend, Mobile und Edge.

2026 hat der visuelle Editor Drag-and-drop, Bearbeitung direkt auf der Seite, Vorlagen und einen damit synchronisierten Monaco-Code-Editor bekommen. Ein Variation Development Agent (März) und „one-click variation creation“ (Juni) führen zum Build Agent (September), der „turns a saved or draft idea into a complete A/B test“.

Die Statistik ist Optimizelys Stärke. Die Standard-Stats-Engine nutzt sequenzielles Testen mit Kontrolle der False Discovery Rate, entwickelt mit Forschern aus Stanford. So können Teams „monitor results continuously“. Frequentistische Methoden mit festem Testzeitraum und bayessche Methoden gibt es in der Beta über einen Customer Success Manager. Multi-Armed Bandits, Stats Accelerator und kontextuelle Bandits sind verfügbar, CUPED ist beschrieben, und die automatische sequenzielle Erkennung von Sample-Ratio-Abweichungen bietet „immediate detection at the beginning of an experiment's lifecycle“. Die Analytics laufen direkt im Data Warehouse; Heatmaps und Aufzeichnungen kommen über Integrationen mit Hotjar und Contentsquare, nach Variante markiert.

Opal, die Agentenplattform von Optimizely, hat einen Program Overview Agent (Januar) bekommen, einen Idea Builder, der „generates experiment ideas based on your page, goals, and research“ (April), und den Build Agent (September). Ein MCP-Server bindet Claude, Cursor und VS Code per OAuth an die Experimentdaten an (April 2026). Opal nutzt „foundational LLMs including Gemini and Claude“, und Optimizely sagt: „Your data is never used to train the model or shared across customers.“ Opal läuft auf Credits, deren Preis nicht veröffentlicht ist. Das Snippet enthält jedes laufende Experiment mit seinen Definitionen, und Optimizely empfiehlt eine synchrone Installation im Head, weil asynchrones Laden „increases the risk of flashing“. Bewertungen: G2 4,2 aus 411 (Suchergebnis-Auszug), TrustRadius 8,7 von 10 aus 599 (10. Oktober 2026). Eine Kritik bei G2 lautet „robust but expensive, suited for larger organizations“.

Grenzen. Preise gibt es auf Anfrage, und Berichte von Dritten verorten typische Verträge im Bereich von mehreren zehntausend Dollar im Jahr. Optimizely hat keine Testing-App im Shopify App Store, und sein Snippet kann nicht im Checkout von Shopify laufen, der stattdessen über ein Custom Pixel gemessen wird. Für Preis-, Versand- und Rabatttests gibt es keine eigene Funktion.

Wann Optimizely nicht die richtige Wahl ist:

  • Kleine Budgets: Preise gibt es auf Anfrage, und die bei Vendr erfassten Verträge beginnen bei 26.460 $ im Jahr.
  • Tests im Shopify-Checkout: Das Snippet kann nicht im Checkout von Shopify laufen.
  • Teams, die eine Installation aus dem Shopify App Store wollen: Dort gibt es keine Testing-App.
  • Websites, bei denen das Seitengewicht kritisch ist: Das Snippet wächst mit jedem laufenden Experiment und soll synchron im Head geladen werden.

Fazit. Optimizely dokumentiert eine sequenzielle Statistik-Engine, Prüfungen des Sample Ratio und Bandits, dazu serverseitige SDKs, breite Zertifizierungen und einen wachsenden Satz von Agenten. Es ist für Enterprise-Programme gebaut, die über Web und Produkt testen, und dafür bepreist. Für einen Shopify-Shop, der vor allem Themes, Preise oder den Checkout testen will, ist es mehr Plattform, als die Aufgabe braucht.

Kameleoon: am besten geeignet für Enterprise-Teams in der EU, die Agenten und serverseitige Flags wollen

  • Am besten geeignet für: Enterprise-Teams, die per Prompt bauen wollen, serverseitige Feature Flags und einen MCP-Server brauchen, gestützt auf ISO 27001 und SOC 2 Type 2.
  • Kann testen: jedes Seitenelement, das das Snippet ändern kann, dazu serverseitige Funktionen über Feature Flags. Auf Shopify werden Checkout-Conversions über ein Web Pixel erfasst; den Checkout selbst verändern: nicht gefunden. Preise, Versandschwellen und Rabatte als eigene Funktionen: nicht gefunden.
  • Shopsysteme: ein JavaScript-Snippet, asynchron von Cloudflare geladen, und SDKs für Feature Experimentation. Eine Shopify-App gibt es seit Juni 2021; die Integrationsanleitung gilt „exclusively to users with both a Shopify Plus and Kameleoon account“. Andere Shopsysteme haben wir nicht geprüft.
  • Datenstandort und Compliance: ISO/IEC 27001:2022, SOC 2 Type 2, PCI DSS, HIPAA, DSGVO, CCPA, CyberVadis Platinum; dedizierte Server, auf die nur Kameleoon-Personal zugreifen kann; zu den Unterauftragsverarbeitern gehören OVHcloud, Hetzner, Cloudflare und OpenAI; Hosting-Region auf den gelesenen Seiten nicht angegeben; Einwilligungsmodi einschließlich IAB TCF 2.3; einen öffentlichen Auftragsverarbeitungsvertrag haben wir nicht gefunden.
  • Einstiegspreis und Bindung: PBX Starter „Starting from $495/month“, monatlich abgerechnet, bis 10 Experimente und 50.000 getrackte Nutzer im Monat, mit 30, 100 oder 200 Prompt-Credits im Monat; Enterprise auf Anfrage. 30 Tage kostenlos testen ohne Kreditkarte, bis zu drei Experimente. Code-Editor, CUPED, Bandits, Feature Flags, Personalisierung und Mobile sind im Starter-Plan Add-ons (geprüft im Oktober 2026).
  • Hauptstärke: Eine Plattform deckt clientseitige Tests, serverseitige Flags und einen MCP-Server ab, der gewinnende Tests in Produktionscode überführt, mit ISO 27001 und SOC 2 Type 2.
  • Hauptgrenze: Die Shopify-Integration ist für Shopify Plus dokumentiert, und der Eintrag im App Store hat nach mehr als fünf Jahren keine Bewertungen.
  • Belegstufe: 1 für Produkt, Statistik und Compliance; 2 für Unternehmensdaten; 4 für Bewertungen; 5 für Aussagen des Anbieters wie die Vorhersagegenauigkeit.

Kernfunktionen. Kameleoon aus Paris wirbt mit „Build experiments in minutes by chatting with AI“. PBX steht für Prompt-Based Experimentation, und PBX 2.0 (16. April 2026) ist „a suite of AI agents designed to support every stage of the experimentation process“. Ideate analysiert eine Website auf Testchancen und liefert „up to eight test ideas for each page“. Build, Configure und Analyze erstellen Varianten aus Prompts oder Figma-Designs, richten Ziele und Segmente ein und führen eine Sammlung der Erkenntnisse aus abgeschlossenen Tests. Ship (Mai 2026) überführt gewinnende Varianten über den MCP-Server in Servercode hinter Feature Flags.

Kameleoons Ideen-Agent ist auf früheren Experimenten trainiert, und der Anbieter nennt zwei Zahlen: Der Launch-Beitrag spricht von einer Datenbank „of over 25,000 experiments“, die Ideate-Seite von „Trained on 20,000+ experiments“. Er nennt außerdem „63% accuracy on high-confidence predictions, compared to an industry average of around 20%“ und sagt, Ideate-Ideen seien „three times more likely to convert than the industry average“ (beides Angaben des Anbieters, ohne veröffentlichte Methode). Der MCP-Server bietet mehr als 50 Tools, dokumentiert für Claude Code und Cursor, und ein Claude-Connector funktioniert mit „no IDE required“. Einen ChatGPT-Connector haben wir nicht gefunden.

Zum Bauen ohne KI gibt es einen Graphic Editor, ein Widget Studio für Widgets ohne Code und einen Code-Editor für JS und CSS, der im Starter-Plan ein Add-on ist. Starter enthält eine „Mutually Exclusive Group/Holdout“ und „40+ segmentation criteria“. Die Statistik umfasst frequentistische Methoden mit fester Stichprobe, bayessche und sequenzielle Methoden, mit Korrektur für multiples Testen und Erkennung von Sample-Ratio-Abweichungen in Echtzeit; CUPED sowie Multi-Armed und kontextuelle Bandits sind Add-ons. Eine Signifikanzschwelle, Guardrails und automatischen Stopp haben wir auf den gelesenen Seiten nicht gefunden. Zu den Integrationen gehören GA4, Hotjar, Clarity, Contentsquare, BigQuery, Snowflake und Klaviyo; eigene Heatmaps: nicht gefunden.

Das Skript wiegt „29 KB (compressed with Brotli)“ und lädt asynchron, mit einem Anti-Flicker-Standardwert von 1.000 Millisekunden. Bewertungen: OMR Reviews 4,5 aus 192 und G2 4,6 aus 137 (Suchergebnis-Auszug), 10. Oktober 2026. Rezensenten loben Oberfläche und Support. Kritik betrifft vor allem komplexe Tests, die Entwickler brauchen, die Einarbeitung und den Preis.

Grenzen. Die Anleitung zur Shopify-Integration ist für Shopify Plus geschrieben, und die App im App Store hat seit Juni 2021 keine Bewertungen. Native Preis-, Versand- und Checkout-Tests haben wir nicht gefunden. Starter beginnt bei 495 $ im Monat mit 50.000 getrackten Nutzern, und Code-Editor, CUPED und Bandits kosten extra. Die beiden Trainingszahlen für Ideate weichen voneinander ab, und für die Genauigkeitsangabe ist keine Methode veröffentlicht.

Wann Kameleoon nicht die richtige Wahl ist:

  • Shopify-Shops ohne Plus: Die Integrationsanleitung gilt „exclusively“ für Plus.
  • Teams, die Preise, Versandschwellen oder Checkout-Layouts nativ testen wollen: nicht gefunden.
  • Kleine Budgets: Der Einstiegsplan beginnt bei 495 $ im Monat, wichtige Statistikfunktionen sind bezahlte Add-ons.
  • Teams ohne Entwicklerzeit für komplexe Tests, ein häufiger Kritikpunkt in Bewertungen.

Fazit. Kameleoon verbindet einen vollständigen Satz an KI-Agenten, einen MCP-Server und serverseitige Flags mit breiten Zertifizierungen eines europäischen Anbieters. Es passt zu Enterprise-Teams, die über Web und Produkt testen und Agenten bauen und ausliefern lassen wollen. Für Shopify-Shops unterhalb von Plus oder für Preis- und Checkout-Tests weist die Dokumentation in eine andere Richtung.

ABlyft: am besten geeignet für Entwicklerteams mit strengen Anforderungen an den Datenschutz

  • Am besten geeignet für: von Entwicklern geführte Teams, die Hosting in Deutschland und keine gespeicherten personenbezogenen Daten wollen.
  • Kann testen: Seiteninhalte über visuelle oder Code-Varianten, Redirect-Tests, Entwurfs-Themes und alternative Templates auf Shopify. Native Tests von Preisen, Versandschwellen, Rabatten oder Checkout: nicht gefunden.
  • Shopsysteme: ein JavaScript-Snippet auf jeder Website, installiert im Head, über Google Tag Manager oder selbst gehostet; Shopify über theme.liquid, mit Bestellungen aus einem Webhook und Events aus einem Custom Web Pixel; keine App im Shopify App Store gefunden; Single-Page-Apps unterstützt.
  • Datenstandort und Compliance: „Hosting and Storage in Germany“, Snippet über Amazon CloudFront; „We do not store any personal data. Nothing.“ und „We do not store IP addresses.“; standardmäßig localStorage, Cookies aus, solange man sie nicht einschaltet. ISO 27001 und SOC 2: nicht veröffentlicht; einen öffentlichen Auftragsverarbeitungsvertrag haben wir nicht gefunden.
  • Einstiegspreis und Bindung: kostenloser Plan für 0 €, „No Credit Card needed“, Grenzen nicht veröffentlicht; bezahlte Pläne auf Anfrage („Pricing tailored to your needs“) mit einem Proof of Concept; Rezensenten bei OMR nennen Jahresverträge (geprüft im Oktober 2026).
  • Hauptstärke: der Umgang mit Daten: Hosting in Deutschland, keine gespeicherten personenbezogenen Daten oder IP-Adressen und standardmäßig localStorage statt Cookies.
  • Hauptgrenze: Die Shopify-Integration ist ein Theme-Snippet ohne App im App Store, und native Preis-, Rabatt- oder Checkout-Tests sind nicht dokumentiert.
  • Belegstufe: 1 für Produkt, Datenschutz und Preise; 2 für Unternehmensgröße und Preisangaben Dritter; 4 für Bewertungen; 5 für Leistungsangaben.

Kernfunktionen. ABlyft stammt von der Conversion Expert GmbH in Kiel, gegründet 2018, mit einem Team von 2 bis 10 Personen und ohne Finanzierungsrunden. Die Startseite nennt TUI, tesa, Deutsche Telekom und HORNBACH unter den Kunden. Store Leads zählte am 2. Oktober 2026 961 Shops mit ABlyft, davon 75,5 Prozent auf Shopify und 68,6 Prozent in Deutschland.

Das Tool ist für Entwickler gebaut. Jede Variante kann eigenes JavaScript und CSS enthalten, mit automatischer Minifizierung und Hilfsfunktionen, und eine GIT-Anbindung speichert Snippet-Änderungen als Versionsverlauf in GitHub oder Bitbucket. Ein webbasierter visueller Editor bearbeitet Texte, Bilder, Stile, HTML und Links. Er speichert Änderungen als CSS-Selektoren, sodass geänderte Klassennamen sie brechen können. Parallele Tests, Ausschlussgruppen, „Intelligent Redirect Experiments“ und Targeting für Single-Page-Applications über URL- und DOM-Änderungen sind dokumentiert.

Die Statistik arbeitet standardmäßig frequentistisch (ein z-Test auf Conversion-Raten, Welchs t-Test auf Werte), mit einer bayesschen Beta-Binomial-Option. Die Schwelle lässt sich von 50 bis 99,9 Prozent einstellen, mit Standardwerten von 100 Conversions und zwei Tagen. Umsatzziele erlauben das Kappen von Ausreißern, und eine Warnung zum Sample Ratio wird erwähnt. Gewinnkennzahlen, Guardrails, automatischer Stopp und Holdouts sind nicht veröffentlicht. Jedes Tool mit einem JavaScript-Tracker lässt sich anbinden, und eine REST-API liefert die Ergebnisse.

ABlyfts KI-Ebene Lumen erzeugt aus einer URL, einem Ziel und einer Zielgruppe „five AI-generated experiment ideas with hypotheses“, empfiehlt bei Ergebnissen „Ship, Don't Ship, or Keep Running“ und schreibt CSS und JavaScript für Varianten, jeweils gegen Credits. Ein MCP-Server mit OAuth bindet Claude Desktop, ChatGPT, Cursor und Windsurf mit „17 tools“ an, um Experimente, Ziele, Status und Ergebnisse zu lesen und zu schreiben. ABlyft sagt, „your data is never used for AI training“, und die KI muss pro Team von einem Admin eingeschaltet werden. Der Anbieter nennt ein initiales Snippet von 13 KB, das in 30 Millisekunden lädt (Angabe des Anbieters). Bei OMR Reviews hat ABlyft 4,9 aus 129 Bewertungen mit dem Badge „Leader - A/B Testing Q4/26“ (10. Oktober 2026). Rezensenten loben den schnellen Support, die Oberfläche und faire Preise.

Grenzen. Bezahlte Preise gibt es auf Anfrage. ABlyft hat keine App im Shopify App Store, und native Preis-, Rabatt- oder Checkout-Tests sind nicht dokumentiert. Rezensenten bei OMR schreiben, dass komplexe Tests Programmierkenntnisse brauchen, der visuelle Editor begrenzt ist, Verträge jährlich laufen und die Dokumentation Lücken hat. ISO 27001 und SOC 2 sind nicht veröffentlicht, und die Sicherheitsdokumentation sagt über sich selbst: „It is not a compliance statement.“

Wann ABlyft nicht die richtige Wahl ist:

  • Teams, die öffentliche Preise wollen: Bezahlte Pläne gibt es auf Anfrage.
  • Teams ohne Entwicklerkapazität: Komplexe Tests brauchen Programmierkenntnisse.
  • Shopify-Händler, die eine Installation aus dem App Store oder native Preis- und Angebotstests wollen.
  • Käufer, die öffentliche Nachweise zu ISO 27001 oder SOC 2 brauchen.

Fazit. ABlyft ist ein schlankes, von Entwicklern geprägtes Testing-Tool aus Kiel mit sorgfältigem Umgang mit Daten: Hosting in Deutschland, keine gespeicherten personenbezogenen Daten und standardmäßig keine Cookies. Es hat KI-Ideen, Code-Generierung und einen MCP-Server ergänzt und behält einen kostenlosen Plan. Es passt zu Teams mit Entwicklern, die Tests im Code bauen, nicht zu Teams, die Preistests oder eine Shopify-App wollen.

Shopify Rollouts: am besten geeignet für einen kostenlosen nativen Einstieg auf Shopify

  • Am besten geeignet für: Shopify-Händler, die Änderungen an Theme, Checkout und Rabatten im Admin planen und per A/B-Test prüfen wollen, ohne Zusatzgebühr.
  • Kann testen: Theme-Änderungen oder ein komplettes Ersatz-Theme, einschließlich Übersetzungen; Checkout und Kundenkonten (seit 5. Juni 2026); Aktivierung von Rabatten, bis zu 250 pro Rollout; Katalogstatus. Nicht unterstützt: Preise, Änderungen an Liquid-Templates, Vintage-Themes.
  • Shopsysteme: Shopify Online Store, nativ im Admin unter Märkte, keine App zu installieren. Headless- und individuelle Storefront-Checkouts werden nicht unterstützt.
  • Datenstandort und Compliance: Shopify ist „certified Level 1 PCI DSS compliant“ und hat „issued SOC 2 Type II and SOC 3 reports“. Hosting-Region, Zuordnung der Besucher, Cookies und Umgang mit der Einwilligung bei Experimenten: nicht veröffentlicht.
  • Einstiegspreis und Bindung: keine eigene Gebühr. Planung ab Basic (36 € im Monat oder 27 € bei jährlicher Zahlung); Experimente ab Grow (105 € im Monat oder 79 € bei jährlicher Zahlung); Targeting nach Märkten in Advanced (384 € oder 289 €) und Plus (ab 2.100 €). Europäische Preisseite, geprüft im Oktober 2026. SimGym: kostenlose Installation, danach 0,75 $ pro Simulation mit einem Theme und 1,50 $ pro Vergleich über ein monatliches Kontingent hinaus.
  • Hauptstärke: Testen im Admin eingebaut, ab Grow ohne ausgewiesene Zusatzgebühr, für Theme, Checkout und Kundenkonten seit Juni 2026.
  • Hauptgrenze: Experimente melden Kennzahlen der Conversion-Art, ohne veröffentlichte statistische Methode und ohne Umsatz- oder Warenkorbwert-Kennzahlen.
  • Belegstufe: 1 für Hilfe-Center, Changelog und Preise; 2 für Analysen Dritter; 4 für Bewertungen von SimGym; 5 für die Trainingsangabe zu SimGym.

Kernfunktionen. Shopify hat Rollouts am 10. Dezember 2025 in der Winter '26 Edition angekündigt, Planung und A/B-Tests am 31. März 2026 ab Basic freigegeben und am 5. Juni 2026 auf Checkout und Kundenkonten erweitert. Das Hilfe-Center von Shopify definiert einen Rollout als „a scheduled set of changes to your online store's main theme, checkout and accounts pages, discounts, product catalogs, or a combination of these changes.“ Es gibt drei Arten: Launch (dauerhaft), Event (zeitlich begrenzt, danach zurückgesetzt) und Experiment (Kontrolle gegen Variante).

Änderungen entstehen im Theme Editor und in den Checkout-Einstellungen von Shopify. Shopify legt automatisch eine Kopie des veröffentlichten Themes an, sodass das Live-Theme bearbeitbar bleibt. Die Standardaufteilung ist 50 Prozent Kontrolle und 50 Prozent Variante, mit einem Enddatum 90 Tage nach dem Start. Jedes Experiment bekommt ein eigenes, sich nicht überschneidendes Traffic-Segment, und ein Besucher ist pro Ressource immer nur einem Rollout zugeordnet. Am Ende setzt der Händler die Änderungen zurück oder übernimmt sie. Targeting nach Märkten braucht Advanced oder Plus.

Die Berichte sind bewusst schmal. Theme-Experimente zeigen die Conversion-Rate im Zeitverlauf, die Absprungrate, die Rate der Besucher, die den Checkout erreichen, und die Add-to-Cart-Rate; Checkout-Experimente zeigen die Checkout-Conversion-Rate. „You can't customize the available metrics.“ Bruttoumsatz, durchschnittlicher Bestellwert und Bestellungen erscheinen bei Launch-Rollouts, nicht bei Experimenten. Shopify veröffentlicht seine statistische Methode nicht, und Dritte sind sich uneinig, ob Konfidenzintervalle angezeigt werden. WeltPixel (Juli 2026) fand keinen dokumentierten Weg, die Zuordnung zu Varianten außerhalb der Ergebniskarte des Rollouts zu sehen, auch nicht in GA4.

SimGym ist eine separate Shopify-App in der „AI Research Preview“, die „uses AI-powered shoppers to simulate buyer behavior on your online store“. Laut Shopify sind die Modelle auf „real commerce sessions across our platform“ trainiert, und Shopify schränkt selbst ein: „results might differ from actual buyer behavior“. SimGym hat im Shopify App Store 2,8 aus 40 Bewertungen (10. Oktober 2026). Kritisiert wird, dass sich Ergebnisse nicht exportieren und simulierte Käufer nicht anpassen lassen.

Grenzen. Experimente brauchen den Grow-Tarif oder höher. Sie melden Kennzahlen der Conversion-Art ohne Umsatz, durchschnittlichen Bestellwert oder Gewinn, und die statistische Methode ist nicht veröffentlicht. Preise lassen sich nicht testen, Änderungen an Liquid-Templates können nicht Teil eines Rollouts sein, Vintage-Themes sind ausgeschlossen, und Headless-Storefronts sind nicht abgedeckt. Heatmaps, Segmente, Bauen mit KI und eine MCP-Anbindung sind für Rollouts nicht veröffentlicht.

Wann Shopify Rollouts nicht die richtige Wahl ist:

  • Shops im Basic-Tarif, die A/B-Tests wollen: Experimente brauchen Grow oder höher.
  • Headless- oder individuelle Storefronts: Experimente decken sie nicht ab.
  • Teams, die Tests nach Umsatz, durchschnittlichem Bestellwert oder Gewinn pro Besucher bewerten. Diese Werte melden Experimente nicht.
  • Preistests oder Tests von Liquid-Templates. Beides unterstützen Rollouts nicht.

Fazit. Shopify Rollouts macht Planung und einfache A/B-Tests zu einem nativen Teil des Shopify-Admins, jetzt auch für den Checkout, ab dem Grow-Tarif ohne ausgewiesene Zusatzgebühr. Es ist ein solider Startpunkt, um Änderungen an Theme und Checkout zu testen. Sobald du Umsatz oder Gewinn pro Test, Preistests oder eine dokumentierte statistische Methode brauchst, brauchst du daneben ein spezialisiertes Tool.

09Welche sechs weiteren Plattformen solltest du kennen?

ABConvert, Convert Experiences, GrowthBook, Visually.io, Elevate und AB Tasty, je ein Absatz, mit dem Einstiegspreis und der einen Sache, die das jeweilige Tool kann und die neun Tools oben nicht.

ABConvert

ABConvert nennt sich „The A/B testing platform built for Shopify merchants“ und bietet neun Testarten: Preis, Versand, Angebot, URL-Redirect, Template, Theme, visueller Editor, Checkout und kombiniert. Der Gewinn pro Besucher wird aus den eigenen Produkt-, Versand- und Transaktionskosten des Händlers berechnet. Gehostet wird auf MongoDB Atlas, Linode und Google Cloud, die Region ist nicht veröffentlicht. Es läuft auf Shopify, nicht auf Headless-Shopify, und ein MCP-Server bindet ab Growth Claude an. Starter kostet 99 $ im Monat oder 74 $ im Monat bei jährlicher Zahlung; Preistests beginnen mit Growth für 199 $ (geprüft im Oktober 2026). Was es kann und die neun oben nicht: Es rechnet nach Testbestellungen ab, „a unique order ABConvert records while a test or personalization runs“, statt nach dem gesamten Traffic des Shops.

Convert Experiences

Convert präsentiert sich als „Proven A/B Testing Tool“, „Reliable & Affordable“, mit „Carbon-Neutral Servers in Frankfurt, Germany“, ISO 27001 und SOC 2 Type 2. Es wechselt zwischen frequentistischer Statistik mit festem Testzeitraum, bayesscher und sequenzieller Statistik, prüft Sample-Ratio-Abweichungen in jedem Plan und enthält Heatmaps und Sitzungsaufzeichnungen in allen Plänen. Auf Shopify lassen sich Preise in jedem bezahlten Plan über Cart Transform Functions testen, Preise auf Checkout-Ebene mit Plus; die Shopify-App hat noch keine Bewertungen. Laut der Dokumentation von Convert vom Juli 2025 ist direktes A/B-Testing des Checkouts unter der Checkout Extensibility von Shopify „isn't currently possible“, und Versandschwellen werden über JavaScript-Varianten getestet. Über Shopify hinaus nennt Convert Integrationen für WooCommerce, BigCommerce, Magento, NopCommerce, PrestaShop und Volusion. Growth kostet 299 $ im Monat bei jährlicher Zahlung oder 399 $ monatlich für 100.000 getestete Nutzer (geprüft im Oktober 2026). Was es kann und die neun oben nicht: Seine Jahrespläne „don't auto-renew“.

GrowthBook

GrowthBook ist „The warehouse-native platform used by modern product teams for experimentation, feature flags, and product analytics.“ Die Auswertung läuft in deinem eigenen Data Warehouse, mit bayesscher und frequentistischer Engine, sequenziellem Testen, CUPED und automatischen Prüfungen des Sample Ratio. Auf Shopify besteht es aus einem Theme-Snippet und einer Chrome-Erweiterung für den AI Visual Editor, ohne App im App Store und ohne dokumentierte Preis- oder Checkout-Tests. Cloud Starter ist für bis zu drei Nutzer kostenlos, Pro kostet 40 $ pro Nutzer im Monat, und seit September 2026 speichert eine EU-Region in Irland die Eventdaten, während die Anwendung in den USA bleibt (geprüft im Oktober 2026). Was es kann und die neun oben nicht: Die komplette Plattform ist Open Source und selbst gehostet kostenlos, ohne Begrenzung der Nutzer und mit unbegrenztem Traffic.

Visually.io

Visually.io beschreibt sich als „One-stop, AI powered A/B testing & personalization platform for ecommerce“ auf Shopify und Shopify Plus, mit Headless-Unterstützung über Hydrogen. Die Statistik ist bayessch, eine Global Control Group dient als Holdout, und ein MCP-Server beantwortet Fragen zu Berichten in Claude und ChatGPT. Es testet Startseiten, Produktseiten, Warenkörbe, Checkouts und Upsells nach dem Kauf. Laut Datenschutzerklärung werden Daten „transferred outside of Europe, including to Canada and the United States“, und die Hosting-Region ist nicht veröffentlicht. Preistests sind auf den Scale-Plan mit mehr als 600 Bestellungen im Monat oder auf Shops mit Shopify Plus und mehr als 7.500 Bestellungen beschränkt. Die Preise richten sich nach den Bestellungen im Monat, ab 19 $ im Monat (bis 200 Bestellungen) auf der Website, während der App Store 15 $ für bis zu 100 Bestellungen nennt; 14 Tage Testphase, kein Vertrag (geprüft im Oktober 2026). Programme für SOC 2 und DSGVO sind „in the process“. Was es kann und die neun oben nicht: Produktempfehlungen und Upsells liegen in derselben App wie Testing und Personalisierung.

Elevate

Elevate verkauft „All-in-one AB testing: optimize prices, shipping, themes, content and more to maximize store profit!“ als Shopify-App, mit Headless-Unterstützung im Premium-Plan. Preistests funktionieren „on any Shopify plan, including non Plus“ ohne doppelte Produkte, dazu Tests von Versand, Angeboten, Checkout (Plus) und Produktbildern. Außerdem testet es Templates, ganze Themes, Inhalte, Abo-Preise und Landingpages. Basic beginnt bei 49 $ im Monat und Standard, das Preis- und Versandtests ergänzt, bei 99 $ für Shops mit bis zu 1.000 Bestellungen; jährliche Zahlung spart 40 Prozent, und jeder Plan hat 14 Tage Testphase (geprüft im Oktober 2026). Hosting-Region, Auftragsverarbeitungsvertrag und Zertifizierungen sind nicht veröffentlicht, und Daten werden 48 Stunden nach der Deinstallation gelöscht. Was es kann und die neun oben nicht: Es erklärt einen Gewinner erst, wenn vier Regeln zugleich erfüllt sind (Konfidenzschwelle, Mindestzahl an Besuchern, Mindestzahl an Conversions und eine Mindestlaufzeit von drei Tagen), und es meldet pro Test die Teststärke und den kleinsten nachweisbaren Effekt.

AB Tasty (Wingify)

AB Tasty hat sich im Januar 2026 mit VWO zusammengeschlossen und ist jetzt eine Produktmarke von Wingify; abtasty.com leitet auf wingify.com weiter, und bestehende Verträge bleiben unverändert. Seine KI Evi startete im November 2025 (Angaben des Anbieters: „3,000 early adopters“, „73% reduction in campaign setup time“) und macht aus Prompts HTML, CSS und JavaScript; Wingz vereint Evi jetzt mit dem Copilot von VWO. Pläne und Preise folgen Wingify: Growth, Pro und Enterprise ohne öffentliche Preise. Was es zum VWO-Profil oben ergänzt: Wandz.ai, das AB Tasty im November 2025 gekauft hat und das laut Angabe „3.7 trillion data points monthly“ verarbeitet.

10Was ändert sich, wenn du vom Testing-Tool zum Testprogramm wechselst?

Ein Testprogramm hält Backlog, Vorhersage, Umsetzung, Start, Ergebnisse und Erkenntnisse an einem Ort. So wird jeder Test nach dem ausgewählt, was frühere Tests gezeigt haben. Apex by DRIP ist als dieser eine Ort gebaut, mit einem Testgedächtnis, einem Testing-Tool und begleiteter Umsetzung.

Ein Testing-Tool führt Tests durch. Ein Testprogramm entscheidet, welche Tests laufen, führt sie durch und wird dabei besser im Entscheiden.

Viele Shops setzen dieses Programm am Ende aus Teilen zusammen: Ideen in einer Tabelle, Varianten in einem Testing-Tool, Zahlen in einem Analytics-Tool, Gründe in Foliensätzen und der Kontext in den Köpfen derer, die die Tests betreut haben. Bei jeder Übergabe geht etwas verloren. Die sechs Schritte, die ein Programm braucht, sind schnell benannt:

  1. Backlog: jede Idee in einer Liste, eingeordnet, mit ihrer Quelle.
  2. Vorhersage: eine Einschätzung vor der Umsetzung, welche Ideen wahrscheinlich gewinnen.
  3. Umsetzung: Varianten gebaut und auf jedem Gerät geprüft.
  4. Start: Traffic-Aufteilung, Targeting und Guardrails festgelegt.
  5. Ergebnisse: ausgewertet in Shop-Kennzahlen, Umsatz und Gewinn pro Besucher, nicht in Klicks.
  6. Erkenntnisse: was das Ergebnis für die nächste Idee bedeutet, abgelegt dort, wo die nächste Idee ausgewählt wird.

Mehrere Anbieter in diesem Vergleich bewegen sich in diese Richtung. Die Agenten von Wingify reichen von der Recherche bis zum Rollout. Kameleoon führt eine Sammlung der Erkenntnisse aus abgeschlossenen Tests. Der Program Overview Agent von Optimizely berichtet über das Programm, und sein Idea Builder erzeugt Ideen aus Seiten, Zielen und Recherche. Die Frage an jeden von ihnen lautet: Woher kommen die Belege, nach denen eine Idee ausgewählt wird?

Apex by DRIP ist um diese Frage gebaut, in drei Ebenen. Das Testgedächtnis umfasst 4,3 Millionen A/B-Tests aus 151.000 Shops, gesammelt seit 2011, eine der größten A/B-Test-Datenbanken im E-Commerce. Jede Testidee bekommt vor dem Start eine Likelihood to Win. Das Testing-Tool baut, startet und wertet Tests direkt im Shop aus, mit Heatmaps pro Variante, Gewinn pro Test und dem Apex-Chat. Begleitete Umsetzung heißt: Tests werden zusammen mit dem DRIP-Team gebaut, geprüft, gestartet und ausgewertet.

Stell dir die Likelihood to Win wie eine Wettervorhersage vor. Eine Vorhersage bestimmt nicht das Wetter. Aber sie sagt dir, ob du das Picknick planst oder den Schirm einpackst. Die Likelihood to Win leistet dasselbe für einen Backlog: Sie ordnet eine Idee im Vergleich zum eigenen Backlog des Shops ein, sodass die nächste Umsetzung an die Idee geht, die höher steht. Sie ist keine Gewinnwahrscheinlichkeit im strengen Sinn, und sie ersetzt den Test nicht.

11Wie sollte ein Shop ein A/B-Testing-Tool auswählen?

Stell jedem Anbieter dieselben acht Fragen: Datenstandort, Einwilligung, Gewicht des Skripts, was es testen kann, statistische Methode, wie Gewinner vor dem Start ausgewählt werden, was mit den Ergebnissen passiert und Vertragslaufzeit. Lass dir die Antworten schriftlich geben.

Demos zeigen den Editor. Diese acht Fragen zeigen den Rest. Stell sie jedem Anbieter auf deiner Auswahlliste, auch uns.

  1. Wo werden unsere Daten verarbeitet und gespeichert? Frag nach der Hosting-Region, einem Auftragsverarbeitungsvertrag und einer Liste der Unterauftragsverarbeiter. In diesem Vergleich reichen die Antworten von Hosting in Deutschland bis zur Verarbeitung in den USA.
  2. Wie geht das Tool mit der Einwilligung um? Frag, was mit Tests und Tracking passiert, wenn ein Besucher ablehnt, und wer entscheidet, ob eine Einwilligung nötig ist.
  3. Wie schwer ist das Skript, und wie lädt es? Frag nach der Größe, ob es synchron oder asynchron lädt und wie Flackern verhindert wird. Die Anbieter veröffentlichen Werte von 11,5 KB (Varify.io, Angabe des Anbieters) bis zu einem Snippet, das mit jedem laufenden Experiment wächst (Optimizely).
  4. Was kann es auf unserem Shopsystem testen? Seiten, Theme-Abschnitte, Preise, Versand, Checkout, Landingpages: Prüf jeden Punkt für deinen Tarif. Checkout-Tests auf Shopify brauchen meist Plus, und Preistests brauchen oft einen höheren Plan oder eine Integration, die der Anbieter mit deinem Team baut.
  5. Welche statistische Methode nutzt es? Frag nach der Methode, der Standardschwelle, der Mindeststichprobe und ob das Tool das Sample Ratio prüft. Die Standards reichen von einseitigen frequentistischen Tests über die bayessche Probability to Win bis zum sequenziellen Testen, und manche Tools veröffentlichen ihre Methode nicht.
  6. Wie werden Gewinner vor dem Start ausgewählt? Frag, welche Belege eine Idee einordnen: die eigenen Daten des Shops, ein allgemeines Framework, ein KI-Modell oder eine Datenbank beobachteter Tests. Frag, wie viele Tests hinter einer Empfehlung stehen und ob der Anbieter das veröffentlicht.
  7. Was passiert mit unseren Ergebnissen? Frag, ob die Ergebnisse Umsatz und Gewinn pro Besucher zeigen, ob du sie exportieren kannst und was passiert, wenn du kündigst. Elevate etwa löscht Daten 48 Stunden nach der Deinstallation; Intelligems bietet für 9 $ einen Pause Plan, der die Daten behält.
  8. Wie lang ist der Vertrag? Frag nach der Mindestlaufzeit, der Regel für die Verlängerung und was passiert, wenn der Traffic den Plan übersteigt. Die Preis-Pläne von Intelligems haben 3 Monate Mindestlaufzeit, die Jahrespläne von Convert verlängern sich nicht automatisch, und Shoplift pausiert Tests über dem Besucherlimit.

12Wie lautet das Fazit für 2026?

Das richtige Tool hängt vom Engpass ab. Apex by DRIP für Shops, deren Tests immer wieder ohne Effekt enden, Varify.io oder Shoplift für die Umsetzung von Tests, Intelligems, Elevate oder ABConvert für Preistests auf Shopify, Shopify Rollouts oder GrowthBook bei kleinem Budget, ABlyft oder Convert für den Umgang mit Daten in der EU und Optimizely, Kameleoon oder VWO für Tiefe auf Enterprise-Niveau.
Das Fazit 2026 nach Engpass, geprüft im Oktober 2026
EngpassEmpfehlungWarumWorauf du achten solltest
Tests auswählen: Ergebnisse enden immer wieder ohne EffektApex by DRIPLikelihood to Win pro Idee aus 4,3 Millionen beobachteten A/B-Tests, Heatmaps pro Variante, Gewinn pro Test auf Shopify, begleitete UmsetzungPreis nicht veröffentlicht; Gespräch buchen
Tests ohne Entwickler umsetzen, jedes ShopsystemVarify.ioVisueller Editor, Festpreis pro Domain mit unbegrenztem Traffic, Hosting in FrankfurtEinseitige Standardstatistik; eine Domain pro Plan
Theme- und Template-Tests auf Shopify umsetzenShopliftVarianten im Shopify Theme Editor gebaut, bayessche StatistikKeine Checkout-, Headless- oder A/B/n-Tests; Abrechnung nach allen Besuchern der Website
Preise, Versand und Angebote auf Shopify testenIntelligems; Elevate oder ABConvert bei kleinerem BudgetKommerzielle Testarten mit GewinnberichtenPreis-Pläne von Intelligems: 3 Monate Mindestlaufzeit, keine Testphase
BudgetShopify Rollouts; GrowthBookAb Grow enthalten; Open Source und selbst gehostet kostenlosRollouts meldet keine Umsatzkennzahlen; GrowthBook braucht ein Data Warehouse
Compliance und Daten in der EUABlyft; Convert ExperiencesHosting in Deutschland, keine gespeicherten personenbezogenen Daten; Frankfurt, ISO 27001, SOC 2 Type 2Bezahlte Pläne von ABlyft auf Anfrage; die Shopify-App von Convert hat noch keine Bewertungen
Tiefe auf Enterprise-NiveauOptimizely; Kameleoon; VWO (Wingify)Sequenzielle Statistik, serverseitige SDKs, Zertifizierungen, AgentenAuf Anfrage oder ab 495 $ im Monat; die Shopify-Anleitung von Kameleoon gilt für Plus

Wenn du nicht sicher bist, welchen Engpass du hast, sieh dir die letzten zwölf Monate an. Liefen Tests, aber wenige haben gewonnen, ist es die Auswahl. Haben gute Ideen monatelang gewartet, ist es die Umsetzung. Sind die Tool-Kosten schneller gewachsen als die Gewinne, ist es das Budget. Hat die Rechtsabteilung den Vertrag aufgehalten, ist es die Compliance.

Ist dein Engpass die Auswahl der Tests, ist Apex by DRIP dafür gebaut. Der Preis ist nicht veröffentlicht, es gibt eine kostenlose Stufe ohne Kreditkarte für einen Shop, und der nächste Schritt ist ein Gespräch.

Artikelbriefing
55Min. Lesezeit
12Abschnitte
Tool-Vergleich
Was abgedeckt wird
  1. 01Welches A/B-Testing-Tool sollte ein Online-Shop 2026 wählen?
  2. 02Welches Tool passt zu welchem Anwendungsfall?
  3. 03Welche 15 Tools gibt es auf einen Blick?
  4. 04Was entscheidet mehr als Funktionslisten?
Nächster Schritt

Die CRO Lizenz ansehen

So arbeitet DRIP mit paralleler Experimentation für planbares Umsatzwachstum.

Kostenloses Gespräch buchen
Beleg

SNOCKS Case Study lesen

350+ A/B Tests und €8,2 Mio. zusätzlicher Umsatz durch langfristige Optimierung.

SNOCKS Case Study lesen

Empfohlener nächster Schritt

Die CRO Lizenz ansehen

So arbeitet DRIP mit paralleler Experimentation für planbares Umsatzwachstum.

SNOCKS Case Study lesen

350+ A/B Tests und €8,2 Mio. zusätzlicher Umsatz durch langfristige Optimierung.

11 · Häufige Fragen

Häufige Fragen.

12 Fragen · 1 ehrliche Antwort pro Frage

Eine Antwort für alle gibt es nicht, weil Shops unterschiedliche Engpässe haben. Tests enden immer wieder ohne Effekt: Apex by DRIP, das jeder Idee vor dem Start eine Likelihood to Win gibt (sie ordnet die Idee im eigenen Backlog ein und ist keine Gewinnwahrscheinlichkeit im strengen Sinn). Die Umsetzung ist der Flaschenhals: Varify.io oder Shoplift. Preistests auf Shopify: Intelligems, Elevate oder ABConvert. Kleines Budget: Shopify Rollouts oder GrowthBook. Umgang mit Daten in der EU: ABlyft oder Convert Experiences. Tiefe auf Enterprise-Niveau: Optimizely, Kameleoon oder VWO.

Shopify Rollouts ist ein guter Start für Planung und einfache Tests. Ab dem Grow-Tarif testet es Änderungen an Theme, Checkout und Kundenkonten, Rabatte und Kataloge ohne ausgewiesene Zusatzgebühr. Die Experimente melden Kennzahlen der Conversion-Art, keinen Umsatz, keinen durchschnittlichen Bestellwert und keinen Gewinn. Shopify veröffentlicht seine statistische Methode nicht, und Preise und Änderungen an Liquid-Templates lassen sich nicht testen. Brauchst du Umsatz oder Gewinn pro Test, Preistests oder Hilfe bei der Auswahl der Ideen, ergänze ein spezialisiertes Tool.

Auf Shopify testen mehrere Apps Preise, jeweils mit Bedingungen (geprüft im Oktober 2026). Intelligems testet Preise pro SKU, pro Abo und in mehreren Währungen, über eine Integration, die mit deinem Team gebaut wird, und mit 3 Monaten Mindestlaufzeit. Elevate testet Preise in jedem Shopify-Tarif ab seinem Standard-Plan. ABConvert testet Preise ab seinem Growth-Plan, Preise für mehrere Märkte ab Scale. Shoplift testet Preise in Advanced und Pro für Shops mit einer Währung. Visually.io bietet Preistests im Scale-Plan mit mehr als 600 Bestellungen im Monat oder auf Shopify Plus mit mehr als 7.500. Convert testet Preise über Cart Transform Functions. Shopify Rollouts testet keine Preise, und VWO führt Preistests als „coming soon“.

Dokumentiertes EU-Hosting in diesem Vergleich: ABlyft (Deutschland), Varify.io (AWS Frankfurt), Convert Experiences (Frankfurt) und Apex by DRIP (EU und Großbritannien). Optimizely speichert Daten für „the majority“ seiner Produkte in Rechenzentren in der EU. GrowthBook Cloud hält Eventdaten in einer EU-Region in Irland, während die Anwendung in den USA bleibt, oder du hostest es selbst. Shoplift verarbeitet Daten in den USA; Intelligems und Visually.io nennen Übermittlungen außerhalb Europas, unter anderem nach Kanada und in die USA; Kameleoon, Elevate und ABConvert nennen auf den gelesenen Seiten keine Region. Frag jeden Anbieter nach dem Auftragsverarbeitungsvertrag.

Der Preis von Apex ist nicht veröffentlicht. Es gibt eine kostenlose Stufe ohne Kreditkarte für einen Shop. Um herauszufinden, was zu deinem Shop passt, buch ein Gespräch mit dem DRIP-Team.

Manche Tools geben vor dem Start eine Einschätzung. Apex by DRIP gibt jeder Testidee eine Likelihood to Win: einen Prozentwert pro Testidee, angezeigt zusammen mit der Zahl der Tests, die ihn stützen, abgeleitet aus 4,3 Millionen A/B-Tests aus 151.000 Shops. Sie ordnet eine Idee im Vergleich zum eigenen Backlog des Shops ein und ist keine Gewinnwahrscheinlichkeit im strengen Sinn. In einer Holdout-Prüfung innerhalb eines Shops gewann das obere Drittel der Ideen 1,4- bis 1,6-mal so oft (Pressemitteilung vom 29. September 2026). Kameleoon nennt für seinen Ideen-Agenten „63% accuracy on high-confidence predictions“ (Angabe des Anbieters), und SimGym von Shopify simuliert Käufer mit dem Hinweis, dass „results might differ from actual buyer behavior“. Keine Einschätzung ersetzt den Test.

Für Seiten- und Theme-Tests meist nicht: Varify.io, Visually.io, Elevate, ABConvert und Shoplift (über den Theme Editor von Shopify) bauen sie ohne Code. Preistests können Hilfe brauchen; Intelligems baut die Preisintegration zusammen mit deinem Team. Tools für Entwickler wie ABlyft und GrowthBook setzen Programmierkenntnisse voraus. Bei Apex baut und liest ein Shop-Betreiber Tests über eine MCP-Anbindung aus ChatGPT oder Claude heraus, ohne Terminal. Die CLI ist der Weg für Entwickler, und begleitete Umsetzung heißt: Tests werden zusammen mit dem DRIP-Team gebaut, geprüft, gestartet und ausgewertet.

Ja, mit Sorgfalt. Zwei Skripte erhöhen das Seitengewicht und können dasselbe Element ändern. Dann sind die Ergebnisse schwer zu lesen. Lass die Tools auf getrennten Seiten oder Abläufen laufen, oder stell sicher, dass ein Besucher pro Element immer nur in einem Test ist. Eine praktikable Aufteilung: Shopify Rollouts für geplante Änderungen an Theme und Checkout, daneben eine spezialisierte App für Preis- oder Inhaltstests auf anderen Seiten.

Laut Ronny Kohavi liegt sie branchenweit bei 10 bis 20 Prozent der Experimente. In DRIPs eigenen Tests stieg die Gewinnquote von 27 Prozent im Jahr 2024 (808 Tests) auf 56 Prozent zwischen April und Juni 2026 (278 Tests). Eine Gewinnquote hängt davon ab, wie Gewinner festgestellt werden: Eine lockere Schwelle hebt sie auf dem Papier. Bewerte ein Programm nach dem Umsatz aus umgesetzten Gewinnern, nicht nach der Gewinnquote allein.

Exportiere alles, bevor du kündigst: Testnamen, Hypothesen, Screenshots jeder Variante, Daten, Traffic, Kennzahlen und die finale Entscheidung. Manche Tools löschen Daten kurz nach der Deinstallation; Elevate etwa nach 48 Stunden. Intelligems bietet für 9 $ im Monat einen Pause Plan, der die Daten behält. Lass einen A/A-Test im neuen Tool laufen, bevor der alte Vertrag endet. Dann weißt du, wie die Basiszahlen zueinander stehen. Bewahre die Historie an einem Ort auf, der dir gehört, nicht nur im Tool eines Anbieters.

Fast jedes Tool in diesem Vergleich bietet eine Anbindung (geprüft im Oktober 2026). MCP-Server: Intelligems (Claude, ChatGPT, Gemini, Grok), Varify.io, Kameleoon (Claude Code, Cursor und ein Claude-Connector), ABlyft (Claude Desktop, ChatGPT, Cursor, Windsurf), Optimizely (Claude, Cursor, VS Code), Wingify für VWO und AB Tasty (Claude, ChatGPT, Cursor, Gemini), Convert (Claude, ChatGPT, Cursor), ABConvert (Claude), GrowthBook, Visually.io (Fragen zu Berichten) und Elevate (Daten lesen, keine Änderungen). Shoplift bindet über eine HTTP-API an. Apex by DRIP hat eine MCP-Anbindung, über die ein Shop-Betreiber Tests aus ChatGPT oder Claude heraus baut und auswertet. Für Shopify Rollouts haben wir keine gefunden.

Nein. Die Reihenfolge der Profile ist keine Rangliste, und Apex ist unser eigenes Produkt. Dies ist ein Dokumentationsvergleich, kein Praxistest: Wir haben im Oktober 2026 Anbieterseiten, Dokumentationen, Preisseiten und Bewertungsportale gelesen und geben wieder, was die Anbieter veröffentlichen. Preise und Funktionen ändern sich oft. Prüf deshalb vor dem Kauf noch einmal an der Quelle.

Verwandte Artikel

Tool-Vergleich

A/B-Testing-Tools für europäische Shops 2026: 15 im Vergleich zu Daten und DSGVO

15 A/B-Testing-Tools für europäische Shops im Vergleich: Datenstandort, Aussagen zur DSGVO, Cookies und Einwilligung, Zertifizierungen und Einstiegspreis, so wie jeder Anbieter sie veröffentlicht. Geprüft im Oktober 2026.

13. März 2026 - Fabian Gmeindl

Tool-Übersicht

A/B-Testing-Tools für Shopify 2026: 10 Optionen im Vergleich

Zehn A/B-Testing-Tools für Shopify im Vergleich: Rollouts, sechs Shopify-Apps und drei skriptbasierte Tools, nach Testtypen, Datenstandort und Einstiegspreis. Geprüft im Oktober 2026.

26. Feb. 2026 - Fabian Gmeindl

Methodik

Vorhersage vor dem Test: Was A/B-Testing-Tools vorhersagen können und was nicht

Was es heißt, eine A/B-Testidee vor dem Start zu bewerten, wie sechs Anbieter ihre Vorhersagen dokumentieren, was eine Vorhersage nicht sagen kann, und sechs Fragen, mit denen du die Aussage jedes Anbieters prüfst. Geprüft im Oktober 2026.

22. Sept. 2026 - Fabian Gmeindl

DRIP and Apex

Gleiches Werbebudget.
Mehr Umsatz.

Buch ein Gespräch mit dem Team und erzähl uns von deinem Shop. Wir sprechen darüber, wo er heute steht, wo du hinwillst und wie wir dich dahin bringen. Wenn wir nicht die beste Investition für dein Geld sind, sagen wir dir das ehrlich.

Kostenloses Gespräch buchen

30 Minuten, und du weißt genau, wo dein Shop steht.

Der Newsletter, den die Teams dieser Marken lesen

LEGONikeTeslalululemonPelotonSamsungBoseIKEA

Über 17.000 E-Commerce-Gründer lesen mit

Über 250 Marken vertrauen uns

  • Strauss
  • Koro
  • Sunday Natural
  • The Body Shop
  • Grover
  • Hello Fresh
  • Natural Elements
  • AG1
  • Bluebrixx
  • Woom
  • Hornbach
  • Tourlane
  • Congstar
  • Holy
  • Junglück
  • PV
  • Wunschgutschein
  • Motel A Mino
  • Ryzon
  • Kickz
  • The Female Company
  • Livefresh
  • Schiesser
  • Horizn Studios
  • Seeberger
  • Luca Faloni
  • Zahnheld
  • Snocks
  • Bruna
  • NatureHeart
  • Priwatt
  • Jumbo
  • NKM
  • Oceansapart
  • Omhu
  • Blackroll
  • 1 Kom Ma 5
  • Purelei
  • Giesswein
  • T1tan
  • Buah
  • Ironmaxx
  • Waterdrop
  • Send a Friend
  • Fitjeans
  • Mofakult
  • Plantura
  • BGA
  • Coop
DRIP / Apex

Prediction-Based Experimentation für Online-Shops ab 100.000 € im Monat.

Prüfen, ob dein Shop passt

Unternehmen

  • Über uns
  • Fallstudien
  • Prozess
  • Karriere
  • Experten
  • Medien
  • Erfahrungen

Services

  • Für dich umgesetzt
  • Mit dir umgesetzt
  • CRO-Agentur
  • A/B-Testing-Agentur
  • Shopify CRO

Apex

  • Apex
  • So haben wir das Genom gebaut
  • Einloggen
  • Docs

Ressourcen

  • Blog
  • Ressourcen
  • Research
  • Benchmarks
  • Statistik-Tools
  • Beste A/B-Testing-Tools
© 2026 Drip Trading GmbH
ImpressumDatenschutzAGB

Cookies

Wir nutzen optionale Cookies für Analytics und Marketing, darunter Apex by DRIP, unser eigenes Tool für A/B-Tests und Analysen. Datenschutz