- Eine Content Security Policy (CSP) legt fest, aus welchen Quellen eine Seite laden und ausführen darf. Ein A/B-Testing-Tool berührt vier Direktiven: script-src, connect-src, frame-src und frame-ancestors.
- Experimente werden definiert, nachdem deine Seite bereits ausgeliefert wurde, sodass ihr Code beim Schreiben der CSP noch nicht bekannt ist. Hashes und Nonces decken nur Code ab, der im Voraus bekannt ist. Deshalb benötigen Tools, die zur Laufzeit benutzerdefiniertes Varianten-JavaScript ausführen,
unsafe-evalin script-src. - Varify benötigt
unsafe-evalin script-src, damit benutzerdefiniertes JavaScript innerhalb von Varianten ausgeführt werden kann. Die CSP lässt sich pro Route konfigurieren, sodassunsafe-evalnur dort gilt, wo Experimente laufen. - Führe die CSP zunächst im Report-Only-Modus ein, prüfe die Reports und setze sie dann durch. Die Liste der Varify-Domains findest du an einer zentralen Stelle in der Varify-Dokumentation.
Eine Content Security Policy ist ein HTTP-Header, der festlegt, welche Skripte, Verbindungen und Frames eine Seite verwenden darf. Sie zählt zu den wirksamsten Schutzmaßnahmen gegen Cross-Site-Scripting, und viele Security-Teams schreiben sie für jede öffentliche Website verpflichtend vor. Ein A/B-Testing-Tool muss sich in diese Policy einfügen, denn es lädt ein Skript, kommuniziert mit eigenen Servern und verändert die Seite während der Laufzeit.
Diese Seite ist die Entscheidungsgrundlage für ein Security-Review: welche Direktiven betroffen sind, warum Experimente zur Laufzeit unsafe-eval benötigen und wie sich diese Ausnahme so eng wie möglich fassen lässt. Die genauen Domains, die Varify benötigt, sind in der Varify-Dokumentation unter Content Security Policy error aufgeführt; diese Seite verlinkt auf diese Liste und wiederholt sie nicht, damit es nur eine Quelle gibt, die aktuell gehalten werden muss.
Warum A/B-Testing-Tools auf strikte CSPs treffen
Eine strikte CSP geht davon aus, dass jedes Skript auf einer Seite zum Zeitpunkt der Bereitstellung bekannt ist. Die Policy listet entweder die erlaubten Quellen auf oder fixiert jedes Inline-Skript mit einem Hash oder einer Nonce. Alles andere wird blockiert.
Ein clientseitiges A/B-Testing-Tool funktioniert umgekehrt. Dein Team erstellt ein Experiment im Editor des Tools, oft Tage nachdem die Seite bereitgestellt wurde. Das Experiment kann Texte ändern, Bilder austauschen, Elemente verschieben oder benutzerdefiniertes JavaScript ausführen. Dieser Code erreicht den Browser des Besuchers zur Laufzeit, als Teil der Experimentkonfiguration, und das Testing-Skript führt ihn dort aus.
Daraus ergeben sich drei Konsequenzen für die CSP:
- Die Quelle des Testing-Skripts selbst muss in script-src erlaubt sein.
- Die Anfragen, die das Skript sendet, zum Beispiel um Experimentkonfigurationen zu laden oder Events zu melden, müssen in connect-src erlaubt sein.
- Code, der erst zur Laufzeit existiert, kann nicht im Voraus durch einen Hash oder eine Nonce fixiert werden. Seine Ausführung erfordert eine Ausnahme in script-src.
Dieselbe Einschränkung gilt für jedes Tool, das benutzerdefiniertes Varianten-JavaScript im Browser über eval-artige Funktionen ausführt.
Welche Direktiven betroffen sind
Vier Direktiven entscheiden, ob ein A/B-Testing-Tool unter deiner CSP funktioniert. Die Varify-Spalte verlinkt auf die Dokumentation, in der die genauen Einträge gepflegt werden.
| Direktive | Was sie für ein A/B-Testing-Tool steuert | Varify-Eintrag |
|---|---|---|
script-src | Laden des Testing-Skripts und Ausführen von Experiment-Code zur Laufzeit | Dokumentation ansehen, einschließlich unsafe-eval |
connect-src | Anfragen des Skripts an die Server des Anbieters, zum Beispiel Experimentkonfigurationen und Events | Dokumentation ansehen |
frame-src | Frames, die das Tool auf deiner Seite öffnet, zum Beispiel für Editor-Funktionen | Dokumentation ansehen |
frame-ancestors | Ob deine Seite innerhalb eines Frames angezeigt werden darf, zum Beispiel durch Editor-Funktionen | Dokumentation ansehen |
Zwei weitere Direktiven können je nach den Aktionen deiner Experimente relevant sein: img-src, wenn Varianten Bilder von einer neuen Quelle laden, und style-src, wenn Varianten Styles hinzufügen. Prüfe sie anhand der Experimente, die dein Team plant.
Warum Laufzeit-Experimente unsafe-eval benötigen
Eine CSP bietet zwei Wege, ein bestimmtes Skript zuzulassen, ohne alles zuzulassen: einen Hash des Skriptinhalts oder eine Nonce, einen Zufallswert, den der Server für jede Antwort neu setzt und bei jedem erlaubten Script-Tag wiederholt. Beide funktionieren nur für Code, den der Server beim Senden der Seite bereits kennt.
Experiment-Code erfüllt diese Bedingung nicht. Er wird im Testing-Tool geschrieben, als Daten ausgeliefert und erst im Browser in ausführbaren Code umgewandelt. Weder ein Hash noch eine Nonce lässt sich dafür im Voraus berechnen. Wenn dieser Schritt eval oder ähnliche Funktionen nutzt, erlaubt der Browser das nur, wenn script-src unsafe-eval enthält.
Varifys Dokumentation ist diesbezüglich eindeutig:
- „Außerdem benötigst du den Wert unsafe-eval in der script-src-Direktive.“
- „Hinweis: Der Eintrag unsafe-eval ist notwendig, damit benutzerdefiniertes JavaScript innerhalb von Varianten ausgeführt werden kann.“
- „Nein, technisch gesehen ist die Erstellung und Auslieferung von Experimenten ohne
unsafe-evalnicht möglich."
Die vollständige Erklärung findest du im Dokumentationsartikel Strict CSP does not allow unsafe evaluation. Für deine Prüfung ist daher die relevante Frage, wie weit die Ausnahme reicht.
Wie du das Risiko begrenzt
unsafe-eval erweitert, was ein Skript auf der Seite tun darf. Ziel der Prüfung ist es, diese Erweiterung so klein wie möglich zu halten. Drei Maßnahmen greifen dabei zusammen:
- Eine CSP pro Route. Die CSP kann für jede Route unterschiedlich konfiguriert werden, sodass
unsafe-evalnur dort gilt, wo Experimente laufen, zum Beispiel auf Produkt- und Landingpages. Behalte die strikte Policy auf Login-, Konto- und Zahlungsseiten bei. Eine Policy pro Route grenzt ein, wo die Ausnahme gilt; Seiten desselben Origins können dennoch aufeinander zugreifen, daher ersetzt sie die anderen beiden Maßnahmen nicht. - Zuerst Report-Only. Sende die neue Policy für einen Zeitraum mit normalem Traffic als
Content-Security-Policy-Report-Only. Der Browser meldet Verstöße, ohne etwas zu blockieren. Korrigiere die Policy, bis die Reports nur das zeigen, was du erwartest, und wechsle dann zum erzwingendenContent-Security-Policy-Header. Lasse den Report-Only-Zeitraum lange genug laufen, um die von deinem Team geplanten Experimente abzudecken, denn eine Seite ohne laufendes Experiment zeigt nicht, was ein Experiment benötigt. - Kontrolliere, was in Experimente einfließt. Lege intern fest, wer Varianten mit benutzerdefiniertem JavaScript veröffentlichen darf, und prüfe diesen Code, bevor er live geht. Die CSP-Ausnahme ist nur so sicher wie der Prozess für den Code, der sie nutzt.
Varify bietet im Enterprise-Plan zudem First-Party-Kontext an: „First-party context (CNAME): Deliver the Varify script from your own subdomain for better performance and fewer blockers.“ Das Setup wird auf der Seite über first-party context (CNAME) beschrieben.
Varifys CSP-Anforderungen
Die Domains und Direktivenwerte, die Varify benötigt, werden an einem Ort gepflegt, der Varify-Dokumentation. Nutze diese beiden Artikel für deine Konfiguration:
- Content Security Policy error: die Liste der Domains je Direktive, einschließlich des Werts
unsafe-evalin script-src. - Strict CSP does not allow unsafe evaluation: warum Experimente es benötigen, und wie du die CSP pro Route konfigurierst.
Varifys Auftragsverarbeitungsvertrag (AVV) führt „Bereitstellung von Daten über verschlüsselte Verbindungen wie SFTP oder HTTPS“ unter seinen technischen Maßnahmen auf.
Den Rest der Sicherheitsprüfung findest du in der 25-Punkte-Sicherheitscheckliste für A/B-Testing-Tools.
Checkliste für die Sicherheitsprüfung
Dokumentiere diese Punkte bei deiner Prüfung jedes A/B-Testing-Tools:
- Die CSP-Anforderungen des Anbieters sind dokumentiert, nach Direktive.
- Die Domains in
script-srcundconnect-srcstammen aus der aktuellen Dokumentation des Anbieters, mit dem Datum, an dem du sie geprüft hast. - Der Grund für
unsafe-evalist dokumentiert, falls das Tool es benötigt. - Die Routen, die
unsafe-evalerlauben, sind aufgelistet, ebenso die Routen, die es nicht erlauben. - Login-, Konto- und Zahlungsseiten behalten die strikte Policy.
- Die Policy lief vor der Durchsetzung im
Report-Only-Modus, und die Reports wurden geprüft. - Die interne Regel, wer benutzerdefiniertes JavaScript in Varianten veröffentlichen darf, ist schriftlich festgehalten.
frame-srcundframe-ancestorswurden gegen die Editor-Funktionen des Tools geprüft.- Die Entscheidung wird überprüft, wenn der Anbieter seine Domains ändert oder Experimente auf neue Routen verschoben werden.
Sprich mit unserem Team über CSP
Bring deine Content Security Policy zur Demo mit und plane, welche Routen Experimente ausführen.