Bots und Crawler: Banner-Verhalten und Einwilligungseinträge steuern

Überblick

Mit den Einstellungen Bots & crawlers steuern Sie, wie sich der Pandectes-Einwilligungsbanner gegenüber automatisierten Besuchern verhält, etwa Suchmaschinen-Crawlern, SEO-Werkzeugen, Scannern, Überwachungsdiensten und anderen Bots.

Sie können einen automatisierten Besucher dem normalen Einwilligungsablauf folgen lassen oder den Banner ausblenden und stattdessen einen erteilten oder verweigerten Einwilligungsstatus anwenden, ohne dass ein Einwilligungseintrag entsteht.

Diese Funktion steht im Tarif Enterprise zur Verfügung.

So funktioniert es

Standardmäßig folgen automatisierte Besucher dem normalen Banner-Ablauf, wie alle anderen Shop-Besucher auch.

Sieht ein Bot den Banner und interagiert damit, kann seine Entscheidung im Einwilligungsprotokoll erfasst werden. Wiederholte automatisierte Interaktionen können daher die Statistiken verzerren, die aus diesen Einträgen berechnet werden.

Ein Beispiel, wenn automatisierte Besuche durchgängig akzeptieren:

Dieses Beispiel dient der Veranschaulichung. Die tatsächliche Wirkung hängt davon ab, wie automatisierte Besucher mit Ihrem Shop umgehen.

Pandectes bietet drei mögliche Verhaltensweisen:

Die wichtigsten Punkte

• Den Banner anzuzeigen bedeutet den regulären Ablauf. Trifft der automatisierte Besucher eine Entscheidung, wird diese wie jede andere Banner-Interaktion behandelt.
• Beide ausgeblendeten Modi halten den automatisierten Besuch aus den Einwilligungseinträgen heraus.
• Als Einwilligung werten ist nützlich, wenn ein automatisiertes Werkzeug den Shop mit aktivierten, einwilligungsabhängigen Ressourcen prüfen soll.
• Als Ablehnung werten ist nützlich, wenn ein Werkzeug den Shop im Zustand vor der Einwilligung beziehungsweise im abgelehnten Zustand prüfen soll.
• Die allgemeine Einstellung Known bots & crawlers gilt für Bots, die Pandectes erkennt.
• Über Specific bots überschreiben Sie dieses allgemeine Verhalten für bestimmte User Agents.
• Bereits vorhandene Einwilligungseinträge werden durch eine Änderung dieser Einstellungen nicht rückwirkend verändert.
• Diese Einstellungen steuern das Verhalten von Banner und Einwilligung in Pandectes. Sie hindern einen Crawler nicht daran, Ihre Website abzurufen.

Bekannte Bots und Crawler konfigurieren

Öffnen Sie:

Cookie banner > Advanced > Bots & crawlers

Aktivieren Sie unter Known bots & crawlers:

Hide the banner and treat as consent given

Ist die Option aktiviert, wendet Pandectes dieses Verhalten auf alle erkannten automatisierten Besucher an:

• Der Banner wird nicht angezeigt.
• Der Besuch wird für das von Pandectes gesteuerte Verhalten als eingewilligt behandelt.
• Für diesen automatisierten Besuch entsteht kein Einwilligungseintrag.

Über See the list in der App sehen Sie, welche Bots und Crawler Pandectes derzeit erkennt. Die Liste in der Anwendung zu führen vermeidet eine statische Dokumentationsliste, die veralten könnte.

Ist diese Option deaktiviert und greift keine spezifische Regel, folgt der automatisierte Besucher dem regulären Banner-Ablauf.

Bestimmte Bots konfigurieren

Im Bereich Specific bots legen Sie das Verhalten für einzelne User-Agent-Muster fest.

Tragen Sie je Zeile einen Wert in eine dieser Gruppen ein:

• Show the banner
• Hide and treat as consent given
• Hide and treat as consent denied

Spezifische Einträge überschreiben bei einer Übereinstimmung das allgemeine Verhalten für bekannte Bots.

Zum Beispiel:

• Tragen Sie einen Test-Crawler unter Show the banner ein, wenn Sie das normale Einwilligungserlebnis prüfen möchten.
• Tragen Sie ein Cookie-Scan-Werkzeug unter Hide and treat as consent given ein, wenn es einwilligungsabhängige Dienste ausführen soll.
• Tragen Sie ein Prüfwerkzeug unter Hide and treat as consent denied ein, wenn es den Shop im Zustand vor der Einwilligung untersuchen soll.

Wie der Abgleich der User Agents funktioniert

Spezifische Einträge werden mit der User-Agent-Zeichenkette des Besuchers abgeglichen.

• Tragen Sie je Zeile ein Muster ein.
• Die Übereinstimmung kann an beliebiger Stelle der Zeichenkette auftreten.
• Groß- und Kleinschreibung spielt keine Rolle.
• Verwenden Sie der Einheitlichkeit halber Kleinbuchstaben.

Ein Eintrag wie googlebot greift zum Beispiel bei jedem User Agent, der diesen Text enthält, ohne dass Sie den vollständigen Wert eintragen müssen.

Halten Sie die Muster so spezifisch wie möglich. Allgemeine Browser-Begriffe wie mozilla, chrome, safari oder webkit kommen auch in den User Agents echter Kunden vor und können daher echte Besucher erfassen.

Kennzeichnet Pandectes einen Eintrag als ungewöhnlich weit gefasst, prüfen Sie das Muster, bevor Sie es verwenden.

Die Funktion mit Cookie-Scannern nutzen

Ein Cookie- oder Speicher-Scanner kann nur Ressourcen erfassen, die während seines Besuchs tatsächlich laden.

Bleiben einwilligungsabhängige Skripte deaktiviert, erreicht der Scanner möglicherweise nicht alles, was nach einer Einwilligung normalerweise laden würde. Weisen Sie diesen Scanner Hide and treat as consent given zu, läuft der Shop im Zustand erteilter Einwilligung, ohne dass für den Scanner ein Einwilligungsnachweis entsteht.

Das garantiert nicht, dass jeder Scanner jedes Cookie oder Speicherobjekt findet. Die Ergebnisse hängen auch von der JavaScript-Unterstützung des Scanners, seiner Seitenabdeckung, der Authentifizierung, dem Verhalten des Shops und weiteren technischen Bedingungen ab.

Die Funktion für Prüfungen im blockierten Zustand nutzen

Um zu untersuchen, wie sich der Shop vor der Einwilligung in optionale Kategorien verhält, tragen Sie den User Agent des Prüfwerkzeugs ein unter:

Hide and treat as consent denied

Pandectes hält sein einwilligungsabhängiges Verhalten dann im abgelehnten Zustand und blendet den Banner für diesen automatisierten Besucher aus.

Das hilft beim Prüfen, ob Integrationen und Skripte, die Ihre Einwilligungskonfiguration steuert, sich vor der Einwilligung wie erwartet verhalten.

Es handelt sich um einen technischen Testzustand, nicht um eine Feststellung, dass Ihr Shop bestimmte rechtliche Anforderungen erfüllt.

Blockiert das Crawler von meinem Shop?

Nein.

Die Funktion Bots & crawlers steuert, welchen Einwilligungsstatus Pandectes auf einen automatisierten Besuch anwendet. Sie hindert den Crawler nicht daran, Ihre Seiten abzurufen, und verändert Ihre robots.txt nicht.

Crawler-Zugriff, Indexierungsanweisungen, Firewall-Regeln und Bot-Steuerung im CDN sind davon getrennte Konfigurationen. Google beschreibt robots.txt beispielsweise als Mechanismus, um unterstützten Crawlern Anweisungen zum Crawlen zu geben.

Belegt der User-Agent-Abgleich, dass ein Besucher wirklich dieser Bot ist?

Nein.

Ein User-Agent-Wert gibt an, was der Anfragende zu sein behauptet, er ist jedoch keine Authentifizierung. Google weist ausdrücklich darauf hin, dass sich User-Agent-Zeichenketten von Crawlern fälschen lassen, und bietet Verfahren über IP-Adresse und Reverse-DNS an, wenn die Identität eines echten Google-Crawlers bestätigt werden muss.

Nutzen Sie die Pandectes-Einstellung für das Verhalten des Einwilligungsbanners. Ist eine geprüfte Crawler-Identität für Sicherheit oder Zugriffskontrolle wichtig, regeln Sie das gesondert auf Server-, CDN- oder Infrastrukturebene.

Bestimmt "als Einwilligung werten", ob Tracking rechtlich zulässig ist?

Nein.

Diese Einstellung legt den technischen Einwilligungsstatus fest, den Pandectes auf eine automatisierte Anfrage anwendet. Sie bestimmt nicht, ob eine bestimmte Anfrage, ein Skript oder ein Drittanbieterdienst datenschutzrechtlichen oder anderen Anforderungen unterliegt.

Prüfen Sie Ihre Shop-Konfiguration und die geltenden Anforderungen gesondert.

Aktualisiert am: 05/10/2026