Robots et crawlers : contrôler le comportement de la bannière et les enregistrements de consentement

Vue d'ensemble

Les paramètres Bots & crawlers vous permettent de contrôler le comportement de la bannière de consentement Pandectes pour les visiteurs automatisés, tels que les robots d'indexation, les outils SEO, les scanners, les services de surveillance et d'autres robots.

Vous pouvez laisser un visiteur automatisé suivre le parcours de consentement normal, ou masquer la bannière et appliquer un état de consentement accordé ou refusé, sans créer d'enregistrement de consentement.

Cette fonctionnalité est disponible avec le forfait Enterprise.

Fonctionnement

Par défaut, les visiteurs automatisés suivent le parcours normal de la bannière, comme les autres visiteurs de la boutique.

Si un robot voit la bannière et interagit avec elle, son choix peut être enregistré dans le journal des consentements. Des interactions automatisées répétées peuvent donc influencer les statistiques calculées à partir de ces enregistrements.

Par exemple, si les visites automatisées acceptent systématiquement :

Cet exemple est donné à titre indicatif. L'effet dépend de la façon dont les visiteurs automatisés interagissent avec votre boutique.

Pandectes propose trois comportements possibles :

Points clés à comprendre

• Afficher la bannière utilise le parcours normal. Si le visiteur automatisé fait un choix de consentement, cette interaction est traitée comme n'importe quelle autre interaction avec la bannière.
• Les deux modes masqués gardent la visite automatisée en dehors des enregistrements de consentement.
• Treat as consent given est utile lorsqu'un outil automatisé doit inspecter la boutique avec les ressources contrôlées par le consentement activées.
• Treat as consent denied est utile lorsqu'un outil doit inspecter la boutique dans son état avant consentement ou refusé.
• Le paramètre général Known bots & crawlers s'applique aux robots reconnus par Pandectes.
• Specific bots peut remplacer le comportement général pour les user agents correspondants.
• Les enregistrements de consentement existants ne sont pas modifiés rétroactivement lorsque vous changez ces paramètres.
• Ces paramètres contrôlent le comportement de la bannière et du consentement Pandectes. Ils n'empêchent pas un robot d'accéder à votre site.

Configurer les robots et crawlers connus

Ouvrez :

Settings > Banner > Advanced > Bots & crawlers

Sous Known bots & crawlers, activez :

Hide the banner and treat as consent given

Lorsque cette option est activée, Pandectes applique ce comportement aux visiteurs automatisés qu'il reconnaît :

• La bannière n'est pas affichée.
• La visite est considérée comme ayant accordé le consentement pour le comportement contrôlé par Pandectes.
• Aucun enregistrement de consentement n'est créé pour cette visite automatisée.

Utilisez See the list dans l'application pour consulter les robots et crawlers actuellement reconnus par Pandectes. Garder la liste dans l'application évite de s'appuyer sur une liste statique dans la documentation, qui pourrait devenir obsolète.

Si cette option est désactivée et qu'aucune règle spécifique ne s'applique, le visiteur automatisé suit le parcours normal de la bannière.

Configurer des robots spécifiques

La section Specific bots vous permet de définir le comportement pour des motifs de user agent individuels.

Ajoutez une valeur par ligne dans l'un de ces groupes :

• Show the banner
• Hide and treat as consent given
• Hide and treat as consent denied

Les entrées spécifiques remplacent le comportement général des robots connus lorsqu'elles correspondent.

Par exemple :

• Ajoutez un crawler de test à Show the banner lorsque vous voulez inspecter l'expérience de consentement normale.
• Ajoutez un outil d'analyse des cookies à Hide and treat as consent given lorsqu'il a besoin que les services contrôlés par le consentement s'exécutent.
• Ajoutez un outil d'audit à Hide and treat as consent denied lorsque vous voulez qu'il inspecte la boutique avant le consentement.

Comment fonctionne la correspondance des user agents

Les entrées spécifiques sont comparées à la chaîne user agent du visiteur.

• Saisissez un motif par ligne.
• La correspondance peut se produire n'importe où dans la chaîne user agent.
• La correspondance ne tient pas compte de la casse.
• Utilisez des entrées en minuscules par souci de cohérence.

Par exemple, une entrée telle que googlebot peut correspondre à un user agent contenant ce texte, sans que vous ayez à saisir la valeur complète du user agent de type navigateur.

Gardez les motifs aussi précis que possible. Des termes génériques de navigateur comme mozilla, chrome, safari ou webkit peuvent aussi apparaître dans les user agents de clients normaux et correspondre ainsi à de vrais visiteurs.

Si Pandectes signale une entrée comme anormalement large, vérifiez le motif avant de l'utiliser.

Utiliser la fonctionnalité avec des scanners de cookies

Un scanner de cookies ou de stockage ne peut observer que les ressources qui se chargent réellement pendant sa visite.

Si les scripts contrôlés par le consentement restent désactivés, le scanner peut ne pas atteindre tout ce qui se chargerait normalement après le consentement. Attribuer ce scanner à Hide and treat as consent given permet à la boutique de s'exécuter à l'état de consentement accordé, sans créer de reçu de consentement pour le scanner.

Cela ne garantit pas que chaque scanner trouvera chaque cookie ou élément de stockage. Les résultats peuvent aussi dépendre de la prise en charge de JavaScript par le scanner, de la couverture des pages, de l'authentification, du comportement de la boutique et d'autres conditions techniques.

Utiliser la fonctionnalité pour des audits à l'état bloqué

Pour inspecter le comportement de la boutique avant que le consentement optionnel ne soit accordé, ajoutez le user agent d'audit sous :

Hide and treat as consent denied

Pandectes maintient alors son comportement contrôlé par le consentement à l'état refusé tout en masquant la bannière pour ce visiteur automatisé.

Cela peut aider à vérifier si les intégrations et les scripts gérés par votre configuration de consentement se comportent comme prévu avant le consentement.

Il s'agit d'un état de test technique, qui ne doit pas être interprété comme une détermination que la boutique respecte une exigence légale particulière.

Cela empêche-t-il les crawlers d'accéder à la boutique ?

Non.

La fonctionnalité Bots & crawlers contrôle l'état de consentement que Pandectes applique à une visite automatisée. Elle n'empêche pas le crawler de demander vos pages et ne modifie pas votre configuration robots.txt.

L'accès des crawlers, les consignes d'indexation, les règles de pare-feu et les contrôles de robots du CDN sont des configurations distinctes. Google, par exemple, documente robots.txt comme un mécanisme permettant de fournir des consignes d'exploration aux crawlers pris en charge. ([Google for Developers][1])

La correspondance par user agent prouve-t-elle qu'un visiteur est bien ce robot ?

Non.

Une valeur user agent indique ce que le demandeur prétend être, mais ce n'est pas une authentification. Google précise explicitement que les chaînes user agent des crawlers peuvent être usurpées et propose des méthodes de vérification par adresse IP et DNS inversé lorsqu'il faut confirmer l'identité d'un véritable crawler Google. ([Google for Developers][2])

Utilisez le paramètre Pandectes pour le comportement de la bannière de consentement. Si l'identité vérifiée d'un crawler est importante pour la sécurité ou le contrôle d'accès, traitez-la séparément au niveau du serveur, du CDN ou de l'infrastructure.

Considérer un robot comme ayant donné son consentement détermine-t-il si le suivi est légalement autorisé ?

Non.

Ce paramètre définit l'état de consentement technique que Pandectes applique à une requête automatisée. Il ne détermine pas si une requête, un script ou un service tiers particulier est soumis à des exigences de confidentialité ou à d'autres exigences légales.

Vérifiez séparément la configuration de votre boutique et les exigences applicables.

Mis à jour le : 02/10/2026