Robots.txt sur Squarespace : comment le vérifier et le corriger
Par Toy Wen Da, Cofondateur · Mis à jour le · 7 min de lecture
Traduit de l'original en anglais. Lire en anglais
Un fichier robots.txt squarespace est le fichier texte que Squarespace génère automatiquement à l'adresse yoursite.com/robots.txt, et qui indique aux moteurs de recherche et aux robots d'IA quelles parties de votre site ils peuvent demander. Vous pouvez l'afficher instantanément dans n'importe quel navigateur, mais vous ne pouvez pas modifier le fichier brut : vos vrais leviers sont quelques réglages dans Settings et le panneau SEO de chaque page.
Vérifiez-le d'abord avec un outil gratuit
Avant de fouiller dans les réglages, passez votre domaine dans le Robots.txt Tester gratuit. Saisissez votre URL : il vous montre exactement quelles directives sont actives, si une page ou un robot précis est bloqué, et si la syntaxe générée par Squarespace est bien valide. Sur une plateforme où vous ne pouvez pas modifier le fichier à la main, une vérification externe rapide est souvent plus efficace que de parcourir les menus pour s'assurer que rien ne bloque Googlebot en silence.
Ce que contient réellement un fichier robots.txt Squarespace
Chaque site Squarespace est livré avec un robots.txt par défaut qui interdit quelques chemins système, comme les pages de paiement, les pages de résultats de recherche et les routes d'administration, tout en laissant votre vrai contenu ouvert à l'exploration. Vous n'avez rien écrit de tout cela, et vous ne pouvez ni supprimer ni ajouter de lignes directement.
C'est différent d'un site auto-hébergé, où vous avez un accès complet au fichier. Sur Squarespace, le fichier est généré en coulisses et se met à jour automatiquement quand vous ajoutez des pages, des collections ou des sections e-commerce.
Pourquoi Squarespace verrouille ce fichier
La documentation de Google indique que si vous utilisez un système de gestion de contenu, vous ne modifierez probablement pas le robots.txt directement : le CMS propose une page de réglages ou un interrupteur à la place, et vous demande de gérer l'exploration via cette interface (Google Search Central). Squarespace suit de près ce modèle : des réglages et des options au niveau de chaque page remplacent l'accès au fichier brut.
Comment afficher votre fichier robots.txt Squarespace
L'afficher ne prend qu'une étape :
- Ouvrez un navigateur et allez à l'adresse
yoursite.com/robots.txt, en remplaçant « yoursite.com » par votre vrai domaine. - Vérifiez qu'aucune ligne
Disallow: /ne figure sousUser-agent: *: cette seule ligne bloquerait tous les robots sur l'ensemble de votre site. - Repérez les chemins interdits que vous ne vous attendiez pas à y trouver.
Si le fichier semble correct mais qu'une page précise n'apparaît toujours pas dans Google, le robots.txt n'est généralement pas en cause : vérifiez plutôt les réglages SEO de cette page.
Peut-on modifier le robots.txt sur Squarespace ?
Vous ne pouvez pas modifier directement le robots.txt sur Squarespace. Il n'y a ni champ Code Injection ni panneau de réglages où coller un fichier robots.txt personnalisé qui remplacerait celui généré. Ce que vous pouvez faire, c'est changer les réglages qui influencent ce que le fichier, et plus largement le comportement d'exploration, autorisent.
Les réglages qui font vraiment la différence
| Réglage | Où le trouver | Ce qu'il contrôle |
|---|---|---|
| Block known AI crawlers | Settings → Crawlers | Ajoute des règles d'interdiction pour des robots comme GPTBot, ClaudeBot et d'autres robots d'IA similaires |
| Hide page from search results | Page Settings → SEO (par page) | Ajoute une instruction noindex pour cette seule page, indépendamment du robots.txt |
| Password protection | Page Settings → General | Bloque entièrement l'accès à une page, aux robots comme aux visiteurs |
| URL Mappings | Settings → Advanced → URL Mappings | Redirige un chemin vers un autre ; ne réécrit pas le robots.txt lui-même |
Si vous voulez que des outils d'IA comme ChatGPT ou Perplexity explorent votre contenu, laissez la case « Block known artificial intelligence crawlers » décochée. Si vous voulez tenir ces robots à l'écart tout en autorisant Google et Bing, activez-la : elle cible spécifiquement les robots d'IA, pas les moteurs de recherche classiques.
Si vous avez besoin d'un contrôle total du fichier
Certains sites ont réellement besoin de règles crawl-delay personnalisées, de motifs avec caractères génériques ou de sections propres à un robot, que les interrupteurs de Squarespace ne peuvent pas produire. Dans ce cas, la solution pratique consiste à construire le fichier exact que vous voulez avec un outil comme le Robots.txt Generator gratuit, puis à migrer vers une plateforme qui permet de le téléverser à la racine : Webflow et Framer le permettent, pas Squarespace.
À noter : les directives crawl-delay font rarement ce que l'on attend, même sur les plateformes qui les prennent en charge. Googlebot ignore purement et simplement cette directive, comme l'explique l'article Robots.txt Crawl-Delay: Why Googlebot Ignores It ; viser un contrôle complet du robots.txt pour cette seule directive ne vaut donc généralement pas un changement de plateforme.
Quand les outils intégrés de Squarespace suffisent, et quand ils ne suffisent pas
| Situation | Les outils de Squarespace suffisent-ils ? | Que faire |
|---|---|---|
| Une page n'est pas indexée | Oui | Vérifiez dans les réglages SEO de cette page qu'aucun noindex n'a été activé par erreur |
| Vous voulez bloquer les robots d'IA sur tout le site | Oui | Cochez la case des robots d'IA dans Settings → Crawlers |
| Vous avez besoin d'un crawl-delay ou d'une règle avec caractères génériques personnalisés | Non | Squarespace ne l'expose pas ; il faut une plateforme avec accès au fichier |
| Erreurs d'exploration récurrentes sur de nombreuses pages | En partie | Les réglages couvrent les cas courants ; les problèmes plus profonds demandent un examen dans Search Console |
| Vérification ponctuelle avant un lancement | Oui | Un coup d'œil à /robots.txt et l'outil de test suffisent |
Une URL bloquée isolée se règle presque toujours dans les réglages. Un problème d'exploration récurrent à l'échelle du site, avec des pages qui sortent de l'index par vagues ou des robots qui visitent des pages que vous n'avez jamais configurées, signale un problème structurel qui dépasse ce que le panneau de Squarespace permet de toucher.
Erreurs courantes avec le robots.txt de Squarespace
- Confondre noindex et disallow. Une page interdite peut quand même être indexée si d'autres sites y font un lien ; c'est la balise noindex qui exclut réellement une page des résultats.
- Croire que l'option des robots d'IA touche Google. Elle cible uniquement les robots d'IA ; Googlebot n'est pas concerné par cet interrupteur.
- Protéger une page par mot de passe pour la cacher des recherches, puis s'étonner de la baisse de trafic. Cette méthode bloque totalement les robots, au lieu de masquer simplement la page pour une seule fonctionnalité.
- Attendre d'une règle crawl-delay qu'elle ralentisse Googlebot. Ce n'est pas le cas : Google ignore cette directive, quelle que soit la plateforme.
- Consulter le robots.txt d'une URL de préproduction au lieu du domaine en ligne, qui peut afficher des règles complètement différentes.
Vérifiez votre correction avec le Robots.txt Tester gratuit
Après avoir modifié le réglage des robots d'IA ou l'option SEO d'une page, publiez vos changements et passez de nouveau le domaine dans le Robots.txt Tester. Il confirme que le fichier en ligne reflète votre modification et signale tout chemin encore bloqué de façon inattendue, ce qui est utile puisque Squarespace ne montre pas de comparaison avant/après quand vous changez un réglage.
Questions fréquentes
Squarespace me permet-il de téléverser mon propre fichier robots.txt ?
Non. Squarespace génère le fichier automatiquement à partir de la structure de votre site et d'un petit nombre de réglages. Il n'existe aucun champ pour coller ou téléverser un fichier de remplacement.
Bloquer les robots d'IA dans Squarespace bloque-t-il aussi Google ?
Non. Le réglage « Block known artificial intelligence crawlers » cible spécifiquement des robots comme GPTBot et ClaudeBot. Googlebot et les autres robots de recherche classiques ne sont pas touchés par cet interrupteur.
Pourquoi ma page est-elle bloquée dans le robots.txt mais apparaît-elle quand même dans Google ?
Google peut indexer une URL à partir de liens externes sans explorer son contenu, ce qui explique pourquoi des pages interdites apparaissent parfois dans les résultats sans description. Utilisez plutôt une balise noindex si vous voulez qu'une page soit complètement absente de l'index.
Puis-je ajouter une référence à mon sitemap dans le robots.txt de Squarespace ?
Squarespace inclut déjà automatiquement la référence à votre sitemap dans le fichier généré ; vous n'avez pas besoin de l'ajouter vous-même.
Le fichier llms.txt est-il la même chose que le robots.txt sur Squarespace ?
Non. Le robots.txt contrôle l'accès des robots d'exploration et constitue un standard du web depuis des décennies, formalisé par l'IETF sous la référence RFC 9309. La fonction llms.txt, plus récente chez Squarespace, est un format de fichier expérimental et non officiel sur lequel les principaux robots d'IA ne s'appuient pas actuellement pour la découverte ou la citation ; c'est un sujet distinct et bien moins important que de bien configurer le robots.txt.
Demandez un second avis sur vos réglages d'exploration
Le robots.txt de Squarespace est un petit fichier capable de vous faire perdre discrètement du trafic si un interrupteur est mal positionné. Si vous voulez une vision complète de la façon dont votre site est exploré et indexé, au-delà de ce que révèle un seul fichier, parlez à l'équipe et obtenez un exemple de rapport qui montre précisément où en est votre site.
## Ressources / Références
1. [Google Search Central](https://developers.google.com/search/docs/crawling-indexing/robots/intro)
2. [RFC 9309](https://www.rfc-editor.org/rfc/rfc9309)
## Sources
- [Squarespace & LLMs.txt Support: What it Means for AIO](https://sarahmoon.net/blog/squarespace-llmstxt)
- [llms.txt for Squarespace — How to Add It](https://causabi.com/guides/squarespace)
- [Robots.txt Introduction and Guide | Google Search Central](https://developers.google.com/search/docs/crawling-indexing/robots/intro)
À propos de l'auteur
SearchBlueprint a recherché, rédigé et noté cet article avec la chaîne de production de contenu que nos clients utilisent sur leurs propres sites. La note affichée dans la signature est celle que notre moteur de contenu a attribuée à cette page avant sa publication. Rien ici n'est relu à la main, et c'est tout l'intérêt : c'est le résultat du produit, publié là où chacun peut le vérifier.