Shopify robots.txt – was sich steuern lässt und was nicht

Shopify erlaubt seit 2021 eine begrenzte Anpassung der robots.txt – ein wichtiger Schritt, aber kein vollständiger Ersatz für die Kontrolle, die selbst gehostete Systeme bieten. Wer Crawl-Budget und Indexierung strategisch steuern will, muss verstehen, wo Shopify echte Spielräume lässt und wo die Plattform Grenzen setzt. Den übergreifenden Kontext zur technischen SEO-Basis von Shopify beschreibe ich unter Shopify SEO.

User-agent: *
Disallow: /cart
Disallow: /checkout
Disallow: /*?sort=
Sitemap: https://ihr-shop.de/sitemap.xml
# steuert das Crawling – NICHT die Indexierung

Die robots.txt regelt, welche Pfade Google crawlen darf – um eine bereits indexierte Seite zu entfernen, braucht es noindex, nicht Disallow.

Kostenlos · ohne Anmeldung · Ergebnis sofort

Was Shopify nativ in der robots.txt sperrt

Shopify generiert die robots.txt automatisch. Standardmäßig gesperrt sind Pfade wie /admin, /cart, /checkout, /orders, /account sowie interne Such-URLs (/search). Das ist sinnvoll – diese Bereiche haben keine Suchintention und verbrauchen sonst unnötig Crawl-Budget. Kritischer: Shopify blockiert auch /collections/*+*, also facettierte Such-URLs mit kombinierten Filtern. Hier liegt ein wiederkehrendes Spannungsfeld, weil bestimmte Filterkombinationen durchaus Long-Tail-Potenzial haben. Die Entscheidung, ob solche URLs indexiert werden sollen, lässt sich nicht mehr allein über die robots.txt lösen – sie erfordert eine kombinierte Strategie mit Canonical-Tags und Noindex.

Shopify sperrt Funktionspfade wie Warenkorb, Checkout und Konto bereits ab Werk (Auswahl) – hier muss man nichts ergänzen, sondern nur ergänzende Regeln bewusst setzen.

robots.txt in Shopify anpassen – so funktioniert es technisch

Seit dem robots.txt.liquid-Template können Händler die Datei über das Theme-Editor-Liquid-System bearbeiten. Das Template liegt unter Assets im Theme-Code und wird beim Aufruf von /robots.txt serverseitig gerendert. Anpassungen erfolgen über Liquid-Logik: bestehende Gruppen überschreiben, neue Disallow-Regeln hinzufügen oder gezielt Allow-Regeln setzen.

Wichtig für die Praxis: Das Template wird nur aktiv, wenn es im Theme vorhanden ist. Bei Theme-Wechseln oder Updates muss geprüft werden, ob das robots.txt.liquid-File überschrieben wurde – ein Fehler, der in der Praxis regelmäßig passiert und unbemerkt bleibt, bis ein Crawl-Analyse-Tool die Änderung aufdeckt. Die Datei sollte deshalb in der Google Search Console nach jedem Theme-Update aktiv verifiziert werden.

Migration: robots.txt als Crawl-Schutz beim Launch

Bei einer Shop-Migration ist die robots.txt ein aktives Steuerungsmittel. Während der Migrationsphase lässt sich über das robots.txt.liquid-Template temporär eine vollständige Indexierungssperre für den Staging-Bereich setzen – sofern dieser über eine eigene Subdomain läuft. Für Shops, die von einer anderen Plattform auf Shopify wechseln, beschreibe ich den vollständigen Prozess unter Shopify Migration, inklusive der Reihenfolge, in der robots.txt, Redirects und Canonicals gesetzt werden sollten.

Wie ich die robots.txt in Shopify-Projekten prüfe

Jedes Shopify-Projekt beginnt mit einem Abgleich: Was sperrt die aktuelle robots.txt, was crawlt Google trotzdem (über GSC-Crawl-Berichte), und welche URLs erscheinen in der Sitemap ohne Indexierungs-Absicht? Daraus ergibt sich eine Prioritätenliste. Meistens sind es keine großen Anpassungen – aber die falschen 5 Zeilen in der robots.txt können wochenlange Crawling-Lücken verursachen. Ich berate direkt und ohne Agentur-Overhead: Schreiben Sie mich an, wenn Sie konkrete Fragen zur Crawl-Steuerung in Ihrem Shop haben.

Kostenlos · ohne Anmeldung · Ergebnis sofort