Bei Magento/Adobe Commerce klären wir zuerst, welche Schicht den öffentlichen Storefront-Host ausliefert.
Wir starten bei Content → Design → Configuration
Im passenden Store View prüfen wir Search Engine Robots und danach die reale /robots.txt-Antwort.
Default Robots ist nicht dasselbe
Default Robots steuert Seiten-Indexierungsdirektiven; die Crawl-Regeln der robots.txt liegen auf einer anderen Ebene.
Ecommerce braucht reale URL-Tests
Suche, Warenkorb, Konto und Facetten unterscheiden sich je Shop. Wir übernehmen keine pauschalen Blocklisten und nutzen bei Filtern den Parameter-Ratgeber.
Cloud verändert den Deployment-Kontext
In Adobe Commerce Cloud prüfen wir Umgebungstrennung, Sitemap und Indexierungssteuerung für Staging versus Production.
PWA/headless kann Ownership verschieben
Wenn PWA, headless Frontend oder CDN den öffentlichen Host bedient, kann diese Schicht /robots.txt besitzen. Wir kontrollieren Cloud/PWA/headless und die Live-Datei mit dem Checker.