# --- Standard-Regeln --- User-agent: * # Sensible/irrelevante Bereiche sperren Disallow: /admin/ Disallow: /checkout/ Disallow: /account/ Disallow: /login Disallow: /register Disallow: /wishlist Disallow: /compare Disallow: /api/ Disallow: /_profiler/ Disallow: /_wdt/ # Optional: interne Widget-/Tracking-Routen sperren (wenn vorhanden/unerw'fcnscht) Disallow: /widgets/ Disallow: /tracking/ # Doppelte Inhalte durch Kampagnen-Parameter vermeiden # (Google/Bing verstehen Wildcards; kann ohne Risiko genutzt werden) Disallow: /*?utm_* Disallow: /*&utm_* Disallow: /*?pk_* Disallow: /*&pk_* Disallow: /*?gclid=* Disallow: /*&gclid=* Disallow: /*?fbclid=* Disallow: /*&fbclid=* Disallow: /*?msclkid=* Disallow: /*&msclkid=* # WICHTIG: Filter- und Sortier-Seiten NICHT per robots.txt sperren, # wenn sie per Meta-Robots (z. B. noindex) gesteuert werden sollen. # Sonst kann die Suchmaschine den Meta-Tag nicht sehen. # Rendering erlauben (CSS/JS/Assets) '96 wichtig f'fcr korrekte Indexierung Allow: /*.css$ Allow: /*.js$ Allow: /bundles/ Allow: /theme/ Allow: /media/ Allow: /thumbnail/ Allow: /fonts/ # --- Sitemaps --- Sitemap: https://www.utmshop.de/sitemap.xml # Bei Sprach-/Shop-Subshops mehrere Sitemaps auff'fchren, z. B.: # Sitemap: https://www.utmshop.de/de/sitemap.xml # Sitemap: https://www.utmshop.de/en/sitemap.xml # --- Hinweise --- # Crawl-delay wird von Google ignoriert und ist i. d. R. nicht n'f6tig. # Nutze Canonicals & Meta-Robots (noindex, nofollow) auf Seitenebene f'fcr Feintuning.