# ==========================================
# robots.txt – colla-gen.de
# SEO-freundlich, WooCommerce-beruhigend
# Stand: 27.08.2026
# ==========================================

# ------------------------------------------
# Problematische / aktuell unerwünschte Bots
# ------------------------------------------

User-agent: PetalBot
Disallow: /

User-agent: Baiduspider
Disallow: /


# ------------------------------------------
# Generelle Regeln für alle übrigen Crawler
# Google, Bing, DuckDuckGo, OpenAI,
# Perplexity, Claude, Social Bots usw.
# ------------------------------------------

User-agent: *

# WordPress Administration
Disallow: /wp-admin/
Disallow: /wp-login.php
Allow: /wp-admin/admin-ajax.php

# WooCommerce – persönliche/dynamische Bereiche
Disallow: /cart/
Disallow: /checkout/
Disallow: /my-account/

# WooCommerce – dynamische Aktionen
Disallow: /*?*add-to-cart=
Disallow: /*?*add_to_wishlist=
Disallow: /*?*remove_item=

# WooCommerce – Filter und facettierte Navigation
Disallow: /*?*filter_
Disallow: /*?*query_type_
Disallow: /*?*orderby=
Disallow: /*?*min_price=
Disallow: /*?*max_price=
Disallow: /*?*product_count=
Disallow: /*?*product_order=
Disallow: /*?*product_view=
Disallow: /*?*v=

# Such-, Kommentar- und Attachment-Parameter
Disallow: /*?s=
Disallow: /*&s=
Disallow: /*?*replytocom=
Disallow: /*?*attachment_id=

# REST API und Feeds – Crawling-Rauschen reduzieren
Disallow: /wp-json/
Disallow: /feed/
Disallow: /*/feed/

# Uploads/Bilder ausdrücklich zugänglich
Allow: /wp-content/uploads/

# Sitemap
Sitemap: https://www.colla-gen.de/sitemap_index.xml