# Content-signals (zie cloudflare.com/content-signals): wat je hier mag verzamelen.
#   search   = zoekindex + zoekresultaten tonen: ja
#   ai-input = content realtime gebruiken in AI-antwoorden (RAG/grounding, met bronvermelding): ja
#   ai-train = AI-modellen trainen of fine-tunen: ja (met bronvermelding naar sportpoeder.nl)

User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
# Partner-doorstuur (noindex, unieke klik-id) hoeft niet gecrawld te worden
Disallow: /partner/
# Filter-combinaties op categoriepaginas niet crawlen (onbeperkt veel URLs, zware server-belasting)
Disallow: /*?*maat=
Disallow: /*?*merk=
Disallow: /*?*sorteer=
Disallow: /*?*categorie=
Disallow: /*?*subcategorie=
Disallow: /*?*geslacht=
Disallow: /*?*subtype=
Disallow: /*?*merken=
Disallow: /*?*winkel=
Disallow: /*?*portie=
Disallow: /*?*inhoud=
Disallow: /*?*korting=
Disallow: /*?*kwaliteit=
Disallow: /*?*prijs=
Disallow: /*?*type=
# Kennisbank-categorieën mogen wel (eigen pagina met canonical; de artikelen staan zo op twee klikken)
Allow: /kennisbank?categorie=

# AI-assistenten en hun crawlers zijn uitdrukkelijk welkom. Open prijsdata:
# https://sportpoeder.nl/prijzen.json (bulk) en https://sportpoeder.nl/api/prijs?q= (per categorie/merk);
# documentatie voor agents: https://sportpoeder.nl/agents.md en https://sportpoeder.nl/llms.txt

User-agent: OAI-SearchBot
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Allow: /
# Partner-doorstuur (noindex, unieke klik-id) hoeft niet gecrawld te worden
Disallow: /partner/
# Filter-combinaties op categoriepaginas niet crawlen (onbeperkt veel URLs, zware server-belasting)
Disallow: /*?*maat=
Disallow: /*?*merk=
Disallow: /*?*sorteer=
Disallow: /*?*categorie=
Disallow: /*?*subcategorie=
Disallow: /*?*geslacht=
Disallow: /*?*subtype=
Disallow: /*?*merken=
Disallow: /*?*winkel=
Disallow: /*?*portie=
Disallow: /*?*inhoud=
Disallow: /*?*korting=
Disallow: /*?*kwaliteit=
Disallow: /*?*prijs=
Disallow: /*?*type=
# Kennisbank-categorieën mogen wel (eigen pagina met canonical; de artikelen staan zo op twee klikken)
Allow: /kennisbank?categorie=
# App-API (JSON zonder zoekwaarde; deze crawler rendert niet en heeft er niets aan)
Disallow: /wp-json/

User-agent: GPTBot
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Allow: /
# Partner-doorstuur (noindex, unieke klik-id) hoeft niet gecrawld te worden
Disallow: /partner/
# Filter-combinaties op categoriepaginas niet crawlen (onbeperkt veel URLs, zware server-belasting)
Disallow: /*?*maat=
Disallow: /*?*merk=
Disallow: /*?*sorteer=
Disallow: /*?*categorie=
Disallow: /*?*subcategorie=
Disallow: /*?*geslacht=
Disallow: /*?*subtype=
Disallow: /*?*merken=
Disallow: /*?*winkel=
Disallow: /*?*portie=
Disallow: /*?*inhoud=
Disallow: /*?*korting=
Disallow: /*?*kwaliteit=
Disallow: /*?*prijs=
Disallow: /*?*type=
# Kennisbank-categorieën mogen wel (eigen pagina met canonical; de artikelen staan zo op twee klikken)
Allow: /kennisbank?categorie=

User-agent: PerplexityBot
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Allow: /
# Partner-doorstuur (noindex, unieke klik-id) hoeft niet gecrawld te worden
Disallow: /partner/
# Filter-combinaties op categoriepaginas niet crawlen (onbeperkt veel URLs, zware server-belasting)
Disallow: /*?*maat=
Disallow: /*?*merk=
Disallow: /*?*sorteer=
Disallow: /*?*categorie=
Disallow: /*?*subcategorie=
Disallow: /*?*geslacht=
Disallow: /*?*subtype=
Disallow: /*?*merken=
Disallow: /*?*winkel=
Disallow: /*?*portie=
Disallow: /*?*inhoud=
Disallow: /*?*korting=
Disallow: /*?*kwaliteit=
Disallow: /*?*prijs=
Disallow: /*?*type=
# Kennisbank-categorieën mogen wel (eigen pagina met canonical; de artikelen staan zo op twee klikken)
Allow: /kennisbank?categorie=

User-agent: ChatGPT-User
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Allow: /
# Filter-combinaties op categoriepaginas niet crawlen (onbeperkt veel URLs, zware server-belasting)
Disallow: /*?*maat=
Disallow: /*?*merk=
Disallow: /*?*sorteer=
Disallow: /*?*categorie=
Disallow: /*?*subcategorie=
Disallow: /*?*geslacht=
Disallow: /*?*subtype=
Disallow: /*?*merken=
Disallow: /*?*winkel=
Disallow: /*?*portie=
Disallow: /*?*inhoud=
Disallow: /*?*korting=
Disallow: /*?*kwaliteit=
Disallow: /*?*prijs=
Disallow: /*?*type=
# Kennisbank-categorieën mogen wel (eigen pagina met canonical; de artikelen staan zo op twee klikken)
Allow: /kennisbank?categorie=

Sitemap: https://sportpoeder.nl/sitemap_index.xml