# ==================================================================== # robots.txt - Kupers Reisinfo (https://kupers.nl) # WordPress + Avada (geen e-commerce) # Laatst herzien: 2026-06 # ==================================================================== # -------------------------------------------------------------------- # 1) ALGEMEEN - Googlebot, Bingbot en elke niet expliciet genoemde bot # -------------------------------------------------------------------- User-agent: * # Backend & login. NB: crawl-hygiene, GEEN beveiliging (bots met kwade # bedoelingen negeren robots.txt). Beveilig wp-login/xmlrpc op serverniveau. Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Disallow: /wp-login.php Disallow: /xmlrpc.php # Interne zoekresultaten: bespaart crawlbudget, voorkomt thin/duplicate pages. Disallow: /*?s= Disallow: /*?search= Disallow: /search/ Disallow: /zoek/ # CSS/JS bewust NIET geblokkeerd: zoekmachines en AI-bots moeten de pagina # volledig kunnen renderen. Avada's Fusion-CSS (/uploads/fusion-styles/) is # render-kritiek. Tracking-parameters (utm, fbclid, ...) ook niet via robots.txt # blokkeren - laat canonical-tags (Yoast) het werk doen, anders ziet Google de # canonical niet en blijft de parameter-URL alsnog (zonder snippet) in de index. # -------------------------------------------------------------------- # 2) AI-ZOEKMACHINES & -ASSISTENTEN - expliciet welkom (AEO) # Geen Disallow op content = volledig toegestaan. Lijst wijzigt ~per kwartaal. # -------------------------------------------------------------------- User-agent: GPTBot User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: ClaudeBot User-agent: Claude-User User-agent: anthropic-ai User-agent: Google-Extended User-agent: PerplexityBot User-agent: Perplexity-User User-agent: Applebot-Extended User-agent: Meta-ExternalAgent User-agent: Amazonbot User-agent: CCBot Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Disallow: /*?s= Disallow: /*?search= Disallow: /search/ Disallow: /zoek/ # -------------------------------------------------------------------- # 3) SITEMAP (geverifieerd: bestaat, Yoast, non-www, https) # -------------------------------------------------------------------- Sitemap: https://kupers.nl/sitemap_index.xml