User-agent: *
Crawl-delay: 2
Disallow: /admin
Disallow: /account/
Disallow: /cart/
Disallow: /compare/
Disallow: /checkout/

User-agent: *

# Specifieke URL-parameters uitsluiten
Disallow: /*?ps_keyword=*
Disallow: /*?pf_*

# Pagina's met cookiewetgeving-opties uitsluiten
Disallow: /cookielaw/optIn/

# Blokkeer specifieke CDN-pagina's
Disallow: /cdn-cgi/l/email-protection

# Algemene mappen die vaak worden uitgesloten
Disallow: /admin/
Disallow: /backend/
Disallow: /config/
Disallow: /temp/

# Uitsluiting van paginering en filters
Disallow: /*?page=*
Disallow: /*?filter=*

# Blokkeer zoekresultatenpagina's
Disallow: /search

# Blokkeer inlog- en accountpagina's
Disallow: /login
Disallow: /account/
Disallow: /user/

# Blokkeer specifieke bestandstypen (PDF, ZIP, JS, CSS)
Disallow: /*.pdf$
Disallow: /*.zip$
Disallow: /*.js$
Disallow: /*.css$

# Blokkeer URL's met sessie- en tracking-ID's
Disallow: /*?session_id=*
Disallow: /*?tracking=*

# Blokkeer tijdelijke en testpagina's
Disallow: /test/
Disallow: /old-content/
Disallow: /beta/

# Toestaan van specifieke populaire pagina's in geblokkeerde mappen
Allow: /blog/popular-article

# Sitemap-vermelding
Sitemap: https://www.dartshopleiden.nl/sitemap.xml



Sitemap: https://www.dartshopleiden.nl/sitemap.xml