User-agent: *
Allow: /
Disallow: /admin/
Disallow: /backend/
Disallow: /private/

# Zezwól na indeksowanie obrazów, CSS i JavaScript
Allow: /*.css$
Allow: /*.js$
Allow: /*.jpg$
Allow: /*.jpeg$
Allow: /*.png$
Allow: /*.gif$
Allow: /*.svg$
Allow: /*.webp$

# Blokuj określone pliki i katalogi
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /*.php$
Disallow: /koszyk
Disallow: /moje-konto
Disallow: /wyszukiwanie

# Google AdSense i Google Ads
User-agent: Mediapartners-Google
Allow: /

# Preferencje dla Google Ads
Allow: /tradycyjne-desery
Allow: /specjaly-regionalne
Allow: /przepisy
Allow: /#traditional-desserts
Allow: /#regional-specialties
Allow: /#recipes

# Preferencje dla Google Shopping
Allow: /produkty
Allow: /katalog-deserow

# Crawl-delay dla niektórych robotów, aby nie obciążać serwera
User-agent: AhrefsBot
Crawl-delay: 10

User-agent: MJ12bot
Crawl-delay: 10

User-agent: SemrushBot
Crawl-delay: 10

# Linki do mapy witryny
Sitemap: https://www.deserypolskie.com/sitemap.xml