# ============================================================================
# 3DMenu - robots.txt
# ============================================================================
# UWAGA: ten plik dziala wylacznie wtedy, gdy lezy w KORZENIU domeny.
# Dopoki witryna stoi pod pro17.pl/offer/www/, jest ignorowany - indeksowanie
# blokuje tam naglowek X-Robots-Tag z .htaccess. Po przeniesieniu na
# 3dmenu.pl plik trafia do korzenia i zaczyna obowiazywac.
# ============================================================================

User-agent: *
Allow: /

# Modele 3D to kilkadziesiat megabajtow, ktore nie wnosza nic do wynikow
# wyszukiwania - crawler nie ma po co ich pobierac.
Disallow: /assets/models/

# Dekodery Draco i KTX2 (.wasm) - to samo, dwa pliki po ponad megabajcie.
# Blokada jest WYBIORCZA, a nie na caly /vendor/, i to jest zmiana wzgledem
# poprzedniej wersji: Google renderuje strone tak jak przegladarka i musi
# widziec skrypty, ktore ona wykonuje. Zablokowany model-viewer.min.js
# konczyl sie wpisem "zasob zablokowany" w Search Console przy kazdej
# podstronie ze scena 3D. Sama blokada niczego nie oszczedzala: bez skryptu
# robot i tak nie siegal po modele.
Disallow: /vendor/model-viewer/basis/basis_transcoder.wasm
Disallow: /vendor/model-viewer/draco/draco_decoder.wasm
# Fragmenty markupu dociagane przez okno modalne (kalkulator, a pozniej
# dokumenty). Same w sobie nie sa strona - bez arkusza i skryptu to goly
# kawalek HTML, a tresc i tak jest dostepna w oknie na podstronie.
Disallow: /partials/
# To samo w katalogach jezykowych (/en/partials/, /de/partials/) - kazda
# wersja ma wlasny kalkulator. Gwiazdka zamiast listy jezykow, zeby kolejna
# wersja nie wymagala dopisywania reguly; Google i Bing ja rozumieja.
Disallow: /*/partials/

Sitemap: https://3dmenu.pl/sitemap.xml