# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
Allow: *.css
Allow: *.js
Allow: /cli/*.css
Allow: /cli/*.js
Allow: /components/*.css
Allow: /components/*.js
Allow: /includes/*.css
Allow: /includes/*.js
Allow: /images/
Allow: /cache/
Allow: /templates/
Allow: /media/
Allow: /plugins/
Allow: /components/
Allow: /modules/
Allow: /libraries/
Allow: /forum/
Allow: /forum/files/

Allow: /forum/cache/

Disallow: /administrator/
Disallow: /cli/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /logs/
Disallow: /tmp/

# SEO 2026-08-08: stare URL viewtopic.php?f=X&t=Y dostaja teraz 301 na SEF
# (normalizacja jview='viewtopic' w com_p8pbb/helper.php) - blokada Disallow
# ZDJETA, zeby Google mogl zobaczyc przekierowania i skleic duplikaty.

# SEO 2026-05-29: zaadresowanie problemow z GSC
# Bridge phpBB - tryb leaders crashuje (zwraca 410, dodatkowo blokujemy crawl)
Disallow: /component/p8pbb/members/leaders.html
# Wyszukiwarki wewnetrzne - thin content, infinite combinations URL
Disallow: /component/finder/
Disallow: /component/search/
Disallow: /index.php?option=com_search
Disallow: /index.php?option=com_finder
# AJAX-only endpointy (jmrcmt*) - sa juz 301 ale prewencyjnie blokujemy crawl
Disallow: /*?*jmrcmtupdt=
Disallow: /*?*jmrcmttpl=
# Print/component/mobile templates - duplikaty (juz noindex, blokujemy crawl)
Disallow: /*?*print=1
Disallow: /*?*tmpl=component
Disallow: /*?*format=pdf
Disallow: /*?*format=feed

# SEO 2026-08-03: spam-atak na wyszukiwarke (indonezyjskie reklamy w searchword=)
# Spamerzy generuja linki do wynikow wyszukiwania + owijaja je w ra-google-login.php?return=
# Strony sa noindex, ale Google skanowal miliony URL - blokujemy crawl calkowicie.
Disallow: /ra-google-login.php
Disallow: /*?*searchword=
Disallow: /*wyszukiwarka.html

# 2026-09-21: /dyskusje/ankiety.php?stan=open|closed to podzbiory tej samej listy ankiet -
# do indeksu ma isc wersja pelna i widoki dzialow (?f=), ktore maja wlasna tresc. Meta robots
# nie wchodzi w gre: tag "index,follow" na stronach mostka stawia warstwa spoza szablonu forum,
# a dokladanie drugiego, sprzecznego tagu juz raz zmylilo diagnostyke.
Disallow: /dyskusje/ankiety.php?stan=


# Sitemap entries - zweryfikowane 29.05.2026, odchudzone 24.07.2026
# JSitemap (com_jmap) - generuje non-www po fixie view.html.php
Sitemap: https://roslinyakwariowe.pl/component/jmap/sitemap/xml?format=xml
Sitemap: https://roslinyakwariowe.pl/component/jmap/sitemap/images?format=images
# Custom phpBB forum sitemap (zastapuje stary /forum/sitemap.php ktory zwracal http+www)
Sitemap: https://roslinyakwariowe.pl/forum/sitemap_xml.php
# Google News (12.08.2026): serwis JEST w Google News (36 klikniec / 1576 wyswietlen PL
# w 3 mies., pozycja ~3.9, trend rosnacy) - wczesniejsza notka o braku rejestracji byla
# bledna. Sitemapa gnews przywrocona; zgloszona tez w GSC (non-www, stara www usunieta).
Sitemap: https://roslinyakwariowe.pl/component/jmap/sitemap/gnews?format=gnews

# USUNIETO 24.07.2026 (powod):
#   /component/jmap/sitemap/mobile?format=mobile  - format mobile sitemap wycofany przez Google w 2015
#   /index.php?option=com_xmap&view=xml&...&id=1  - duplikat mapy jmap (te same ~4200 URL z drugiego komponentu)

# USUNIETO 29.05.2026 (powod):
#   /component/jmap/sitemap/videos?format=videos  - PUSTY (brak video data w Joomla)
#   /component/jmap/sitemap/html                  - HTML widok, nie XML sitemap
#   /index.php?option=com_xmap&view=xml&images=1  - PUSTY (0 loc)
#   /forum/seo/frog_images.xml                    - 4 loc, glownie /dyskusje stare aliasy z www
#   /forum/seo/frog.xml                           - 4661 URL ale wszystkie www, duplikuje content Joomla
#   /forum/sitemap.php                            - phpBB sitemap zwraca http+www (wymaga osobnego fixu phpBB)
#   /index.php?option=com_osmap&view=xml&id=1     - dead od 2023 (GSC: "Nie udalo sie pobrac")

# === AI crawlers: pacing zamiast blokady (2026-08-05) ===
# Bot z tej grupy ignoruje grupe "User-agent: *" - kluczowe Disallow powtorzone.
User-agent: ClaudeBot
User-agent: Claude-SearchBot
User-agent: GPTBot
User-agent: CCBot
User-agent: Amazonbot
User-agent: meta-externalagent
User-agent: PerplexityBot
Crawl-delay: 5
Disallow: /administrator/
Disallow: /installation/
Disallow: /tmp/
Disallow: /logs/
Disallow: /component/finder/
Disallow: /component/search/
Disallow: /forum/search.php
Disallow: /forum/ucp.php
Disallow: /forum/posting.php