# See http://www.robotstxt.org/wc/norobots.html for documentation on how to use the robots.txt file
#
# To ban all spiders from the entire site uncomment the next two lines:
User-Agent: *
Allow: /stylesheets/
Allow: /images/
Allow: /assets/
Allow: /images/*.png
Allow: /images/*.jpg
Allow: /images/*.svg

# ЗАКРИВАЄМО те, що створює сміття в індексі (згідно з вашим CSV)
# 25.07.2026 (SEO-розкоп, рішення Ігоря): Disallow на /images/data* ПРИБРАНО.
# Причина: robots.txt — НЕ інструмент видалення з індексу. Усі файли в /images/data*
# віддають X-Robots-Tag: noindex, nofollow на рівні сервера (перевірено на data/,
# data2/, data3/, data4/ — і на 200, і на 404). Disallow не давав Googlebot
# завантажити файл ⇒ він НІКОЛИ не бачив noindex ⇒ URL висіли в індексі назавжди
# як "Indexed, though blocked by robots.txt" — з іменем людини прямо в URL
# (напр. .../Resumo - TCC - Saulo Benedetti - Anarquismo.docx). GSC-removals діють
# ~6 місяців, після чого такі URL могли б повернутись. Дозволяємо краулити, щоб
# Google прочитав noindex і видалив назавжди. Захист не послаблено: noindex —
# сильніший сигнал, ніж Disallow, і він лишається на місці.
Disallow: /exports/                # Посилання на експорт (CSV/PDF)
Disallow: /widgets/                # Технічні віджети
Disallow: /*?view=                 # Параметри віджетів
Disallow: /*?all_posts=true        # Дублікати сторінок блогу

Disallow: /qactions
Disallow: /help/
Disallow: /grouping/
Disallow: /forums/
Disallow: /topics/
Disallow: /tags/
Disallow: /apps/
Disallow: /export_single_record/

# Блокуємо параметри, які додаються до URL (вони починаються з ?)
# Це не зачепить ваші пости, бо в них текст 'excel' є частиною шляху, а не параметра
Disallow: *?*widget=true
Disallow: *?*excel
Disallow: *?*csv
Disallow: /auth/
Disallow: /sidekiq/
Disallow: /mthsidekiq/

Disallow: /checkout
Disallow: /cart
Disallow: /orders
Disallow: /user
Disallow: /account
Disallow: /password
Disallow: /stores
Disallow: /spammers
Disallow: /forum_posts
Disallow: /developers-log
Disallow: /rest_apis/

Disallow: /check_cache/
Disallow: /subforms/
Disallow: /search/
Disallow: /contact_form
Disallow: /dtypes/
Disallow: /check_fs_reloaded
Disallow: /actions
Disallow: /automations
Disallow: /widgets/check_record_widget_rendered
Disallow: /forgot_password
Disallow: /resend_activation
Disallow: /reset_password_by_phone
Disallow: /reset_password
Disallow: /activate_by_phone
Disallow: /activate
Disallow: /login
Disallow: /signup
Disallow: /change_password
Disallow: /change_password_page

Disallow: /*?*locale=
Disallow: /*?*sort=
Disallow: /*?*all_posts=
Disallow: /*?*dtype=

Sitemap: https://quintadb.ru/sitemap_ru.xml.gz