# === GetPravo robots.txt === User-agent: Googlebot Allow: / Allow: /accounts/register/ Allow: /accounts/login/ Disallow: /admin/ Disallow: /user/ Disallow: /accounts/ Disallow: /blog/search/ Disallow: /blog/tag/ User-agent: Yandex Allow: / Allow: /accounts/register/ Allow: /accounts/login/ Disallow: /admin/ Disallow: /user/ Disallow: /accounts/ Disallow: /blog/search/ Disallow: /blog/tag/ Clean-param: query /blog/search/ # ... (остальные блоки Bingbot, Mail.RU_Bot и * измените аналогично) ... User-agent: * Allow: / Allow: /accounts/register/ Allow: /accounts/login/ Disallow: /admin/ Disallow: /user/ Disallow: /accounts/ Disallow: /blog/search/ Disallow: /blog/tag/ # Основной домен (для Яндекса) Host: https://getpravo.ru # Карта сайта Sitemap: https://getpravo.ru/sitemap-index.xml Sitemap: https://getpravo.ru/sitemap-images.xml # RSS-лента для Дзена Sitemap: https://getpravo.ru/blog/feed/zen/