Правильный файл robots.txt для CMS MODX Revolution

Правильный файл robots.txt для CMS MODX Revolution
MODX Revo 0    365 0

Такой файл robots.txt я обычно использую в своих проектах.

User-agent: *
Disallow: /assets/components/
Disallow: /core/
Disallow: /connectors/
Disallow: /index.php
Disallow: /index.html
Disallow: /index
Disallow: *?
Host: [[host]]
Sitemap: https://[[host]]/sitemap.xml

Если у вас нет SSL сертификата, то https замените на http.


Похожие статьи:

Бесконечное сохранение ресурсов в MODX
MODX ➨ условия if-else
MODX Shopkeeper 3 - проблема с плагином мультивалютности
Tickets: как сделать счетчик просмотров всех посетителей
Правильный файл .htaccess для CMS MODX Revolution

Комментарии ()

    Вы должны авторизоваться, чтобы оставлять комментарии.

    Вы можете авторизоваться на сайте через:
    YandexVkontakte

    Рубрики блога

    Последние комментарии

    Алексей Власов 16 октября 2018, 14:27
    Универсальный и очень простой PHP парсер 10
    Алексей Власов 13 октября 2018, 18:57
    Бесконечное сохранение ресурсов в MODX 2
    Александр Петров 30 сентября 2018, 20:54
    Пишем на SQL без SQL: основы по RedBean PHP 10