Правильный файл robots.txt для CMS MODX Revolution

Правильный файл robots.txt для CMS MODX Revolution
MODX Revo 0    643 0

Такой файл robots.txt я обычно использую в своих проектах.

User-agent: *
Disallow: /assets/components/
Disallow: /core/
Disallow: /connectors/
Disallow: /index.php
Disallow: /index.html
Disallow: /index
Disallow: *?
Host: [[host]]
Sitemap: https://[[host]]/sitemap.xml

Если у вас нет SSL сертификата, то https замените на http.


Похожие статьи:

Бесконечное сохранение ресурсов в MODX
MODX ➨ условия if-else
MODX Shopkeeper 3 - проблема с плагином мультивалютности
Tickets: как сделать счетчик просмотров всех посетителей
Правильный файл .htaccess для CMS MODX Revolution

Комментарии ()

    Вы должны авторизоваться, чтобы оставлять комментарии.

    Вы можете авторизоваться на сайте через:
    YandexVkontakte

    Блог программиста

    Продвижение сайтов

    Современные шаблоны для сайтов на русском

    Последние комментарии

    Михаил Шилов 30 апреля 2019, 23:45
    Стилизация checkbox и radio 1
    Андрей Карманов 08 марта 2019, 08:05
    Пишем на SQL без SQL: основы по RedBean PHP 13
    Леонид Кобяшев 26 декабря 2018, 20:20
    Обратный таймер на JavaScript 1
    Алексей Власов 16 октября 2018, 14:27
    Универсальный и очень простой PHP парсер 10
    Алексей Власов 13 октября 2018, 18:57
    Бесконечное сохранение ресурсов в MODX 2