Опубликовано 2018-07-19 18:16:24
В этом видеоролике я расскажу, что такое файл robots.txt, для чего он нужен при продвижении сайта и как правильно его настроить. Robots.txt — это стандарт исключения для роботов. Он используется для того, чтобы ограничить доступ роботам к некоторым файлам и папкам на сайте.