✍ На этапе SEO-аудита важно установить правильный файл robots txt для сайта, поскольку это повлияет на индексацию сайта поисковыми системами. Вы можете проверить свой файл robots txt, добавив / к своему домену или в панели вебмастера Яндекса или Google.
С помощью этого видео вы значительно сократите время на проверку и правильное составление файла , а также создадите правила для правильного индексирования сайта краулерами и поисковыми системами.
Содержание ролика:
0:22 - Что такое файл
1:32 - Проверка закрытых элементов для Google
2:30 - Сервисы для проверки в Яндекс и Google
3:00 - Как пользоваться инструментом от Google
6:40 - Как пользоваться инструментом от Яндекс
8:43 - Пример готового файла
15:15 - Виды User-agent
18:12 - Какие виды страниц нужно проверять
Рекомендованные видео:
★
Сервисы, использованные в видео:
► Проверка в закрытых файлов для Google -
1 view
185
33
4 days ago 00:32:21 1
Неадекваты, ночные бабочки и изменщики. Кто катается ночью в такси бизнес-класса
7 days ago 00:00:59 1
Всегда проверяйте под кроватью
7 days ago 00:25:44 1
Обзор сигарет Максим красный и донской табак, сравнение с оригиналами и осмотр мешки табака!
7 days ago 00:55:22 1
Как написать РЕГГИ с нуля. Пишу трек и делюсь крутыми фишками по созданию Reaggae