Robots.txt Tester

Аватар пользователя igorstrong
Не в сети
Последнее посещение: 29 недель 1 день назад
Зарегистрирован: 2015-04-27
Сообщения:

Данный сервис предназначен для тестирования работы файла роботс.txt. При этом конкретно можно проверить позволяет ли Googlebot сканировать определенные страницы сайта. Доступ к данному инструменту можно получить в панели вебмастеров Google. При этом в разделе "Сканирование" необходимо выбрать заданный инструмент, а затем в текстовом редакторе внести изменения, таким образом проверив правильность добавления в файл или синтаксис. При этом целесообразно также посмотреть код заданного файла, после чего можно будет обнаружить синтаксические и логические ошибки. После этого необходимо нажать кнопку "Проверить", чтобы узнать заблокирован или нет прописанный урл.

Аватар пользователя tornado5
Не в сети
Последнее посещение: 5 недель 1 день назад
Зарегистрирован: 2014-06-24
Сообщения:
У Яндекса тоже есть подобный

У Яндекса тоже есть подобный сервис, но, конечно, инструментарий данного ресурса намного обширнее, и он, действительно позволяет взглянуть на файл Robots.txt, так сказать, со всех сторон. Главное в этом файле не закрыть доступ робота к важным разделам сайта.

Аватар пользователя Mefidze
Не в сети
Последнее посещение: 5 недель 5 дней назад
Зарегистрирован: 2014-06-03
Сообщения:
Сервис однозначно очень

Сервис однозначно очень хороший и полезный. Впрочем как и все продукты от Google. Радует то, что в режиме практически реального времени можно вносить правки в файл и при этом сразу же смотреть, как на них отреагирует поисковый робот. По-моему это здорово!

Аватар пользователя dollyleony32
Не в сети
Последнее посещение: 6 недель 5 дней назад
Зарегистрирован: 2014-04-18
Сообщения:
Думаю, что такой инструмент

Думаю, что такой инструмент для продвинутых веб-мастеров, а не для начинающих. Я пыталась разобраться в нем, вроде интерфейс понятный, а вот вносить изменения - в этом я не разобралась. Так что прежде чем им пользоваться, лучше сначала проштудировать статьи с инструкциями. У Яндекс тоже есть аналогичный инструмент, но с Google изначально проще обучаться.