Вы здесь

Robots.txt как закрыть доступ к папке боту?

SkyNetGroup
Аватар пользователя SkyNetGroup
Robots.txt как закрыть доступ к папке боту?

Всем привет. На сайте в корне находится одна HTML страница и папка со скриптом форума. Подскажите как сделать так чтобы боты индексировали только страницу в корне, а форум не трогали?

8fank77
Индекс.

Приветствую всех добрых и отзывчивых посетителей данного форума. Автор, а какого типа у вас сайт? Ну ладно, сейчас это особо роли не играет. Если честно, то сделать так, чтобы файл, указанный вами выше, не индексировался вам нужно прописать тег, который указал вам человек, который прокомментировал тему раньше меня. Удачи вам во всем.

tornado5
Аватар пользователя tornado5
Приветствую. Это сделать

Приветствую. Это сделать проще простого. Нужно в файле Robots.txt, который тоже должен лежать в корне сайта, сделать запись Disallow: /название_папки/. И тогда поисковые роботы не будут индексировать данную папку. Надеюсь, мой совет будет полезен для вас.

ingwarua53
Аватар пользователя ingwarua53
Грядущим правилом написания

Грядущим правилом написания верного файла robots считается не допущение попадания в индекс, а в последствии и поисковую выдачу, этих страничек, которые дублируют ведущее оглавление, что наиболее снижая уникальность контента в границах 1-го домена.

Добавить комментарий

Full HTML

  • Допустимые HTML-теги: <a> <iframe><i> <tr> <em> <u> <br> <p> <ul> <ol> <li> <hr> <img><strong><b>
  • Адреса страниц и электронной почты автоматически преобразуются в ссылки.
  • Строки и абзацы переносятся автоматически.
  • External links will be redirected to a page that tells the user that they are about to leave the site.

Реклама