Форум АНТИЧАТ

Форум АНТИЧАТ (https://forum.antichat.xyz/index.php)
-   PHP, PERL, MySQL, JavaScript (https://forum.antichat.xyz/forumdisplay.php?f=37)
-   -   Запрет индексации через .htaccess (https://forum.antichat.xyz/showthread.php?t=120971)

Велемир 17.05.2009 00:07

Запрет индексации через .htaccess
 
Как запретить индексирование отдельной папки или всех папок/файлов сразу ? Не хочу палить двиг на хосте,но также хочу сохранить возможность индексирования остальных,нужных мне папок.И ещё вопрос: если не стоит никаких мер против индексации поисковиков,то как быстро сработает мегаприём Index .of ? Спасибо.

Gifts 17.05.2009 00:55

Создать файл robots.txt в корне сайта, с содержимым:
Код:

User-agent : *
Disallow : /папка1
Disallow : /папка2


Велемир 17.05.2009 01:05

Зачем через него ? Я так только расположение админки укажу ))Слышал,что можно через .htaccess как-то (мод рерайт),но сам никогда такого не делал.Вообще,нужно закрыть для индексации несколько папок по желанию и файлов,содержащихся в них,но так,чтобы об этом не стало известно ни гуглу,ни посетителям )

Pashkela 17.05.2009 01:06

Любая папка, доступная из веба - доступна и гуглу. А роботсы.тхт - это ты правильно подметил, гы

Nightmarе 17.05.2009 01:40

Цитата:

Сообщение от Pashkela
Любая папка, доступная из веба - доступна и гуглу. А роботсы.тхт - это ты правильно подметил, гы

А если сгенерировать типа "h9DJLTe2niEaP9zs0vU7KW" всё равно найдёт?

Велемир 17.05.2009 02:13

Да... я раньше думал,что алиасы спасут.Но блин,почему тогда на других сайтах в роботс.тхт не указывается папка админки,но и другие поисковики не видят её =_=.Проверено на друпале и жумле)

ЗЫ: Pashkela,с тобой я не согласен))Решение есть...

Велемир 17.05.2009 02:16

Цитата:

Сообщение от Pashkela
Любая папка, доступная из веба - доступна и гуглу.


Я не совсем тебя понял: Что ты имел ввиду в плане *доступная из веба* ? Доступно его содержимое или же существование известно ?(Знание о существовании папки на сервере - тоже часть доступа )) ).Если что,то я имел в виду предотвращение узнавания существования папки или файла)

Gifts 17.05.2009 02:52

Велемир Гугл индексирует страницу, только если где-то есть ссылка на эту страницу. Следовательно - найдите эти ссылки и прибейте их, добавьте роботс.тхт на время очередной индексации чтобы убрать админку из поиска. Потом роботс можно удалить

Через хтаксес можно заблокировать гугло бота на определенные страницы, но зачем?

Велемир 17.05.2009 03:06

ахахах,вот не знал)))То бишь должна быть где-то ссылка на странице(неважно какая) на админку,чтобы её спалить ?))А как узнать время индексации ? Всмысле когда там гугл начнёт мучиться,бегая по сайту? А то я не пойму,когда роботс удалять)

$now 17.05.2009 03:11

Цитата:

Сообщение от Велемир
ахахах,вот не знал)))То бишь должна быть где-то ссылка на странице(неважно какая) на админку,чтобы её спалить ?))А как узнать время индексации ? Всмысле когда там гугл начнёт мучиться,бегая по сайту? А то я не пойму,когда роботс удалять)

Ты можеш легко понять проиндексирован ли твой сайт введя в гугл его адрес.
Другое дело что если гугл его не забанит то через какоето время он вернется чтобы проиндексировать повторно.


Время: 21:27