Как можно запретить папку форума к индексации?

Milkivey

Пользователь
Регистрация
28.03.13
Сообщения
68
Реакции
1
Баллы
3
Знает ли Вы как можно скрыть папку от индексации кроме как вписать в robots.txt и если знаете то как это сделать?
 

Mister1

Пользователь
Регистрация
02.03.13
Сообщения
234
Реакции
242
Баллы
28
Адрес
localhost
Знает ли Вы как можно скрыть папку от индексации кроме как вписать в robots.txt и если знаете то как это сделать?

Можно. Нужно в той папке создать файл .htaccess (поставить права CHMOD 444) с таким содержимым:
Код:
SetEnvIfNoCase User-Agent "^Yandex" search_bot
SetEnvIfNoCase User-Agent "^Yahoo" search_bot
SetEnvIfNoCase User-Agent "^igdeSpyder" search_bot
SetEnvIfNoCase User-Agent "^Robot" search_bot
SetEnvIfNoCase User-Agent "^Googlebot" search_bot
SetEnvIfNoCase User-Agent "^msnbot" search_bot
SetEnvIfNoCase User-Agent "^Aport" search_bot
SetEnvIfNoCase User-Agent "^Mail" search_bot
SetEnvIfNoCase User-Agent "^bot" search_bot
SetEnvIfNoCase User-Agent "^spider" search_bot
SetEnvIfNoCase User-Agent "^php" search_bot
SetEnvIfNoCase User-Agent "^Parser" search_bot
Order Allow,Deny
Allow from all
Deny from env=search_bot
 

Milkivey

Пользователь
Регистрация
28.03.13
Сообщения
68
Реакции
1
Баллы
3
Можно. Нужно в той папке создать файл .htaccess (поставить права CHMOD 444) с таким содержимым:
Код:
SetEnvIfNoCase User-Agent "^Yandex" search_bot
SetEnvIfNoCase User-Agent "^Yahoo" search_bot
SetEnvIfNoCase User-Agent "^igdeSpyder" search_bot
SetEnvIfNoCase User-Agent "^Robot" search_bot
SetEnvIfNoCase User-Agent "^Googlebot" search_bot
SetEnvIfNoCase User-Agent "^msnbot" search_bot
SetEnvIfNoCase User-Agent "^Aport" search_bot
SetEnvIfNoCase User-Agent "^Mail" search_bot
SetEnvIfNoCase User-Agent "^bot" search_bot
SetEnvIfNoCase User-Agent "^spider" search_bot
SetEnvIfNoCase User-Agent "^php" search_bot
SetEnvIfNoCase User-Agent "^Parser" search_bot
Order Allow,Deny
Allow from all
Deny from env=search_bot

Спасибо, но Вы так делали? И действительно работает на наше время, то читал что яндекс начал игнорировать некоторые такие файлы и все-равно индексирует?
 

Mister1

Пользователь
Регистрация
02.03.13
Сообщения
234
Реакции
242
Баллы
28
Адрес
localhost
Спасибо, но Вы так делали? И действительно работает на наше время, то читал что яндекс начал игнорировать некоторые такие файлы и все-равно индексирует?

Делал. Как по вашему скрыть админку от поисковиков? В robots.txt нет смысла прописывать. C Яндексом все норм.
 
Последнее редактирование:

Milkivey

Пользователь
Регистрация
28.03.13
Сообщения
68
Реакции
1
Баллы
3
Делал. Как по вашему скрыть админку от поисковиков? В robots.txt нет смысла прописывать. C Яндексом все норм.

Спасибо Вам большое, то не видел бы смысла прописывать адинку и модераторскую папки в roobots.txt, много информации перерыл и ничего не нашел, были только старые темы.
 

Статистика форума

Темы
200.635
Сообщения
380.523
Пользователи
327.876
Новый пользователь
pm1199
Сверху Снизу