31 июля Интернет
Во времена алгоритма Google Panda бывают случаи, когда мы хотим остановить бота Google или в этом случае все боты, индексирующие контент из определенной папки. Следующая команда ниже также запрещает пользователям просматривать файлы в папке и распечатка содержимого папки на сайте. Для начала нам нужно создать файл в блокноте или в вашем любимом редакторе HTML. Назовите это .htaccess.
.Htaccess
Затем в файле добавьте следующие строки текста.
Просто сохраните этот файл / htaccess в папку на вашем веб-сайте, которую вы не хотите индексировать. Посмотрите на предыдущую статью о том, как удалить страницы из индекса Google.
Для тестирования просто попробуйте зайти в папку, чтобы просмотреть содержимое, или на 100% быть уверенным, что Google не может просмотреть эту папку и выполнить поиск Google из инструментов для веб-мастеров.