Запрет индексации конкретной динамической страницы
Например, Вам нужно, чтобы конкретная страница Вашего сайта была закрыта для индексации поисковых систем, таких как Google, Яндекс и т.д. Запрет индексации файла Запрет индексации папки (директории) Запрет индексации всего сайта Запрет индексации сайта роботом Google и/или Яндекс Запрет от индексации конкретной динамической страницы Вы легко можете произвести изменения в robots.txt: Запрет индексации файла User-agent: * # для всех поисковиков Disallow: /file.html Тем самым вы запретили всем поисковикам индексировать файл (страницу) file.html . Запрет индексации папки (директории) User-agent: * Disallow: /pictures/ Тем самым вы запретили всем поисковикам индексировать папку pictures . Запрет индексации всего сайта User-agent: * Disallow: / Данные примеры запрещают индексировать страницы (папки) всем сайтам. Вы также можете запретить индексировать страницы (сайт) каком-то конкретному поисковику. Например: Запрет индексации сайта