21:38
Запрет индексации разделов сайта |
| Часто бывает нужно что бы некоторые страницы сайта не присутствовали в индексе поисковиков. В основном это служебные страницы - админка, страницы входа и регистрации, профили пользователей. Бывает полезно исключить из индекса ссылки на RSS фиды и части страницы с рекламой. Что бы закрыть папку или файл сайта нужно прописать в файле роботс что то вроде этого: User-agent: * Disallow: /banners/ #запрещена индексация папки Disallow: /admin.php #запрет индексации страницы Disallow: /sexphoto.jpg #запрет индексации файла Но учтите, файл роботс могут посмотреть все. И если у вас имеются какие то секретные файлы, то без дополнительной защиты они будут доступны любому человеку. Закрыть от индексации отдельную страницу можно прописав в шапке сайта, между <head> и </head> вот такой мета-тег: <meta name="robots" content="noindex, nofollow"> noindex - запрещает роботу индексировать контент nofollow - запрет переходить по ссылкам на странице Но это не значить что робот не будет сканировать документ и смотреть куда ведут ссылки. На мой взгляд практически бесполезный атрибут тега <a>, rel="nofollow". По ссылке робот ходит и все прекрасно индексирует. А нужен рел-нофолов, что бы запрещать передачу веса тИЦ и PR странице на которую ведет ссылка. При чем вес не сохраняется, а просто сгорает. Может пригодиться для комментариев, как борьба со спамом. Тег <noindex> позволяет запретить индексирование части контента на странице, и поддерживается только Яндексом. Что бы код оставался валидным можно поставить этот тег такого вида: <!--noindex-->. Закрывающийся тег <!--/noindex--> обязателен! Если забыть проставить его, вся остальная честь страницы не попадет в индекс Яндекса.Вебмастера особо не жалуют это тег, хотя сам Яндекс в своих службах его успешно применяет.  noindex.Делайте выводы. |
|
С уважением admin Возможно вас заинтересуют эти материалы: |
Пошаговое руководство к действию.
