Все о создании и продвижении сайта. Заработок в интернете Голосов: 1 Адрес блога: http://afblog.ru/ Добавлен: 2013-03-14 19:37:47

Robots.txt – реальный помощник при оптимизации сайта

2013-10-06 08:38:19 (читать в оригинале)

Сегодня я вам покажу, как использовать файл robots.txt. Но для начала давайте разберемся для чего, собственно, нужен файл robots.txt? Файл robots.txt предназначен для того, чтобы указать поисковым работам поисковых систем (таких как Yandex, Rambler, Google, AltaVista и пр. ) какие файлы и папки необходимо запретить …