Накануне robots.txt отметил свой юбилей. Вот уже два десятилетия подряд вебмастера используют этот файл для частичного управления индексированием сайта поисковыми роботами. И не представляют, как бы без него обходились. Давайте окунемся в историю.
Поделитесь этой записью или добавьте в закладки
Категории:
Также рекомендуем почитать:
» Конференции декабря: завершаем сезон: Мы подготовили для вас уже традиционную подборку мероприятий. В этот раз на декабрь. Несмотря на предно...
» Платон Щукин о правилах составления robots.txt: А вы сталкивались с такой ситуацией, когда страницы, закрытые от поисковых роботов, всё же попадали в р...
» Поспевайте за обновлениями Телдери!: Жаркое лето — пора отпусков. Но Телдери круглый год продолжает развиваться и совершенствоваться! ...
» Новая партнерская программа -"Экспедиция": ...
» Вновь запущена партнерская программа "Космические Баталии": ...
» Платон Щукин о правилах составления robots.txt: А вы сталкивались с такой ситуацией, когда страницы, закрытые от поисковых роботов, всё же попадали в р...
» Поспевайте за обновлениями Телдери!: Жаркое лето — пора отпусков. Но Телдери круглый год продолжает развиваться и совершенствоваться! ...
» Новая партнерская программа -"Экспедиция": ...
» Вновь запущена партнерская программа "Космические Баталии": ...