Продвижение сайтов и оптимизация под поисковые системы Яндекс и Google в Москве и регионах
Телефон в Москве:
8 (495) 255-25-67
8 (495) 255-25-67 info@dirocket.ru

Обновленный файл robots.txt

В нарушение своего руководства для веб-мастеров, было недавно замечено, что Google индексировал свои результаты поиска.

До обновления robots.txt, результаты выдачи выглядели следующим образом:

robots_google

Согласно разработанному компанией Google руководству, robots.txt предназначается для того, чтобы предупредить сканирование тех страниц поисковой выдачи, которые не интересны для пользователя.

Произошедшее, как отметили в Google – сбой, связанный с несколькими слешами в веб-адресах, а также тем, что разработчики сделали изменение файла robots.txt в google.com/robots.txt.

После внесённых исправлений, поисковая выдача выглядит так:

robots_google_2

Вернуться в список новостей
Обновленный файл robots.txt
Дата публикации:
15.09.2014
Теги новости:
Смотрите также