И на старуху бывает проруха. 🙂

Вроде ж и не новичок уже…
Вроде бы уже довольно много знаю…

Речь идёт об ошибке именно в этом блоге «Палю тему». Вижу в панели Яндекс.вебмастер, что робот Яши индексирует те страницы, которые я запрещала в файле роботс.тхт. Ну что ж такое? В результате получается, что Яндекс выдает в поисковой выдаче кучу ненужных страниц. Подозреваю, что совсем скоро за это робот может мне надавать а-та-та.

Начинаю проверять:
Содержимое robots.txt — всё правильно. Запрещено индексировать страницы с метками и категориями (и ещё дубликаты страниц). А робот — всё равно индексирует, выдаёт в поиске. хм… Странно.

Смотрю: что Яндекс видит в файле роботс.тхт?.. Странно:
Он вместо полутора десятка запретов Disallow видит следующее:

User-agent: *
Disallow:

Sitemap: http://paljutemu.ru/sitemap.xml.gz

Начинаю проверять более тщательно. Закачиваю файл несколько раз. Скачиваю. Открываю… Всё равно: вместо нужных директив — почти пустой текст.

А что видит Гугл? То же самое! Да ну что ж такое, в самом то деле?

ы! Ошибка оказалась из разряда «Потупила сама».
Я файл обозвала robot.txt. То есть пропустила в конце названия файла буковку s.

Как только я исправила название на robots.txt — Яндекс и Гугл сразу увидели исправленный полный файл со всеми командами.

Вот такая оказалась мелкая, но досадная ошибка.

О_о

регистрация доменов
домен RU - 99 руб
домен РФ - 99 руб
www.

Тут была реклама Google Adsense. Почему я её убрала?

Не забывайте подписываться на rss и/или твиттер блога. Нажимайте на лайки.  Сделала и веду больше 15 сайтов. Точная цифра - всё время меняется. Подробнее - читайте на странице "Мои проекты". DivaDii (ДиваДии)


.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Сколько будет? *



DivaDii, aka Надежда Лях на Google+  Вверх
Плюсани!

Интересная тема!

Записи по месяцам:

Подпишись!


Читать Палю Тему в Твиттере




Введите Ваш email-адрес:



с помощью FeedBurner

Рассылки Subscribe.Ru
Лента "Палю тему"

Наш опрос:

Оцените свой опыт в сайтостроении

Результаты опроса

Загрузка ... Загрузка ...

Цифирь: