Aidasteh.ru

Ай-да
СТИХ!
  • Slides
  • Slides
  • Slides
  • Slides
  • Slides
  • Slides
  • группа ХОББИ
  • Счётчик посетителей

  • Хочу Всё Знать. Полезные Советы
  • vyajem-u-kroum-camu
  • Правильный ROBOTS.txt для WordPress и для Yandex и Google

    20 июля, 2013



    Правильный  ROBOTS.txt  для WordPress  и  для  Yandex  и  Google.

    Когда я делал сайт на локальном сервере то файл ROBOTS.txt  у меня выглядел так:

    User-agent: *

    Disallow: /wp-login.php

    Disallow: /wp-register.php

    Disallow: /webstat/

    Disallow: /feed/

    Disallow: /trackback

    Disallow: */trackback

    Disallow: */feed

    Disallow: */comments

    Disallow: /*?*

    Disallow: /*?

    Disallow: /category/*/*

    Disallow: /wp-content/plugins

    Disallow: /wp-content/themes

    Disallow: /wp-admin/

    Disallow: /wp-includes/

    Disallow: /sxd

    Disallow: /comments

     

    User-agent: Yandex

    Disallow: /wp-login.php

    Disallow: /wp-register.php

    Disallow: /webstat/

    Disallow: /feed/

    Disallow: /trackback

    Disallow: */trackback

    Disallow: */feed

    Disallow: */comments

    Disallow: /*?*

    Disallow: /*?

    Disallow: /category/*/*

    Disallow: /wp-content/plugins

    Disallow: /wp-content/themes

    Disallow: /wp-admin/

    Disallow: /wp-includes/

    Disallow: /sxd

    Disallow: /comments

    Allow: /wp-content/uploads/

    Host: aidasteh.ru

     

    Sitemap: http://aidasteh.ru/sitemap.xml

    Sitemap: http://aidasteh.ru/sitemap.xml.gz

    Работало всё хорошо, но когда я перенёс свой сайт на хостинг, зарегестрировал его в Яндексе и Гугле, то сайт не индексировался. Я нашёл ошибку в файле ROBOTS.txt  . Надо просто удалить строчки :

    Disallow: /*?*

    Disallow: /*?

    Которые запрещают поисковикам просматривать страницы сайта. Новый файл ROBOTS.txt  должен выглядеть следующим образом:

    User-agent: *

    Disallow: /cgi-bin/

    Disallow: /wp-login.php

    Disallow: /wp-register.php

    Disallow: /webstat/

    Disallow: /feed/

    Disallow: /trackback

    Disallow: */trackback

    Disallow: */feed

    Disallow: */comments

    Disallow: /?s=

    Disallow: /wp-content/cache

    Disallow: /category/*/*

    Disallow: /wp-content/plugins

    Disallow: /wp-content/themes

    Disallow: /wp-admin/

    Disallow: /wp-includes/

    Disallow: /sxd

    Disallow: /comments

     

    User-agent: Yandex

    Disallow: /cgi-bin/

    Disallow: /wp-login.php

    Disallow: /wp-register.php

    Disallow: /webstat/

    Disallow: /feed/

    Disallow: /trackback

    Disallow: */trackback

    Disallow: */feed

    Disallow: */comments

    Disallow: /?s=

    Disallow: /wp-content/cache

    Disallow: /category/*/*

    Disallow: /wp-content/plugins

    Disallow: /wp-content/themes

    Disallow: /wp-admin/

    Disallow: /wp-includes/

    Disallow: /sxd

    Disallow: /comments

    Allow: /wp-content/uploads/

    Host: aida.ru

     

    Sitemap: http://aida.ru/sitemap.xml

    Sitemap: http://aida.ru/sitemap.xml.gz

    Не забудьте поменять везде надпись  aida.ru  на название своего сайта.

    Желаю удачи.

    В знак благодарности
    нажмите на ре-му. С уважением, Юрий Москвин.
    При использовании материалов сайта ссылка на aidasteh.ru обязательна!
    Ссылка на данный материал здесь.

    Перейди на главную и почитайте очень полезные советы, кулинарные рецепты, стихи, поздравления в стихах.

    Читай очень полезные советы:

    Как полностью удалить Agnitum Outpost Firewall
    Как правильно завести кошелёк в WebMoney
    Игры для «Андроид 2, 3, 4»
    Игры для FUNC Master-01
    С Днём Рождения!
    Если Вас бросила девушка
    как бросить пить

    Google Buzz Vkontakte Facebook Twitter Мой мир Livejournal Google Bookmarks I.ua Закладки Yandex Ru-marks



    Статья была полезна? Ретвитим, добавляем в соц. закладки. Спасибо!

    На главной странице Вы найдёте детские видео-книжки в стихах, полезные советы, которые пригодятся всем, самые вкусные рецепты, поздравления в стихах, колыбельную песенку, стихи на разные темы и многое другое.

    Главная