Одинаковые инструкции в robots.txt

[Вадим Костин]

Ребят, подскажите почему в данном файле robots.txt - прописаны 2 одинаковые инструкции как для всех ботов так и для яндекса. Разве одной инструкции для всех ботов не достаточно? Движок wordpress
Disallow:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: */comments
Disallow: */comment-page/
Disallow: /20*
Disallow: */page/*

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Disallow: /20*
Disallow: */page/*
Host: alter-zdrav.ru

Sitemap: http://alter-zdrav.ru/sitemap.xml
Sitemap: http://alter-zdrav.ru/sitemap.xml.gz

[romek]

Потому что для Яндекса всегда нужно прописывать отдельно, везде.

[Вадим Костин]

А для чего это делается, что Яндексу не хватает иструкции для всех ботов?

[Sky-fi]

А для чего это делается, что Яндексу не хватает иструкции для всех ботов?

По идее, должно хватать, но боги Яндекса обидчивы, и они не любят, когда их оставляют без внимания.

Ну а если честно, сам когда-то задумывался, зачем. Спустя какое-то время пришел к выводу, что незачем. Но так делать советуют гуру оптимизации, потому что якобы боты Яндекса могут пропустить общие директивы. Поэтому все стараются прописать отдельные директивы для Яндекса. Ну и в наборе правил для Яши еще прописывают обычно главное зеркало  сайта.

[Вадим Костин]

Спасибо, хорошее разьяснение!

[vold57]

Потому что для Яндекса всегда нужно прописывать отдельно, везде.

Сначала учиться самому, потом уже учить других. Яндекс помощь - Использование robots.txt

[romek]

Сначала учиться самому, потом уже учить других. Яндекс помощь - Использование robots.txt

Я смотрю Вы обиду затаили , а так по сути в моей ветке и не ответили 

[vold57]

Я смотрю Вы обиду затаили , а так по сути в моей ветке и не ответили 

Не туда смотрите.
По поводу моих вопросов в вашей теме, я вас наталкивал на мысль, что вы неправильно работаете с собранными данными и делаете неправильный выводы. Нельзя все советы сваливать в кучу и делать выбор только на основании того, что каких-то советов было больше.
Рекомендации, которые дают те или иные сеошники, сео-конторы, блогеры и т.д. имеют разный вес.

[romek]

Не туда смотрите.
По поводу моих вопросов в вашей теме, я вас наталкивал на мысль, что вы неправильно работаете с собранными данными и делаете неправильный выводы. Нельзя все советы сваливать в кучу и делать выбор только на основании того, что каких-то советов было больше.
Рекомендации, которые дают те или иные сеошники, сео-конторы, блогеры и т.д. имеют разный вес.

Вот, спасибо за адекватный ответ, только карму не обязательно было минусовать.

[vold57]

Вот, спасибо за адекватный ответ, только карму не обязательно было минусовать.

Да, необязательно. Но обсуждать это не стоит.