Озадачившись созданием правильного robots.txt для своего блога и соответственно для всех остальных блогов, что используют движок Wordpress, я стал серфить SEO блогосферу в поисках заветных правильных строчек. Каково было мое разочарование, когда я не нашел то, чего искал. Точнее информации про создание robots.txt в сеошной блогосфере просто уйма, но каждый источник отличается от других. Одни утверждают одно, другие – другое, а в комментариях что творится, даже страшно представить.

Знаете поговорку «Хочешь сделать что-то хорошо, сделай это сам»?. Пришлось последовать ей и направится прямиком к первоисточнику.

Все оказалось не так уж и сложно.

(далее…)