Минусы платформы Blogspot

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://seoinsomnia.blogspot.com/feeds/posts/default?orderby=UPDATED

Вот такое уродство обнаружил сегодня в своем robots.txt в своем блоге SeoInsomnia - разумеется с этим нужно бороться. Сейчас занимаюсь вебсерфингом в поисках хорошего\правильного robots.txt для платформы Blogspot. Сейчас возникла такая идея, возьму чей нибудь хороший блог и так же к URL пропишу \robots.txt

Странно, либо я чего то не понимаю, либо у всей 10ки топ русских блогов в роботс прописано тоже самое что и у меня.

Одним из минусов Blogspot, так же является ограничение на размещение медиа файлов, т.е. когда вы загрузите в свои статьи более 1гб фотографий, придется докупать хостинговое пространство.

Так же явным минусом является ублюдская индексация яндексом, а он явно не особо то хочет индексировать блогспот.

Выяснилось что это структура указанная в начале поста является верной Оо

Кстати если юзать персонализированные теги для роботс.ткст заголовков то можно во первых закрыть блог от дублированного контента, во вторых каждую статью можно будет настраивать персонально, шиииииииииикаааааааааааааарно. Настройка blogspot оказалась не такой легкой как хотелось бы, но чую - это принесет еще свои плоды.