Че не так с robots.txt ?

Человеки гляньте шо не так с этим блядским роботекстом , решил старые блоги до ума довести (там вообще дефолтовый какой то был из пары строк)ну я его поменял на вот эту х*уню - итог в гугле десяток страниц осталось , в яше одна главная и цука не хера не востанавливается
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: ****.net

Sitemap: http://www.****.net/sitemap.xml

Ну если у тебя реврайтов нет, то в индексе остануться только морда, таги и категории.

Как по мне так иногда лучше без роботс или с дефолтным, чем с таким нагромождением.
А что для вордпресса в идеале надо оставить в индексе?

больше двух сотен постов есть

Vyacheslav писал:

Как по мне так иногда лучше без роботс или с дефолтным, чем с таким нагромождением. А что для вордпресса в идеале надо оставить в индексе?

Да отож бля подсмотрел у модных блогов , думаю пилять у людей башка большой значит умный ну захерачил
думал оно только мусор из выдачи поубирает а оно пля вот такую хрен ко всему подряд лепит даже к постам
ТУТ БЛЯ НАЗВАНИЕ ПОСТА потом
ввв.домен.нет/?p=613 Описание веб-страницы недоступно из-за ограничений в файле robots.txt. Подробнее...

в идеале хотелось бы одни посты оставить ))

Последний раз редактировалось: despero (26/09/12 в 09:56), всего редактировалось 1 раз

Код:

Disallow: /*?* Disallow: /*?

и как ты себе это представляешь ?

http://robotstxt.org.ru/

по простому:
Disallow - запрещать
Allow - позволять

что хочешь, то и собери.

Semen_ssr писал:

Код: Disallow: /*?* Disallow: /*? и как ты себе это представляешь ?

подозревал что может выкосить все где будет знак вопроса но какой то у мник выложил как бы идеальный образец роботекста ну я и поверил

все разобрался мать его всем спасибо

despero писал:

подозревал что может выкосить все где будет знак вопроса

Ты лучше на звёзды внимание обращай

та я думаю вообще больше не заморачиваться пусть гугля че хочет то и жрет
какая разница что за страница в выдаче будет висеть , главное что бы висела , да и не думаю что это кардинально что то меняет видел оптимизированные по всем правилам блоги с посещаемостью сто уников , так помню на моем первом корявеньком блоге на блогспоте сотни три за день набегало

во-во. Больше стоит переживать, когда гугль бот НЕ заходит туда, куда надо, чем заходит туда, куда не надо

Гугл изначально пытается сожрать все что есть, а уж потом пытается выкинуть

зачем на блоги роботс?
гугл и так прекрасно знает вп как свои 5 пальцев, и в выдаче только тематические страницы...

нах городить велосипед?

Sergeyka писал:

нах городить велосипед?

и изобретать огород

велосипедить огород

Цитата:

зачем на блоги роботс? гугл и так прекрасно знает вп как свои 5 пальцев, и в выдаче только тематические страницы...

да блин начитался всякой поебени а дальше как в анкдоте
сидит мужик и причитает ну нахера.... ну нахера я их позвал .. лом то к земле примерз

despero: ну вот и удали его нахуй и все, и спи спокойно