Еще момент пришел в голову серьезный.

У нас на сайтах с массой страниц примерно 50-100к инов ботов в сутки.
Было бы здорово, если для ботов ВООБЩЕ не переформировывать страницы при запросе.
Только для людей.
Это бы уменьшило загрузки серверов на много.
Особенно на мелких сайтах где трафика обычного ...

Пример:
эмбедед мовики. Их надо перерисовывать гораздо реже чем категории или список категорий.
Так же: теги, архивные страницы, арзивы тегов и архивы сечей, модели.

Т.е. если страницу морд надо перерисовывать довольно часто. ну там раз в час или раз в 6 часов (для маленьких сайтов). То страницы ...

Еще есть два момента для гугля:
1. если галеры внешние и ведут на хамстера, то многие по записи ставят:
свойдомен/видео/слаг/
и при клике на этом внутреннем видимо линке- человек и бот уходят на галеру расположенную на внешнем сайте.

Это не верно имхо идет подмена линков не нужная.

2. если галеры ...

darkover wrote: предлагаю нет тега - 404, нет категории 404, нет архива - 404, нет страницы - 404

100% поддерживаю! Их то нет реально и должно редиректить на 404! без вопросов.

считаю что для начала надо дописать присвоение параметра

par=78x78x7889
Как то так. Чтобы а) гугль понимал что это присвоение и параметр а не какие то цифери в имени урла, б) в адмике гугля можно будет этот параметр выделить как незначимый и убрать. счас гугль не понимает, что есть параметр в ...

Это все я так понял можно выразить так: ским как поставить - это ясно
Только добавить галочку типа "не считать в клики ботов"
Точнее считать только в строке spiders
все верно ?

ну да. Не считать клики ботов в ауты трейдеров.
Т.е. решить эту задачу не 100% скимом (не слать), а обычным скимом, но ...

Еще момент кот. может непонравится гуглю.
Я уже говорил лемону, что архив номер 100000000000
будет работать и грузить последний существующий архив. Сказали, что пофиксили.
Но.
а) архив номер dwfkhbsdfkhbsdf6546541skdfhbsdhf
будет так же грузить какой годно архив. Да в реврайтах можно указать грузить ...

вот скрипт который лепит к урлу код ротации


только вот незадачка. Этот метод не засчитывает все клики.
Поясняю. Эта ява срабатывает только тогда, если вся страничка загружена.
Пока страница грузится- клики считаться не будут.
Особенно весело если висят банера какого то экзокликса и они тупят и ...

Вот в чем вопрос
галера?56x784x87

гугль может и не понимать, что это параметр. В админке гугля нельзя указать как не значимый параметр.

Если бы было скажем:
галера?r=56x784x87

то другое дело. Такое понятно, что параметр. И такое гугль поймет. в админке можно укзаать параметр r незанчим! И вообще ...

Еще может быть в одном проблема.
Трафик ноу кукис и бот может стоять со 100% скимом и попадать на контент.
А обычный трафик со скимом и попадать и на трейд и на контент.

Гугль может воспринимать как обман бота.

Логично сделать не так.

Логично, чтобы было реализовано как в пульсе:
Трафик с ботов и ...