Да это не я нашел- это мне нашли.. а как, я даже не скажу.

Nikela, скажите, у вас на форуме мод перелинковки стоит?

nikk, нет, не игнорирует. Проверено. А вот яндекс все равно индексирует все, если только не получит по шапке 403-ей или ей подобной ошибкой.

Это все сражение с ветряными мельницами, лучше б, ИМХО, избавились от postid в адресе, было больше толку.

На примере форума nikk-a:


...

вот вам 10-15 дублей одной и той же страницы.

Либо закрывать от индексирования все страницы с postid, либо (что лучше, ИМХО), поменять структуру адресации.

Например, для тех же страниц, вместо



верны адреса



Но зато для поисковика - это уже одна страница, а не 10 друг друга дублирующих!

Zeg, как вы дубли находите? мне просто интересно сколько у меня косячных страниц

это что такое? видимо нет


материалов-статей где-то около 500, но Дж тоже дофига дублей делает

Кстати, трафик у меня из Гугла превышает значительно Яшу, где-то на 50%.

понятно. Просто у меня есть такое предположение, что у ника кучастраниц из-за мода перелинковки. вот

Nikela, имел в виду на сайте, в Джумле, без форума, примерно...

Вот-вот, в самую точку!


Это явный признак того, что Яндекс за что-то Ваш сайт недолюбливает...

BON, никак. Просто привел пример, как мы при нынешней адресации плодим сотни страниц с разными адресами, но одинаковым содержимым. Потом не нужно удивляться, что роботы отбраковывают 60-70% страниц, они ведь идентичны!

Одна страница о 10 постах получается имеет не менее 11 разных URL-ов, т.е. более 90% - дубли.
Плюс по результатам отбраковки еще и на сайт санкции наложат в конце-концов...

Нет. Мод перелинковки новых страниц не порождает.

Zeg, я как сделаю приобретение этого мода проверим.

Получается у ника всего в выдаче 480 страниц? Тогда как получается что у меня материала на форуме меньше, а выдача больше чем у ника. у меня почти 700 страниц. Как это понимать?
Давайте выяснять тогда из-за чего появляется такой косяк

Судя по моим экспериментам, такое часто бывает. На своем форуме, когда из индекса выпало 70% страниц (из примерно 4500 осталось около 800), запретил индексацию всех страниц с postid, оставил только вида



Исключил также первые страницы, т.е. /forum/topic.php?forum=Х&topic=У&p=1 , т.к. это тоже самое, что /forum/topic.php?forum=Х&topic=У. Подправил код, чтобы ссылки на них даже не генерились, а для тех, что уже в индексе добавил пару строк в .htaccess с 301-м редиректом.

Само собой, что таких страниц (с postid) меньше в 10-15 раз (завиит от кол-ва сообщений на одной странице). Соответственно, индекс того же Яндекса сначала просел сильно (до 350-400 страниц), а теперь уже два месяца подряд растет стабильно, дойдя до 1200-1300 страниц.

Вот потому и нужно раз и навсегда, ИМХО, избавиться от параметра postid в адресе и определиться (тут уже сам решит), закрывать ли от индексации печатную версию форума. Например, у меня Гугл в разы активнее и охотнее в индекс забирает именно печатную версию. Вероятно из-за того, что там меньше лишнего мусора (верстки, часто невалидного кода тем и т.п.).

Zeg, так вы избавились в своем коде от postid?

именно. У меня кстати страницу печати особенно яндекс кушает в первую очередь, а потом уже всё остальное. Но когда просканирует нормальную, то кидает страницу печати как сохраненую копию и всё. Не на что по крайней мере у меня не влияет эта страница. Делал как то эксперимент, закрывал страницу печати, так резко сократилось количество страниц в выдаче.

Nikela, в коде - никак, а очень хотелось бы. Закрыл пока в robots.txt для эксперимента, наблюдаю: