ExBB Community :: Версия для печати :: текстовая версия форума- закрывать ли ее от индексации? [2]

16. nikk - 22 июля 2011 — 19:59 - перейти к сообщению

BON пишет:

nikk, а как вы так нашли у себя разные дареса которые ведут на один и тот же материал?

Да это не я нашел- это мне нашли.. а как, я даже не скажу.

17. BON - 22 июля 2011 — 20:03 - перейти к сообщению

Nikela, скажите, у вас на форуме мод перелинковки стоит?

18. - 22 июля 2011 — 20:03 - перейти к сообщению

nikk, нет, не игнорирует. Проверено. А вот яндекс все равно индексирует все, если только не получит по шапке 403-ей или ей подобной ошибкой.

Это все сражение с ветряными мельницами, лучше б, ИМХО, избавились от postid в адресе, было больше толку.

На примере форума nikk-a:

CODE:

http://militaryforum.ru/topic.php?forum=7&topic=40&postid=1311186307
http://militaryforum.ru/topic.php?forum=7&topic=40&postid=1311219559
http://militaryforum.ru/topic.php?forum=7&topic=40&postid=1311220417

...

вот вам 10-15 дублей одной и той же страницы.

Либо закрывать от индексирования все страницы с postid, либо (что лучше, ИМХО), поменять структуру адресации.

Например, для тех же страниц, вместо

CODE:

http://militaryforum.ru/topic.php?forum=7&topic=40&postid=1311186307#1311186307
http://militaryforum.ru/topic.php?forum=7&topic=40&postid=1311219559#1311219559
http://militaryforum.ru/topic.php?forum=7&topic=40&postid=1311220417#1311220417

верны адреса

CODE:

http://militaryforum.ru/topic.php?forum=7&topic=40&p=2#1311186307
http://militaryforum.ru/topic.php?forum=7&topic=40&p=2#1311219559
http://militaryforum.ru/topic.php?forum=7&topic=40&p=2#1311220417

Но зато для поисковика - это уже одна страница, а не 10 друг друга дублирующих!

19. BON - 22 июля 2011 — 20:05 - перейти к сообщению

Zeg, как вы дубли находите? мне просто интересно сколько у меня косячных страниц

20. Nikela - 22 июля 2011 — 20:07 - перейти к сообщению

BON пишет:

Nikela, скажите, у вас на форуме мод перелинковки стоит?

это что такое? видимо нет Однако

igrok54 пишет:

на Джумле у Вас, Nikela, по Вашему мнению, не уточняя, сколько примерно постов?

материалов-статей где-то около 500, но Дж тоже дофига дублей делает

Кстати, трафик у меня из Гугла превышает значительно Яшу, где-то на 50%.

21. BON - 22 июля 2011 — 20:08 - перейти к сообщению

Nikela пишет:

это что такое? видимо нет Однако

понятно. Просто у меня есть такое предположение, что у ника кучастраниц из-за мода перелинковки. вот

22. igrok54 - 22 июля 2011 — 20:10 - перейти к сообщению

Nikela, имел в виду на сайте, в Джумле, без форума, примерно...

Zeg пишет:

http://militaryforum.ru/topic.ph...ostid=1311186307
http://militaryforum.ru/topic.ph...ostid=1311219559
http://militaryforum.ru/topic.ph...ostid=1311220417
...

вот вам 10-15 дублей одной и той же страницы.

Вот-вот, в самую точку!

Nikela пишет:

Кстати, траффик у меня из Гугла превышает значительно Яшу, где-то на 50%.

Это явный признак того, что Яндекс за что-то Ваш сайт недолюбливает...

23. - 22 июля 2011 — 20:14 - перейти к сообщению

BON, никак. Просто привел пример, как мы при нынешней адресации плодим сотни страниц с разными адресами, но одинаковым содержимым. Потом не нужно удивляться, что роботы отбраковывают 60-70% страниц, они ведь идентичны!

24. igrok54 - 22 июля 2011 — 20:19 - перейти к сообщению

Zeg пишет:

Просто привел пример, как мы при нынешней адресации плодим сотни страниц с разными адресами, но одинаковым содержимым. Потом не нужно удивляться, что роботы отбраковывают 60-70% страниц, они ведь идентичны!

Одна страница о 10 постах получается имеет не менее 11 разных URL-ов, т.е. более 90% - дубли.
Плюс по результатам отбраковки еще и на сайт санкции наложат в конце-концов...

25. - 22 июля 2011 — 20:21 - перейти к сообщению

BON пишет:

Просто у меня есть такое предположение, что у ника кучастраниц из-за мода перелинковки.

Нет. Мод перелинковки новых страниц не порождает.

26. BON - 22 июля 2011 — 20:27 - перейти к сообщению

Zeg, я как сделаю приобретение этого мода проверим.

igrok54 пишет:

У Nikk : 15 500/480

Получается у ника всего в выдаче 480 страниц? Тогда как получается что у меня материала на форуме меньше, а выдача больше чем у ника. у меня почти 700 страниц. Как это понимать?
Давайте выяснять тогда из-за чего появляется такой косяк

27. - 22 июля 2011 — 20:31 - перейти к сообщению

igrok54 пишет:

Плюс по результатам отбраковки еще и на сайт санкции наложат в конце-концов...

Судя по моим экспериментам, такое часто бывает. На своем форуме, когда из индекса выпало 70% страниц (из примерно 4500 осталось около 800), запретил индексацию всех страниц с postid, оставил только вида

CODE:

/forum/topic.php?forum=Х&topic=У
/forum/topic.php?forum=Х&topic=У&p=2
/forum/topic.php?forum=Х&topic=У&p=3
/forum/topic.php?forum=Х&topic=У&p=4
/forum/topic.php?forum=Х&topic=У&p=5

Исключил также первые страницы, т.е. /forum/topic.php?forum=Х&topic=У&p=1 , т.к. это тоже самое, что /forum/topic.php?forum=Х&topic=У. Подправил код, чтобы ссылки на них даже не генерились, а для тех, что уже в индексе добавил пару строк в .htaccess с 301-м редиректом.

Само собой, что таких страниц (с postid) меньше в 10-15 раз (завиит от кол-ва сообщений на одной странице). Соответственно, индекс того же Яндекса сначала просел сильно (до 350-400 страниц), а теперь уже два месяца подряд растет стабильно, дойдя до 1200-1300 страниц.

Вот потому и нужно раз и навсегда, ИМХО, избавиться от параметра postid в адресе и определиться (тут уже сам решит), закрывать ли от индексации печатную версию форума. Например, у меня Гугл в разы активнее и охотнее в индекс забирает именно печатную версию. Вероятно из-за того, что там меньше лишнего мусора (верстки, часто невалидного кода тем и т.п.).

28. Nikela - 22 июля 2011 — 20:35 - перейти к сообщению

Zeg, так вы избавились в своем коде от postid? Улыбка

29. BON - 22 июля 2011 — 20:36 - перейти к сообщению

Zeg пишет:

Например, у меня Гугл в разы активнее и охотнее в индекс забирает именно печатную версию. Вероятно из-за того, что там меньше лишнего мусора (верстки, часто невалидного кода тем и т.п.).

именно. У меня кстати страницу печати особенно яндекс кушает в первую очередь, а потом уже всё остальное. Но когда просканирует нормальную, то кидает страницу печати как сохраненую копию и всё. Не на что по крайней мере у меня не влияет эта страница. Делал как то эксперимент, закрывал страницу печати, так резко сократилось количество страниц в выдаче.

30. - 22 июля 2011 — 20:37 - перейти к сообщению

Nikela, в коде - никак, а очень хотелось бы. Закрыл пока в robots.txt для эксперимента, наблюдаю:

CODE:

Disallow: /forum/topic.php?forum=*&topic=*&postid=