Согласен на 100%. Даже, сказал бы, для ОЧЕНЬ статичных сайтов. Либо сайтмап должен обновляться автоматически, даже не по крону, а одновременно с обновлением структуры сайта.

Сайтмап вообще зачастую больше вреда приносит, чем пользы. Если поисковик находит карту сайта, то после этого страницы сайта поисковик индексирует только те, что указаны в карте (соответственно она всегда должна быть актуальной), новые перестает находить, а если какие-то старые страницы удалены, перемещены (а в карте это не отражено) - поисковик ругается. Теряется динамичный подход поисковика к сайту.

Плюс такой момент - размер сайтмапа не должен превышать 200kb (в цифре могу ошибаться), а это не очень уж много для нормального сайта - пара тыщ страниц... Дальше начинаются проблемы с разделением сайтмапа на части...
В общем, поюзал я сайтмапы на своих сайтах и отказался от них.
ИМХО

Текст матов в студию.


Да, но разделение процесс не сложный и указываем генератору сайтмапа глубину просмотра чуть меньше, чтобы данные 5-тилетней давности не вносились в базу, плюч пользуемя генераторм, который понимает robots.txt, чтобы в карте не было мусора.


Он и новые тоже индексирует.

Карта сайта не помешает.
Но и без нее можно прожить.

Пинг и РСС будут получше карты.

M-A-X, вот:

Переход по URL не выполнен
При проверке нескольких URL из вашего файла Sitemap мы обнаружили, что некоторые URL перенаправляют на другие страницы. Мы советуем использовать в файле Sitemap URL-адреса, непосредственно указывающие на нужные страницы (цели перенаправления), а не перенаправляющие на другие URL

Ошибка HTTP: 302
URL:
http://www.habar.bsaa.info/topic...ostid=1288177061
Проблема обнаружена: 28.01.2011

На число не смотрите. Каждй раз когда робот заглядывает оно обновляется.
Уже большемесяца прошло а ни одной новой сслки в поисковике не обнаружилось.


тут не соглашусь. С сайтмапой сайт или форум быстрее индексируется

Хм, Вам правильно советуют:


Варианты действий:
а) перегенерируйте сайтмеп
б) пользуйтесь нормальным генератором, который понимает robots.txt
в) Настройте этот самый robots.txt
г) используйте 301 редирект со старых страниц, а ссылки оставляйте только на новые

M-A-X, та страница на которую ругается она единственная в своем роде и никуда не перенаправляет, т.к. там я делал описание БП (блок питания).


сделать это невозможно, т.к. генератор сайтмапы не хочет генерировать из-за того что урл начиается на www а гугл требует www.


генератор нормальный


С фаилом robots.txt все впорядке:
User-agent: *
Disallow: /admin/
Disallow: /messages/
Disallow: /im/
Disallow: /data/
Disallow: /postings.php
Disallow: /messenger.php
Disallow: /loginout.php
Disallow: /post.php
Disallow: /rd.php
Disallow: /printpage.php
Disallow: /tools.php?action=members
Disallow: /tools.php?action=mail

так что с регуляркой так и не вышло ничего, чтобы всегда с www работало и перекидывало на него?

Defenderyk, сделайте через .htaccess чтобы с http на www перенаправляло и всё

апач на серваке отключен

разве .htaccess работает без апача?

А что мешает прописать это в конфиге нгинкса?

Defenderyk, если нет аппача то тогда что на IIS все висит висит?