Notice: Undefined index: status in /home/exbb/exbb.info/www/community/topic.php on line 488 Notice: Undefined index: title in /home/exbb/exbb.info/www/community/topic.php on line 488 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 491 Notice: Undefined index: name in /home/exbb/exbb.info/www/community/topic.php on line 493 Notice: Undefined index: avatar in /home/exbb/exbb.info/www/community/topic.php on line 496 Notice: Undefined index: avatar in /home/exbb/exbb.info/www/community/topic.php on line 496 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 499 Notice: Undefined index: joined in /home/exbb/exbb.info/www/community/topic.php on line 500 Notice: Undefined index: location in /home/exbb/exbb.info/www/community/topic.php on line 501 Notice: Undefined index: name in /home/exbb/exbb.info/www/community/topic.php on line 502 Notice: Undefined index: icq in /home/exbb/exbb.info/www/community/topic.php on line 505 Notice: Undefined index: icq in /home/exbb/exbb.info/www/community/topic.php on line 506 Notice: Undefined index: aim in /home/exbb/exbb.info/www/community/topic.php on line 507 Notice: Undefined index: status in /home/exbb/exbb.info/www/community/topic.php on line 517 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: showemail in /home/exbb/exbb.info/www/community/topic.php on line 557 Notice: Undefined index: visible in /home/exbb/exbb.info/www/community/topic.php on line 593 ExBB Community :: robots.txt [3]
ExBB Community ExBB Community
 Сайт проекта ExBB Общение объединяет!
Войдите на форум при помощиВойти через loginza
 Чат на форуме      Помощь      Поиск      Пользователи     BanList BanList


 Страниц (6): « 1 2 [3] 4 5 6 »   

> Описание: как написать
M-A-X
Отправлено: 24 сентября 2010 — 08:46
Post Id


Пользователь
Advanced Member


Покинул форум
Сообщений всего: 278
Дата рег-ции: Июль 2009  
Откуда: Киев
Репутация: 10




nikk пишет:
у меня Яндекс по-прежнему находит две главные страницы, http://militaryforum.ru и http://militaryforum.ru/index.php...
как же правильно закрыть index.ph, подскажите плиз!


Нужно, чтобы на форуме не было ссылок на index.php.
Об этом уже вроде раз писал.


Редирект:
Проверяем в самом index.php, есть ли в строке запроса, например, "php" в конце.
Если есть, постоянным редиректом отправляем на "/"
 
 
Отправлено: 24 сентября 2010 — 16:18
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




nikk пишет:
Zeg Вы можете это прописать? как будет выглядеть htaccess?

Как писали выше - все ссылки должны вести не на index.php, а корень сайта (/).

При добавлении в файл .htaccess строк:
CODE:
RewriteEngine On

RewriteRule ^index.php$ / [R=301,L]


при обращении к index.php будет выполнен редирект на /.
 
 
sania
Отправлено: 17 октября 2010 — 10:01
Post Id



Пользователь
Newbie


Покинул форум
Сообщений всего: 7
Дата рег-ции: Июнь 2010  
Репутация: 0




Zeg пишет:
nikk пишет:
Zeg Вы можете это прописать? как будет выглядеть htaccess?

Как писали выше - все ссылки должны вести не на index.php, а корень сайта (/).

При добавлении в файл .htaccess строк:
CODE:
RewriteEngine On

RewriteRule ^index.php$ / [R=301,L]


при обращении к index.php будет выполнен редирект на /.

Всё сделал как написано,но не робит ,пишет ошибку Moved Permanently
The document has moved here ,хостинг платный.
 
 
Отправлено: 17 октября 2010 — 13:04
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




sania, адрес сайта (форума) дайте. Форум в корне или папке стоит? Больше информации надо.
 
 
kirillbe
Отправлено: 8 февраля 2011 — 11:49
Post Id


Пользователь
Newbie


Покинул форум
Сообщений всего: 45
Дата рег-ции: Янв. 2011  
Репутация: 0




Вот мой robots

Спойлер (Отобразить)


Посмотрите правильно ли я все сделал? Может надо чего небудь еще внести? Улыбка
 
 
BON
Отправлено: 8 февраля 2011 — 15:37
Post Id



Администратор
ExBB Team
Admin


Покинул форум
Сообщений всего: 2762
Дата рег-ции: Нояб. 2010  
Откуда: СССР/Белгород
Репутация: 72




kirillbe,
CODE:
Disallow: /forum/admincenter.php
вот это можно было не делать, а просто запретить весь каталог

Вот что, тут тема нафоруме была, много людей выложил свои роботс'ы. Создавал никк, поищите, или напишите ему в личку и спросите. Там найдете всё что надо. Причем там правильные роботсы самих форумчан
 
 
kirillbe
Отправлено: 8 февраля 2011 — 17:26
Post Id


Пользователь
Newbie


Покинул форум
Сообщений всего: 45
Дата рег-ции: Янв. 2011  
Репутация: 0




BON
А как весь каталог запретить?
 
 
BON
Отправлено: 8 февраля 2011 — 18:36
Post Id



Администратор
ExBB Team
Admin


Покинул форум
Сообщений всего: 2762
Дата рег-ции: Нояб. 2010  
Откуда: СССР/Белгород
Репутация: 72




CODE:
Disallow: /admin/

Вот так будет запрещено всё что находится в папке админ
(Добавление)
Вот мой роботс:
CODE:
User-agent: *
Disallow: /admin/
Disallow: /messages/
Disallow: /im/
Disallow: /data/
Disallow: /postings.php
Disallow: /messenger.php
Disallow: /loginout.php
Disallow: /post.php
Disallow: /rd.php
Disallow: /tools.php?action=members
Disallow: /tools.php?action=mail

Конкретно для каждого поисковика не писал.
 
 
kirillbe
Отправлено: 8 февраля 2011 — 23:01
Post Id


Пользователь
Newbie


Покинул форум
Сообщений всего: 45
Дата рег-ции: Янв. 2011  
Репутация: 0




BON
А если написать например так /forum/admin/ это будет отличаться от этого /admin/???
 
 
Отправлено: 13 февраля 2011 — 19:07
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




kirillbe, смотря в каком случае. Если форум находится в папке, то нужно писать путь к папке форума "от корня" в виде "/forum/nnnn/". Если форум находится в корне домена или на отдельном под-домене, то писать надо так, как указал BON.
 
 
gudman
Отправлено: 14 февраля 2011 — 12:58
Post Id



Супермодератор
ExBB Team
Supermoderator


Покинул форум
Сообщений всего: 351
Дата рег-ции: Дек. 2009  
Репутация: 19




Есть еще вот такой параметр:
CODE:
/index.php?PHPSESSID=

появляется сразу после входа на форум!
Может его тоже закрыть?! Или если закрыто, дайте пример строки?!!
 
 
BON
Отправлено: 14 февраля 2011 — 14:53
Post Id



Администратор
ExBB Team
Admin


Покинул форум
Сообщений всего: 2762
Дата рег-ции: Нояб. 2010  
Откуда: СССР/Белгород
Репутация: 72




gudman, чет я у себя такого не наблюдал никогда
 
 
gudman
Отправлено: 14 февраля 2011 — 20:49
Post Id



Супермодератор
ExBB Team
Supermoderator


Покинул форум
Сообщений всего: 351
Дата рег-ции: Дек. 2009  
Репутация: 19




BON, это когда заходим на страничку форума, вводим данные и нажимаем кнопку войти!
Сразу после этого форум переходит на главную страничку с этим параметром!
 
 
gudman
Отправлено: 15 февраля 2011 — 01:08
Post Id



Супермодератор
ExBB Team
Supermoderator


Покинул форум
Сообщений всего: 351
Дата рег-ции: Дек. 2009  
Репутация: 19




Возник еще один вопрос! Для создания Сайтмапы пользуюсь программой:
SiteMap Generator - http://wonderwebware.com/sitemap-generator/
Так вот, как я понял эта программа учитывает настройки robots.txt
Но почему то не все параметры учитывает!!!
В прикреплении файл Сайтмапы в текстовом формате сделаный мной сегодня.
а вот мой роботс.тхт:
robots.txt (Отобразить)


Как можно увидеть, такие параметры как:
CODE:
Disallow: /forum/*v=l*
Disallow: /forum/*&p=1$
Disallow: /forum/*postid=*
Disallow: /forum/printfile.php?action=attach*

И еще некоторые, программа почему то не учитывает!!!
Кто нибудь может пояснить почему это происходит?!!

Да, если удалить вообще файл роботс.тхт то программа сканирует все страницы, в общей сложности около 25 000 страниц!
Тоесть роботс что то отсекает, а что то нет!!!

(Отредактировано автором: 15 февраля 2011 — 01:10)

 
 
Отправлено: 15 февраля 2011 — 01:43
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




Попробуйте поэкспериментировать, скорее всего тупит генератор сайт-мапы. Может он (генератор) как спотыкается на "*"? Попробуйте подробнее и яснее написать маски, например:

CODE:
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /editor/
Disallow: /help/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /mambots/
Disallow: /media/
Disallow: /modules/
Disallow: /templates/
Disallow: /installation/
Disallow: /forum/postings.php
Disallow: /forum/messenger.php
Disallow: /forum/loginout.php
Disallow: /forum/post.php
Disallow: /forum/search.php
Disallow: /forum/profile.php
Disallow: /forum/tools.php?action=
Disallow: /forum/search.php?action=
Disallow: /forum/index.php?c=f
Disallow: /forum/postings.php?action=addpoll
Disallow: /forum/topic.php?forum=*&topic=*&postid=
Disallow: /forum/topic.php?forum=*&topic=*&v=l
Disallow: /forum/topic.php?forum=*&topic=*&p=1$

(Отредактировано автором: 15 февраля 2011 — 02:08)

 
 
Страниц (6): « 1 2 [3] 4 5 6 »
Сейчас эту тему просматривают: 1 (гостей: 1, зарегистрированных: 0)
« Установка и обновление »

> Похожие темы: robots.txt
Темы Форум Информация о теме Обновление
Clean-param и postid
Нужно ли добавлять в robots.txt?
Обсуждение Ответов: 1
Автор темы: alexvod
17 декабря 2010 — 22:43
Автор: nikk
Личные сообщения PHP
помогите написать скрипт ЛС
Обсуждение Ответов: 0
Автор темы: alexssses
2 февраля 2013 — 13:49
Автор: alexssses
Личные сообщения PHP
помогите написать скрипт ЛС
MySQL Ответов: 2
Автор темы: alexssses
3 февраля 2013 — 03:12
Автор: 1Bot
Вопросы по robots.txt
Общие вопросы Ответов: 3
Автор темы: Chiv_Chelios
13 апреля 2011 — 18:40
Автор: Zeg
Предложение по файлу robots.txt
Обсуждаем Ответов: 25
Автор темы: gudman
27 февраля 2011 — 21:33
Автор: lisiycat
 



Все гости форума могут просматривать этот раздел.
Только администраторы и модераторы могут создавать новые темы в этом разделе.
Только администраторы и модераторы могут отвечать на сообщения в этом разделе.
 




Яндекс.Метрика   

Powered by ExBB
ExBB FM 1.0 RC1 by TvoyWeb.ru
InvisionExBB Style converted by Markus®

[Script Execution time: 0.0673]     [ ]