Notice: Undefined index: status in /home/exbb/exbb.info/www/community/topic.php on line 488 Notice: Undefined index: title in /home/exbb/exbb.info/www/community/topic.php on line 488 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 491 Notice: Undefined index: name in /home/exbb/exbb.info/www/community/topic.php on line 493 Notice: Undefined index: avatar in /home/exbb/exbb.info/www/community/topic.php on line 496 Notice: Undefined index: avatar in /home/exbb/exbb.info/www/community/topic.php on line 496 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 499 Notice: Undefined index: joined in /home/exbb/exbb.info/www/community/topic.php on line 500 Notice: Undefined index: location in /home/exbb/exbb.info/www/community/topic.php on line 501 Notice: Undefined index: name in /home/exbb/exbb.info/www/community/topic.php on line 502 Notice: Undefined index: icq in /home/exbb/exbb.info/www/community/topic.php on line 505 Notice: Undefined index: icq in /home/exbb/exbb.info/www/community/topic.php on line 506 Notice: Undefined index: aim in /home/exbb/exbb.info/www/community/topic.php on line 507 Notice: Undefined index: status in /home/exbb/exbb.info/www/community/topic.php on line 517 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: showemail in /home/exbb/exbb.info/www/community/topic.php on line 557 Notice: Undefined index: visible in /home/exbb/exbb.info/www/community/topic.php on line 593 Notice: Undefined index: status in /home/exbb/exbb.info/www/community/topic.php on line 488 Notice: Undefined index: title in /home/exbb/exbb.info/www/community/topic.php on line 488 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 490 Notice: Undefined index: www in /home/exbb/exbb.info/www/community/topic.php on line 491 Notice: Undefined index: name in /home/exbb/exbb.info/www/community/topic.php on line 493 Notice: Undefined index: avatar in /home/exbb/exbb.info/www/community/topic.php on line 496 Notice: Undefined index: avatar in /home/exbb/exbb.info/www/community/topic.php on line 496 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 499 Notice: Undefined index: joined in /home/exbb/exbb.info/www/community/topic.php on line 500 Notice: Undefined index: location in /home/exbb/exbb.info/www/community/topic.php on line 501 Notice: Undefined index: name in /home/exbb/exbb.info/www/community/topic.php on line 502 Notice: Undefined index: icq in /home/exbb/exbb.info/www/community/topic.php on line 505 Notice: Undefined index: icq in /home/exbb/exbb.info/www/community/topic.php on line 506 Notice: Undefined index: aim in /home/exbb/exbb.info/www/community/topic.php on line 507 Notice: Undefined index: status in /home/exbb/exbb.info/www/community/topic.php on line 517 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: posts in /home/exbb/exbb.info/www/community/topic.php on line 550 Notice: Undefined index: showemail in /home/exbb/exbb.info/www/community/topic.php on line 557 Notice: Undefined index: visible in /home/exbb/exbb.info/www/community/topic.php on line 593 ExBB Community :: robots.txt [5]
ExBB Community ExBB Community
 Сайт проекта ExBB Общение объединяет!
Войдите на форум при помощиВойти через loginza
 Чат на форуме      Помощь      Поиск      Пользователи     BanList BanList


 Страниц (6): « 1 2 3 4 [5] 6 »   

> Описание: как написать
wersi
Отправлено: 4 июня 2011 — 10:13
Post Id



Пользователь
Member


Покинул форум
Сообщений всего: 109
Дата рег-ции: Май 2011  
Откуда: Зеленодольск
Репутация: 3




Для любого форума ExBB FM 1.0 RC1
CODE:
User-agent: *
Disallow: /admincenter.php
Disallow: /messenger.php
Disallow: /profile.php?action=lostpassword
Disallow: /search.php
Disallow: /tools.php?action=online
Disallow: /tools.php?action=smiles
Disallow: /tools.php?action=threadstop
Disallow: /tools.php?action=members&s=&order=ASC&p=1$

Все что не нужно, при добавлении модов вносить записи в txt
 
 
nikitos
Отправлено: 8 сентября 2011 — 10:04
Post Id


Пользователь
Newbie


Покинул форум
Сообщений всего: 6
Дата рег-ции: Сент. 2011  
Репутация: 0




здравтсвуйте!
посоветйте плиз, на моем форуме бот Гугль - Адсенса не видит много страниц.

вот что говорит сам Гугль:
справка-Адсенса (Отобразить)



а вот мой robots.txt
тыц (Отобразить)

хочу спросить, как правильно вставить этот код: User-agent: Mediapartners-Google*
Disallow:
, а то боюсь напортачить.

(Отредактировано автором: 8 сентября 2011 — 10:05)

 
 
Отправлено: 8 сентября 2011 — 11:23
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




Первая секция уже его пропускает, пряча мусор. Ничего специально делать не нужно. Настоятельно рекомендую еще приделать вставку мета-тега с указанием канонических адресов. Яндекс у меня, к слову, уже во всю это исправление-дополнение использует и доволен судя по стабильному росту количества страниц в индексе. Улыбка
 
 
nikitos
Отправлено: 8 сентября 2011 — 11:27
Post Id


Пользователь
Newbie


Покинул форум
Сообщений всего: 6
Дата рег-ции: Сент. 2011  
Репутация: 0




Zeg пишет:
Первая секция уже его пропускает, пряча мусор. Ничего специально делать не нужно. Настоятельно рекомендую еще приделать вставку мета-тега с указанием канонических адресов. Яндекс у меня, к слову, уже во всю это исправление-дополнение использует и доволен судя по стабильному росту количества страниц в индексе

как сказал? Однако
 
 
Отправлено: 8 сентября 2011 — 14:10
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




nikitos пишет:
как сказал?
Кто сказал?
 
 
nikitos
Отправлено: 8 сентября 2011 — 14:16
Post Id


Пользователь
Newbie


Покинул форум
Сообщений всего: 6
Дата рег-ции: Сент. 2011  
Репутация: 0




Zeg пишет:
Кто сказал?

я сказал. Улыбка
 
 
YuraP0d
Отправлено: 16 июля 2013 — 17:32
Post Id



Пользователь
Member


Покинул форум
Сообщений всего: 133
Дата рег-ции: Июнь 2013  
Репутация: 2




Прочитал и много не понял, когда я пишу статичный сайт, я знаю какой файл как работает и потому понимаю, какие файлы и каталоги закрыть для поисковиков. А в форуме я не понимаю, потому обьсните мне почему закрывается это как мне кажется так это ссылки на форумы к темам, но поему они закрыты? И главня почему закрыта?
CODE:
Disallow: /forum/topic.php?forum=*&topic=*&postid=
Disallow: /forum/topic.php?forum=*&topic=*&v=l
Disallow: /forum/topic.php?forum=*&topic=*&p=1$
Disallow: /forum/index.php?c=f

И ещё может кто нить пояснит по каждой строке из этого robots? http://exbb.info/community/topic...51467#1298151467
(Добавление)
Или может кто нить посмотрит скриншот и напишет мне файл robors.txt

(Отредактировано автором: 16 июля 2013 — 17:33)

 
 
YuraP0d
Отправлено: 16 июля 2013 — 18:07
Post Id



Пользователь
Member


Покинул форум
Сообщений всего: 133
Дата рег-ции: Июнь 2013  
Репутация: 2




Скриншот
 
 
CAB
Отправлено: 16 июля 2013 — 18:52
Post Id



Пользователь
Super Member


Покинул форум
Сообщений всего: 629
Дата рег-ции: Февр. 2011  
Откуда: Москва
Репутация: 30




YuraP0d, по моему в этой теме всё подробно разжёвано. По крайней мере я для себя роботс по этой теме делал.

(Отредактировано автором: 16 июля 2013 — 18:52)

 
 
Отправлено: 16 октября 2014 — 01:36
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




Извините за тупой вопрос. У меня форум в поддомене:

http://мойсайт.ru/forum/

Как я понимаю, файл robots.txt надо положить в поддомен, в корень папки forum?

А в самом файле надо писать так:

CODE:
User-agent: *
Disallow: /forum/admincenter.php
Disallow: /forum/messenger.php
Disallow: /forum/profile.php?action=lostpassword
Disallow: /forum/search.php
Disallow: /forum/tools.php?action=online
Disallow: /forum/tools.php?action=smiles
Disallow: /forum/tools.php?action=threadstop
Disallow: /forum/tools.php?action=members&s=&order=ASC&p=1$


Или так:

CODE:
User-agent: *
Disallow: /admincenter.php
Disallow: /messenger.php
Disallow: /profile.php?action=lostpassword
Disallow: /search.php
Disallow: /tools.php?action=online
Disallow: /tools.php?action=smiles
Disallow: /tools.php?action=threadstop
Disallow: /tools.php?action=members&s=&order=ASC&p=1$


???

И сразу второй вопрос - надо ли сам этот файл прятать? Закрывать к нему доступ в .htaccess?

(Отредактировано автором: 16 октября 2014 — 01:45)

 
 
1Bot
Отправлено: 16 октября 2014 — 07:05
Post Id



Пользователь
Super Member


Покинул форум
Сообщений всего: 773
Дата рег-ции: Апр. 2009  
Откуда: Днепропетровск
Репутация: 69




Guyver пишет:
надо ли сам этот файл прятать? Закрывать к нему доступ в .htaccess?

Зачем его создавать, если потом прятать? Не понял Доступ должен быть, иначе как поисковики будут структуру сайта считывать.
 
 
Отправлено: 16 октября 2014 — 08:43
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




Хорошо. А с путём как?
 
 
electron
Отправлено: 16 октября 2014 — 14:17
Post Id



Администратор
ExBB Team


Покинул форум
Сообщений всего: 3917
Дата рег-ции: Февр. 2009  
Репутация: 341




роботс всегда заливается в корень форума, соответственно это ваш вариант

Guyver пишет:

CODE:
User-agent: *
Disallow: /admincenter.php
Disallow: /messenger.php
Disallow: /profile.php?action=lostpassword
Disallow: /search.php
Disallow: /tools.php?action=online
Disallow: /tools.php?action=smiles
Disallow: /tools.php?action=threadstop
Disallow: /tools.php?action=members&s=&order=ASC&p=1$

 
 
Отправлено: 16 октября 2014 — 14:31
Post Id


Пользователь



Покинул форум
Сообщений всего: 0
Дата рег-ции: N/A  
Репутация: 0




Спасибо!
 
 
1Bot
Отправлено: 16 октября 2014 — 14:35
Post Id



Пользователь
Super Member


Покинул форум
Сообщений всего: 773
Дата рег-ции: Апр. 2009  
Откуда: Днепропетровск
Репутация: 69




Робот ищет robots.txt только в корневом каталоге Вашего сервера. Под именем сервера здесь понимаются доменное имя и, если он есть, порт.

Размещать на сайте несколько файлов robots.txt, размещать robots.txt в подкаталогах бессмысленно: "лишние" файлы просто не будут учтены роботом. Таким образом, вся информация о запретах на индексирование подкаталогов сайта должна быть собрана в едином файле robots.txt в "корне" сайта.
 
 
Страниц (6): « 1 2 3 4 [5] 6 »
Сейчас эту тему просматривают: 1 (гостей: 1, зарегистрированных: 0)
« Установка и обновление »

> Похожие темы: robots.txt
Темы Форум Информация о теме Обновление
Clean-param и postid
Нужно ли добавлять в robots.txt?
Обсуждение Ответов: 1
Автор темы: alexvod
17 декабря 2010 — 22:43
Автор: nikk
Личные сообщения PHP
помогите написать скрипт ЛС
Обсуждение Ответов: 0
Автор темы: alexssses
2 февраля 2013 — 13:49
Автор: alexssses
Личные сообщения PHP
помогите написать скрипт ЛС
MySQL Ответов: 2
Автор темы: alexssses
3 февраля 2013 — 03:12
Автор: 1Bot
Вопросы по robots.txt
Общие вопросы Ответов: 3
Автор темы: Chiv_Chelios
13 апреля 2011 — 18:40
Автор: Zeg
Предложение по файлу robots.txt
Обсуждаем Ответов: 25
Автор темы: gudman
27 февраля 2011 — 21:33
Автор: lisiycat
 



Все гости форума могут просматривать этот раздел.
Только администраторы и модераторы могут создавать новые темы в этом разделе.
Только администраторы и модераторы могут отвечать на сообщения в этом разделе.
 




Яндекс.Метрика   

Powered by ExBB
ExBB FM 1.0 RC1 by TvoyWeb.ru
InvisionExBB Style converted by Markus®

[Script Execution time: 0.0852]     [ ]