Информация

"4admins.ru" Рекомендует

robots.txt

Поиск не дал результатов? Смело создавай свою тему
  • Автор 
    Сообщение
Аватара пользователя
Сообщения: 105
Зарегистрирован: 15 апр 2013, 00:51
Благодарил (а): 6
Поблагодарили: 3 раз в 3 сообщениях
Город: Опочка
Пол: Мужской
Адрес форума: 4admins.ru
бабло: 0
Баллы репутации: 0

robots.txt

Сообщение Добавлено: 28 май 2013, 15:06

Можно ли загрузить свой robots.txt?
Если можно как это сделать?
Заранее спасибо

Аватара пользователя
Сообщения: 617
Зарегистрирован: 18 июл 2012, 17:51
Благодарил (а): 13
Поблагодарили: 235 раз в 210 сообщениях
Пол: Мужской
Адрес форума: http://cabinetadmina.ru
Баллы репутации: 53

Re: robots.txt

Сообщение Добавлено: 28 май 2013, 15:20

Нет, не получится, так же как и сделать свои правки в уже имеющийся.
http://cabinetadmina.ru/ - Сервис по оптимизации, модернизации и раскрутке ваших форумов.

За это сообщение пользователя CornerAdmin поблагодарили:
WebLanS

Аватара пользователя
Сообщения: 105
Зарегистрирован: 15 апр 2013, 00:51
Благодарил (а): 6
Поблагодарили: 3 раз в 3 сообщениях
Город: Опочка
Пол: Мужской
Адрес форума: 4admins.ru
бабло: 0
Баллы репутации: 0

Re: robots.txt

Сообщение Добавлено: 28 май 2013, 15:22

Понятно спасибо

Аватара пользователя
Сообщения: 7053
Зарегистрирован: 11 авг 2009, 16:58
Благодарил (а): 660
Поблагодарили: 2351 раз в 1748 сообщениях
Город: Москва
Пол: Мужской
Адрес форума: http://help.4admins.ru
Баллы репутации: 167

Re: robots.txt

Сообщение Добавлено: 28 май 2013, 17:47

WebLanS
robots специально оптимизирован на максимальное качество предоставления иформации для поисковиков
На этом сервисе можно cоздать форум бесплатно

Аватара пользователя
антивирус
антивирус
Сообщения: 605
Зарегистрирован: 25 дек 2011, 03:00
Благодарил (а): 83
Поблагодарили: 119 раз в 98 сообщениях
Город: Царицын
Пол: Мужской
Адрес форума: http://forum.sdmon.ru/
Баллы репутации: 23

Re: robots.txt

Сообщение Добавлено: 30 май 2013, 01:46

Хотел уточнить, robots предоставляет инфу о дополнительных (типа page1.html) и статических страницах?
Изображение
Изображение

Аватара пользователя
Сообщения: 105
Зарегистрирован: 15 апр 2013, 00:51
Благодарил (а): 6
Поблагодарили: 3 раз в 3 сообщениях
Город: Опочка
Пол: Мужской
Адрес форума: 4admins.ru
бабло: 0
Баллы репутации: 0

Re: robots.txt

Сообщение Добавлено: 30 май 2013, 01:52

"GoDFaTHeR" писал(а):
robots специально оптимизирован на максимальное качество предоставления иформации для поисковиков

На некоторые страницы стоит запрет индексации. Они получаются исключенными из поиска яндекса. Это не очень хорошо(((( У меня например исключена 191 страница. Из них около половины полезны для включения в поиск

Аватара пользователя
Сообщения: 617
Зарегистрирован: 18 июл 2012, 17:51
Благодарил (а): 13
Поблагодарили: 235 раз в 210 сообщениях
Пол: Мужской
Адрес форума: http://cabinetadmina.ru
Баллы репутации: 53

Re: robots.txt

Сообщение Добавлено: 30 май 2013, 16:19

Цитата:
robots.txt сформирован максимально эффективно с той целью, чтобы информация форумов была как можно более полно проиндексирована поисковыми системами и не была пессимизирована из-за присутствия множества дублирующих страниц.
некоторое содержимое в индексе не только не поможет положению вашего ресурса, но и совершенно очевидно навредит ему.
http://cabinetadmina.ru/ - Сервис по оптимизации, модернизации и раскрутке ваших форумов.

Аватара пользователя
Сообщения: 7053
Зарегистрирован: 11 авг 2009, 16:58
Благодарил (а): 660
Поблагодарили: 2351 раз в 1748 сообщениях
Город: Москва
Пол: Мужской
Адрес форума: http://help.4admins.ru
Баллы репутации: 167

Re: robots.txt

Сообщение Добавлено: 30 май 2013, 20:26

"WebLanS" писал(а):
У меня например исключена 191 страница.


показываю фокус
Код: Выделить всё
http://help.4admins.ru/viewtopic.php?t=4622
http://help.4admins.ru/viewtopic.php?p=33661#p33661
http://help.4admins.ru/viewtopic.php?p=33661
http://help.4admins.ru/viewtopic.php?t=4622&view=unread#unread
http://help.4admins.ru/viewtopic.php?f=52&t=4622&start=0


5 ссылок
viewtopic.php?t=4622
viewtopic.php?p=33661#p33661
viewtopic.php?p=33661
viewtopic.php?t=4622&view=unread#unread
viewtopic.php?f=52&t=4622&start=0

которые ведут на ваш первый пост

За дублированивание контента яндекс вас очень быстро отправит далеко далеко в поисковой выдаче
На этом сервисе можно cоздать форум бесплатно

Аватара пользователя
Сообщения: 105
Зарегистрирован: 15 апр 2013, 00:51
Благодарил (а): 6
Поблагодарили: 3 раз в 3 сообщениях
Город: Опочка
Пол: Мужской
Адрес форума: 4admins.ru
бабло: 0
Баллы репутации: 0

Re: robots.txt

Сообщение Добавлено: 30 май 2013, 23:31

Ну да согласен))))Что то я тупанул - ссори :-[

Сообщения: 13
Зарегистрирован: 16 авг 2010, 16:28
Благодарил (а): 0
Поблагодарили: 0 раз в 0 сообщении
Пол: Мужской
Адрес форума: http://isidaiset.4adm.ru
Баллы репутации: 0

Re: robots.txt

Сообщение Добавлено: 21 фев 2016, 07:40

Вот что показано в Яндекс.Вебмастер:
Информация о сайте
Страниц в поиске 147
Внешних ссылок на страницы сайта 27
Дата последнего посещения сайта роботом 19.02.2016
Загружено роботом 1998
Исключено роботом 1358
ТИЦ меньше 10

Зашел по ссылке "Исключено роботом", вот что там пишут:
HTTP-статус: Служба не доступна (503) 24
Страницы запрещены к индексированию вебмастером или не существуют:
Документ запрещен в файле robots.txt 1303
Документ содержит мета-тег noindex 31

Почему robots.txt запрещает индексировать практически весь контент?


Вернуться в Вопросы новичков

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1