WEBLEDI.RUВебледи Форум успешных женщин-вебмастеров
10 Декабрь 2016, 03:04:34 *
Добро пожаловать, Гость. Пожалуйста, войдите или зарегистрируйтесь.

Войти
Правила Реклама
 
5
10
15
Свежие ответы
Re: Требуется помощница по ведению сайта (контент-менеджер) от Клим (Работа и услуги)
Re: Качественные статьи по доступным ценам от Lita (Контент, копирайтинг, переводы)
Медицинская партнерка с уникальными методиками от sexolog (CPA-сети)
Как рассчитывается итоговый доход Адсенса? от anlw (Google AdSENSE)
Re: Наполнение групп Вконтакте от Posting_i_PIAR (Социальные сети)
Услуга в соц.сетях: поиск аккаунтов по номеру телефона или email. от Max-Payne (Покупка-продажа)
Кем будет востребована информация о благосостоянии клиента? от Max-Payne (Привлечение и удержание посетителей)
Re: Занимательные статьи для ваших сайтов от Лизки от Liza80 (Ищу копирайтера, редактора, контент-менеджера)
Интересен траф от вебмастеров))) от DariaTraffic (Реклама и доход)
Re: Проблема с дизайнером от Mara (Дизайн)
Re: Марафон Спарта от Пузата - Почему я иду от Клим (Обучение сайтостроению, SEO и заработку)
Re: Апа не будет до конца лета? от larisay (Yandex)
Re: Хостинг FairyHosting.com от vladislavd (Хостинг)
Re: как сейчас с высококонкурентной тематикой для новых сайтов? от Ивица (Раскрутка сайтов в поисковиках)
Re: [Анонс] Букварикс: бесплатная программа для быстрого подбора ключевых слов от Bukvarix (Сервисы и SEO программы)
Свежие темы
Показать ещё
  Печать  
Страниц: 1
Автор

Тема: После установки файла robots сайт выпал из индекса  (Прочитано 1881 раз)

0 Пользователей и 1 Гость смотрят эту тему.
lightlife4you
Offline Offline

Сообщений: 186



Просмотр профиля
« : 17 Декабрь 2011, 09:56:30 »

Всем привет!
У меня такая проблема - где-то 30 ноября установила файл robotstxt и сделала сайтмэп при помощи плагина. Последняя загрузка сайта роботом - 2 декабря, в индексе одна страница (до роботс было 12). Захожу сегодня утром в яндекс-вебмастер и вижу "ваш сайт успешно добавлен в очередь на индексацию". Сайт молодой, я мало что пока в этом понимаю, делаю все по схеме одной известной школы сайтоводства-блоговодства, в итоге сайт выпадает из индекса. Они говорят, что нужно ждать переиндексации. Что теперь делать? Ждать? Бросать сайт и делать новый изначально с сайтмэп и роботс? Вообще, переиндексация возможна? Может, нужно написать Платону?
Записан

Селиванова, которая фитнес-тренер
Patrisha
Offline Offline

Пол: Женский
Сообщений: 910



Просмотр профиля
« Ответ #1 : 17 Декабрь 2011, 11:33:37 »

Раз сайт молодой, нужно просто подождать. Если через недели через 2 ситуация не изменится, написать Платонам.
Записан
lightlife4you
Offline Offline

Сообщений: 186



Просмотр профиля
« Ответ #2 : 17 Декабрь 2011, 12:02:34 »

Раз сайт молодой, нужно просто подождать. Если через недели через 2 ситуация не изменится, написать Платонам.
спасибо за ответ! напрягло то, что сайт был в индексе, но выпал, а как Вы думаете, есть смысл сейчас заниматься покупкой ссылок на него?
Записан

Селиванова, которая фитнес-тренер
MaRt
SEO
Offline Offline

Пол: Мужской
Сообщений: 2268



Просмотр профиля
« Ответ #3 : 17 Декабрь 2011, 12:11:06 »

смысл всегда есть, если вы понимаете, для чего вы будете покупать ссылки. Роботс покажите
Записан

Портал о недвижимости

Продвижение вашего бизнеса в интернете
lightlife4you
Offline Offline

Сообщений: 186



Просмотр профиля
« Ответ #4 : 17 Декабрь 2011, 12:19:48 »

User-agent: *
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
 
User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: yanebous.ru

Sitemap: http://yanebousr.ru/sitemap.xml.gz
Sitemap: http://yanebous.ru/sitemap.xml
Записан

Селиванова, которая фитнес-тренер
Solany
Offline Offline

Пол: Женский
Сообщений: 212



Просмотр профиля
« Ответ #5 : 17 Декабрь 2011, 13:26:27 »

У вас ссылки какого вида? /?p=186 не такие случайно Подмигивающий Подмигивающий
Записан

Solany
Offline Offline

Пол: Женский
Сообщений: 212



Просмотр профиля
« Ответ #6 : 17 Декабрь 2011, 13:29:59 »

Сорри, торможу с утра (не заметила сайта) :D Удалите строки Disallow: /*?* - она запрещает индексировать все статьи на сайте, вида /?p=186. Потом нужно будет ждать, пока сайт снова проиндексируется)))
Записан

SVET_A
Offline Offline

Пол: Женский
Сообщений: 2944


Мечта, успех, чудо


Просмотр профиля
« Ответ #7 : 17 Декабрь 2011, 14:11:34 »


Вы это скопировали со своего роботса? Тогда проверьте УРЛ, там, кажется, лишняя буковка.
Записан

Прежде чем что то сделать – подумай, как ты будешь с этим жить
У человека есть две любимые игрушки: собственная судьба и чужие чувства…
lightlife4you
Offline Offline

Сообщений: 186



Просмотр профиля
« Ответ #8 : 17 Декабрь 2011, 15:07:53 »

Сорри, торможу с утра (не заметила сайта) :D Удалите строки Disallow: /*?* - она запрещает индексировать все статьи на сайте, вида /?p=186. Потом нужно будет ждать, пока сайт снова проиндексируется)))
спасибо!
Записан

Селиванова, которая фитнес-тренер
lightlife4you
Offline Offline

Сообщений: 186



Просмотр профиля
« Ответ #9 : 17 Декабрь 2011, 15:12:12 »

Вы это скопировали со своего роботса? Тогда проверьте УРЛ, там, кажется, лишняя буковка.

неа, это я руками опечаталась, исправляя файл с урл другого сайта
Записан

Селиванова, которая фитнес-тренер
GoodShadow
Offline Offline

Пол: Женский
Сообщений: 460


Мур мур :3


Просмотр профиля
« Ответ #10 : 18 Декабрь 2011, 20:16:29 »

Цитата: lightlife4you
неа, это я руками опечаталась, исправляя файл с урл другого сайта

А в вашем случае всё понятно, ЦПУ не используется а вы вписали:
Disallow: /*?*

Не большой мануэл по robots.txt

User-agent: YandexBlog # выбираем бота поиска по блогам Яндекса
Disallow: # и разрешаем ему всё, потому что он индексирует только фиды

User-Agent: Yandex # выбираем бота Яндекса
Disallow: /cgi-bin # запрещаем папку с CGI-cкриптами
Disallow: /wp-admin # запрещаем админку
Disallow: /wp-includes # запрещаем папку с разными файлами WordPress
Disallow: /wp-content # то же самое
Allow: /wp-content/uploads # разрешаем папки с изображениями к постам для ботов поиска по картинкам
Disallow: /wp-login.php # запрещаем страницу входа
Disallow: /wp-register.php # запрещаем страницу регистрации (использовать, если регистрация включена)
Disallow: /xmlrpc.php # этот протокол тоже ни к чему индексировать
Disallow: */trackback # запрет индексации трекбеков
Disallow: */feed # запрещаем главный фид с постами и фиды комментариев
Disallow: */page # запрещаем индексацию всех переключателей страниц, в том числе в метках, категориях, архивах, авторах
Disallow: /author # запрещаем индексацию вывода постов одного автора
Disallow: /go # при использовании проксирования внешних ссылок стоит запретить и этот каталог, чтобы боты не ходил по этим редиректам
Disallow: /*?* # запрещаем бесполезные страницы с вопросами в URL, например, страницы поиска
Disallow: /*? # то же самое, ВНИМАНИЕ! ИСПОЛЬЗОВАТЬ ТОЛЬКО С ЧПУ, иначе запретите все посты (т. к. они имеют вид /?p=id)
Host: ndmitry.ru # это то, из-за чего следовало делать отдельный блок для Яндекса — директива Host, задающая главное зеркало, другие боты её не понимают

User-Agent: * # а теперь всё то же самое, только для всех остальных ботов
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Allow: /wp-content/uploads
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: */trackback
Disallow: */feed
Disallow: */page
Disallow: /author
Disallow: /go
Disallow: /*?*
Disallow: /*?

Sitemap: http://name.ru/sitemap.xml # указываем адрес sitemap-файла
« Последнее редактирование: 18 Декабрь 2011, 20:22:26 от GoodShadow » Записан

skype: goodsh_love
Страниц: 1
  Печать  
 
Перейти в:  

| Sitemap