WEBLEDI.RUВебледи Форум успешных женщин-вебмастеров
04 Декабрь 2016, 22:21:57 *
Добро пожаловать, Гость. Пожалуйста, войдите или зарегистрируйтесь.

Войти
Правила Реклама
 
5
10
15
Свежие ответы
Ищу копирайтера на постоянную работу. Тематика: цветы, сад, огород от Violet-Lady (Ищу копирайтера, редактора, контент-менеджера)
Re: Интересные статьи из буржунета (переводы) + Рерайтинг + Копирайтинг от semnat (Контент, копирайтинг, переводы)
Re: Партнерка Vsemayki.ru - 25% с продаж. Отличный конверт 1 к 20 от vsemaykiadmin (CPA-сети)
Доска объявлений версии 2.2 от Diana101 (Сайты)
Re: Дизайн от новичка от LanaSvetNik (Дизайн)
Онлайн-консультант Jivosite со скидкой до 20% от KeyWebRu (Хостинг)
Создать тест-опрос в Гугл Документах (или ваш вариант) от Anonyff (Работа и услуги)
Re: AdBean - Бобовая тизерная сеть. Новостные и товарные тизеры. До 90% отчислений! от AdBean (Реклама и доход)
Re: Подарю, продам или сдам в аренду домены от June (Домены)
Автоматизация Яндекс Директ + возврат 8% от рекламного бюджета. от Александр_26 (Полезное)
Re: Quick Sender - Комбайн для продвижения в ВКонтакте от Dima_Myrzich (Социальные сети)
Re: Марафон Спарта от Пузата - Почему я иду от Katelite (Обучение сайтостроению, SEO и заработку)
Re: Чистенький женский СДЛ. Размещение в авто от uckpa (Платное размещение статей и ссылок)
Re: [Анонс] Программа для группировки ключевых слов KeyAssort от KeyAssort (Сервисы и SEO программы)
Re: Имеют ли вес покупные ссылки при теперешних правилах Яндекса от Lina7 (Раскрутка сайтов в поисковиках)
Свежие темы
Показать ещё
  Печать  
Страниц: 1 2 3 ... 8
Автор

Тема: robots.txt на ВП  (Прочитано 16723 раз)

0 Пользователей и 1 Гость смотрят эту тему.
Toriya
Offline Offline

Пол: Женский
Сообщений: 2879


Я ФЕЯ коварная: могу фейнуть, а могу и нафеячить


Просмотр профиля
« : 29 Март 2010, 18:39:07 »

Подскажите, пожалуйста, на ВП как сделать robots.txt? Врукопашную что-ли его писать? Не могу найти...  Обеспокоенный
Записан

И все-таки я это сделала!!!
Analitic82
Offline Offline

Пол: Мужской
Сообщений: 903



Просмотр профиля
« Ответ #1 : 29 Март 2010, 19:05:47 »

По умолчанию его нет, возможно его создают SEO плагины. Если у Вас нет таких, то нужно вручную создать.
Записан


Квалифицированная тех.поддержка. Помощь в переносе сайтов.
FreeLady
Offline Offline

Пол: Женский
Сообщений: 1502


Я - бабочка ... от слова "баба"...


Просмотр профиля
« Ответ #2 : 30 Март 2010, 11:31:17 »

Подскажите, пожалуйста, на ВП как сделать robots.txt? Врукопашную что-ли его писать? Не могу найти...  Обеспокоенный
Конечно врукопашную, а больше никак. У меня вот такой роботс. Он сделан для сайта "с говорящими урлами" (ЧПУ). Если у вас не "говорящие урлы", то строчки (Disallow: /*?* Disallow: /*?) надо убрать. имя_сайта.ru поставите своё.

Код:
User-agent: Unknown robot
Disallow: /

User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /tag/
Disallow: /trackback/
Disallow: /date/
Disallow: /category/
Disallow: /feed/
Disallow: /admin/
Disallow: /house/
Disallow: */trackback/
Disallow: */feed/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads/
Crawl-delay: 5
Host: имя_сайта.ru
Sitemap: http://имя_сайта.ru/sitemap.xml

User-agent: Yandex
Disallow: /cgi-bin/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /tag/
Disallow: /trackback/
Disallow: /date/
Disallow: /category/
Disallow: /feed/
Disallow: /admin/
Disallow: /house/
Disallow: */trackback/
Disallow: */feed/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads/
Crawl-delay: 5
Host: имя_сайта.ru
Записан

Мои сайты живут здесь ! Этому хостингу доверяю самое дорогое!
Toriya
Offline Offline

Пол: Женский
Сообщений: 2879


Я ФЕЯ коварная: могу фейнуть, а могу и нафеячить


Просмотр профиля
« Ответ #3 : 30 Март 2010, 14:36:09 »

FreeLady, спасибо большое. Просто я привыкла, что на юкозе он уже есть. Я уже сегодня его написала. У тебя там есть следующее:

Код:
Allow: /wp-content/uploads/
- это чтобы фотографии индексировались?

И еще в
Код:
Host: имя_сайта.ru
в каких случаях ставится в www, а в каких без? Если Яндекс индексирует мой сайт без www, то в Host нужно ставить без www или наоборот с ними, чтобы не произошло склейки?
Записан

И все-таки я это сделала!!!
LadyElena
Offline Offline

Пол: Женский
Сообщений: 525



Просмотр профиля
« Ответ #4 : 31 Март 2010, 00:26:52 »

Девочки, а что надо вписать в роботс, чтобы не индексировался архив записей?
Записан
goo
Offline Offline

Сообщений: 670


hey Goo what's new?


Просмотр профиля
« Ответ #5 : 31 Март 2010, 00:49:12 »

Disallow: /*archives*

можно использовать All in One SEO, там ессть галочка "Use noindex for Archives:"
Записан

LadyElena
Offline Offline

Пол: Женский
Сообщений: 525



Просмотр профиля
« Ответ #6 : 31 Март 2010, 00:53:32 »

goo, спасибо за совет. Плагином пробовала закрыть, но они всё равно в поиске Непонимающий Для эксперемента закрыла в роботсе метки, из поиска выпали, а вот архивы так и продолжают там красоваться. Пошла и их добавлять в роботс.
Записан
Toriya
Offline Offline

Пол: Женский
Сообщений: 2879


Я ФЕЯ коварная: могу фейнуть, а могу и нафеячить


Просмотр профиля
« Ответ #7 : 09 Апрель 2010, 16:57:52 »

Должен ли Яндекс индексировать теги, если в файле роботс стоит Disallow: /tag/?
Я так понимаю, что не должен... тогда почему он проиндексировал у меня такие страницы, например: _http://bloggourmet.ru/?tag=tart ?  Непонимающий
Что-то не так сделано?  :Улыбка
Записан

И все-таки я это сделала!!!
goo
Offline Offline

Сообщений: 670


hey Goo what's new?


Просмотр профиля
« Ответ #8 : 09 Апрель 2010, 17:01:31 »

лучше сделать вот так:

Disallow: /*tag*
Записан

Toriya
Offline Offline

Пол: Женский
Сообщений: 2879


Я ФЕЯ коварная: могу фейнуть, а могу и нафеячить


Просмотр профиля
« Ответ #9 : 09 Апрель 2010, 17:03:34 »

лучше сделать вот так:

Disallow: /*tag*
Спасибо!
Записан

И все-таки я это сделала!!!
Она самая
Стрелец
Offline Offline

Пол: Женский
Сообщений: 1565



Просмотр профиля
« Ответ #10 : 20 Апрель 2010, 11:38:49 »

девушки от куда у меня файлы роботс? на сервере в папке сайта нет этого файла.
а когда загружаю через панель вебмастера мне выдает
User-agent: *
Disallow: /
т.е. сайт вообще не индексируется  Обеспокоенный
как мне этот роботс уничтожить?Непонимающий
Записан
goo
Offline Offline

Сообщений: 670


hey Goo what's new?


Просмотр профиля
« Ответ #11 : 20 Апрель 2010, 14:07:38 »

Попробуйте через фтп-программу посмотреть, бывает что через админку не видно некоторые файлы...
Записан

Она самая
Стрелец
Offline Offline

Пол: Женский
Сообщений: 1565



Просмотр профиля
« Ответ #12 : 20 Апрель 2010, 15:59:54 »

Попробуйте через фтп-программу посмотреть, бывает что через админку не видно некоторые файлы...
я через фтп и смотрю, нет его там ((
может это из-за плагина платинум сео может поставила галочку где не надо, ничего не могу понять  Обеспокоенный
« Последнее редактирование: 20 Апрель 2010, 16:05:57 от Она самая » Записан
goo
Offline Offline

Сообщений: 670


hey Goo what's new?


Просмотр профиля
« Ответ #13 : 20 Апрель 2010, 16:07:00 »

а плагин когда ставили? на данный момент все статьи яндексом у Вас проиндексированы и гуглом тоже...
Записан

Она самая
Стрелец
Offline Offline

Пол: Женский
Сообщений: 1565



Просмотр профиля
« Ответ #14 : 20 Апрель 2010, 16:14:38 »

да сразу его ставила, правда потом еще галочки дополнительные наставила, он у меня на английском.
вот в вебмастере яндекса у сайта http://gorodkrasoti.ru/ загружена всего одна страница.
в панеле гугл вот
Файл robots.txt   Загружено   Статус   Доступ к главной странице
http://gorodkrasoti.ru/robots.txt   16 ч. назад   200 (Успешно)   Для робота Google установлен запрет на http://gorodkrasoti.ru/

Текст http://gorodkrasoti.ru/robots.txt
 
вот откуда этот роботс?? его там вообще нет.
с другими сайтами то же самое, вот кто блин ему этот запрет установил, неужели я собственно наручно  Злой
может вирус какой ((
 я вот здесь проверяю http://webmaster.yandex.ru/check.xml и здесь в индексе всего одна страница.




« Последнее редактирование: 20 Апрель 2010, 16:21:01 от Она самая » Записан
Страниц: 1 2 3 ... 8
  Печать  
 
Перейти в:  

| Sitemap