Для вступления в общество новичков и профессионалов домен-индустрии, пожалуйста нажмите здесь ...

   
 Купля-продажа и обсуждение доменных имён
        

  
Вернуться   Форум о доменах > Поисковая оптимизация > Поисковые системы
Регистрация Реноме Правила форума Справка Пользователи Социальные группы Все разделы прочитаны
Поисковые системы Обсуждение поисковых систем и их работы.

Ответ
 
Опции темы
Сегодня
от 149р за .RU
Аренда сервера
2x Intel Hexa-Core Xeon E5-2420
Всего 79 евро!

с видеокартой GeForce GTX 1080 Ti
всего 99 евро!

от 149р за .РФ Реклама на DomenForum.net
Старый 24.06.2015, 23:24   #1
 
Аватар для nevinskiibomzh
 
Регистрация: 23.06.2010
Сообщений: 4,687
Доменные сделки: 21
Реноме: 3181
Одобрения
Спасибо (Отдано): 685
Спасибо (Получено): 670
.robots для Wordpress

Сидел я тут ковырял один свой блог, в итоге доковырялся, получился такой вот .robots, может есть, что-то лишнее...

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Disallow: /to/
Disallow: /&*
Disallow: />*
Disallow: /page/

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Disallow: /to/
Disallow: /&*
Disallow: />*
Disallow: /page/
Host: domain.ru

User-agent: Twitterbot
Disallow:

Sitemap: http://domain.ru/sitemap.xml

Посмотрел .robots известных блогеров по части поисковой оптимизации, честно сильно удивлен был на https://devaka.ru/robots.txt практически ничего не закрыто, да и тоже заметил, что те же страницы wp-login.php и wp-register.php не на одном сайте не проиндексированы, тогда получается и нет смысла их закрывать, или я заблуждаюсь?
nevinskiibomzh вне форума   Ответить с цитированием
Старый 29.06.2015, 11:33   #2
 
Аватар для max42
 
Регистрация: 12.06.2015
Адрес: München
Сообщений: 24
Доменные сделки: 0
Реноме:
Одобрения
Спасибо (Отдано): 0
Спасибо (Получено): 3
Если хотите совсем заморочится, как это сделал я когда-то и теперь использую на всех своих сайтах, то закройте доступ к файлом через .htaccess, открыв доступ только для вашего IP.
Проблема заключается в следующем, стоит где-то мелькнуть внешнений ссылке, например, http://vash-site.com/wp-login.php, как поисковики ее все равно индексуруют, игнорируя правила в robots.txt
Плюс вы убъете второго зайца, к вам перестанут ломитсья тонны ботов, которые пытаются подобрать пароль к админке.
__________________
Популярные зоны com, net, org, me, info, ru ★ Регистрация домена дешево и быстро ★ Бесплатный DNS и WhoisProtect
max42 вне форума   Ответить с цитированием
Старый 29.06.2015, 15:42   #3
 
Аватар для nevinskiibomzh
 
Регистрация: 23.06.2010
Сообщений: 4,687
Доменные сделки: 21
Реноме: 3181
Одобрения
Спасибо (Отдано): 685
Спасибо (Получено): 670
max42, последовал совету. Наверное сейчас это лучшее решение.
nevinskiibomzh вне форума   Ответить с цитированием
Ответ



Реклама

Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
 
Опции темы
Закладки Добавить Тема в закладки

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход


Текущее время: 18:18. Часовой пояс GMT +4.