X   Сообщение сайта
(Сообщение закроется через 3 секунды)



 

Здравствуйте, гость (

| Вход | Регистрация )

2 страниц V   1 2 >
Открыть тему
Тема закрыта
> Мой robots.txt
FIvYur
FIvYur
Topic Starter сообщение 20.8.2011, 15:42; Ответить: FIvYur
Сообщение #1


Приветствую Вас уважаемые форумчане.
Я создал тут один блог http://futbikblog.ru
Закинул robots.txt в корень. Но в яндексе страниц в поиске пока нет. Посмотрите может что не так в нем?

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag
Host: futbikblog.ru
Sitemap: http://futbikblog.ru/sitemap.xml.gz
Sitemap: http://futbikblog.ru/sitemap.xml


--------------------
0
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
prolisk
prolisk
сообщение 22.8.2011, 16:27; Ответить: prolisk
Сообщение #2


рано пишите.
роботс вроде правильный, здесь проблема в самом Яше, он не часто индексирует, особенно новые сайты.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
moto-arena
moto-arena
сообщение 22.8.2011, 21:21; Ответить: moto-arena
Сообщение #3


Disallow: /*?* это лишнее.


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
graffin
graffin
сообщение 12.12.2011, 17:47; Ответить: graffin
Сообщение #4


А поясните мне пожалуйста, зачем для яндекса повторять все еще раз, он что с первого раза не понимает?
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Serg_P
Serg_P
сообщение 13.12.2011, 0:31; Ответить: Serg_P
Сообщение #5


:rjunimagu: :rjunimagu:
(graffin)
А поясните мне пожалуйста, зачем для яндекса повторять все еще раз, он что с первого раза не понимает?

Хороший прикол, он действительно с первого раза не понимает и надеется что его носом ткнут с помощью этого "User-agent: Yandex" :D
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
airman
airman
сообщение 13.12.2011, 10:53; Ответить: airman
Сообщение #6


так наверно будет правильнее и оптимальнее

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag
Host: futbikblog.ru
Sitemap: http://futbikblog.ru/sitemap.xml


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Serg_P
Serg_P
сообщение 13.12.2011, 13:19; Ответить: Serg_P
Сообщение #7


Директиву Host можно не использовать, в панели яндекс.вебмастер теперь так-же как в гугле появилась возможность указывать главное зеркало сайта, это надежнее и другие поисковики не будут в заблуждении из-за неизвестной директивы. После введения яндексом этой возможности собственно и отпала необходимость прописывать для яндекса отдельный блок в robots.txt с помощью "User-agent: Yandex". В качестве перестраховки я дополнительно в htaccess прописываю 301 редирект с www на без www, редирект все поисковики обрабатывают одинаково, поэтому думаю что это не лишнее.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Yaris
Yaris
сообщение 29.1.2012, 3:21; Ответить: Yaris
Сообщение #8


Если я не ошибаюсь, то нужно карту сайта без gz писать, поскольку это ссылка на скачивание, а гугл мне как-то писал, что это не правильная сссылка на карту сайта XML, хотя может обе ссылки будут лучше.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
Shvarcman
Shvarcman
сообщение 31.7.2012, 11:57; Ответить: Shvarcman
Сообщение #9


Приоритет правил у секции Яндекс и если её нет только потом учитывают директивы секции * Работают только правила из одной секции, т.е. либо *, либо Яндекс, либо Google и правила из разных секций никак не накладываются
Советую удалить секции Яндекс и Google, оставить только секцию *
и сформировать единые правила для всех поисковиков.
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
airman
airman
сообщение 31.7.2012, 14:37; Ответить: airman
Сообщение #10


Белое пятно, я ж об этом выше написал, не заметили? :)


--------------------
Вернуться в начало страницы
 
Ответить с цитированием данного сообщения
2 страниц V   1 2 >
Открыть тему
Тема закрыта
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0


Свернуть

> Похожие темы

  Тема Ответов Автор Просмотров Последний ответ
Открытая тема (нет новых ответов) Куплю ваши WMZ за мой Paxum
1 FiX 4071 7.1.2021, 2:57
автор: FiX
Открытая тема (нет новых ответов) Куплю Ваши Qiwi, Яд, Вебмани (WMZ, WMR) за мой нал или банк.
8 Sotovik 3978 29.12.2019, 3:34
автор: Sotovik
Открытая тема (нет новых ответов) Требуется накрутка ПФ (Яндекс) на мой сайт, кто может сделать ?
0 regem 1945 9.11.2019, 22:04
автор: regem
Открытая тема (нет новых ответов) Интегрировать Wordpress Woocommerce с Мой склад
1 Mr_SMO 1867 30.8.2019, 3:07
автор: SeoJoke
Горячая тема (нет новых ответов) Услуги по сбору новостей .txt для ваших сайтов, любые тематики + Отзывы
Импорт в DLE, WP (Xml, SQL) с отложенной публикацией под заказ
138 Akira 79104 12.8.2019, 21:28
автор: neonix


 



RSS Текстовая версия Сейчас: 25.4.2024, 1:56
Дизайн