Компьютерный форум OSzone.net  

Компьютерный форум OSzone.net (http://forum.oszone.net/index.php)
-   Вебмастеру (http://forum.oszone.net/forumdisplay.php?f=22)
-   -   Индексация сайта Яндексом (http://forum.oszone.net/showthread.php?t=179717)

][alter 02-07-2010 22:27 1446271

Индексация сайта Яндексом
 
Доброе время суток.

1.Создал сайт, добавил его в панель вебмастера яндекс и ждал индексации. Через некоторое время сайт был проиндексирован но главная страничка сайта в индекс не попала.
Посмотрев страницы с ошибкой, увидел вот такую картину http://img190.imageshack.us/i/96648259.jpg/ . Из – за чего такое могло произойти ?

2. Так же анализ файла robots.txt показал следующие http://img251.imageshack.us/i/70165421.jpg/ . Пробывал открывать файл редакторами, эта закагулина отсутствует! В чем проблема?
Очень жду хоть какой-нибудь намек на решение проблемы.

Sham 02-07-2010 22:36 1446274

Цитата:

Цитата ][alter
Пробывал открывать файл редакторами, эта закагулина отсутствует! »

имхо из-за метки BOM (если UTF-8). Нужно сохранять без BOM. Либо попробовать сохранить в другой кодировке с латиницей (если нет нелатинских)...

2. отдает 403 (вроде бы). попробуйте изменить user-agent в запросе на яндексовый (в браузере или скрипте) и проверить ответ.

][alter 02-07-2010 23:33 1446297

Поменял кодировку на ANSI, вопрос решился. :)

А вот по поводу второго можно немного подетальнее?


Вот эти директивы что означают?

Код:

Disallow: /*ru
Disallow: /*en

Запрет индексации доменных зон?

Sham 03-07-2010 01:37 1446357

Disallow - похоже на запрет на индексирование указанного пути относительно корня сайта. Мб яндекс запрет в файле роботс понимает как 403, хз, но проверить лучше все варианты, в т.ч. обычный запрос с user-agent яндекса (вдруг это сервер 403 отдает)...

http://help.yandex.ru/webmaster/?id=996567

][alter 03-07-2010 13:17 1446487

Подскажите как этот запрос осуществить?

Sham 03-07-2010 15:17 1446560

https://addons.mozilla.org/ru/firefox/addon/59/ - строки яндекса там нет вроде, но добавить вручную можно.

http://help.yandex.ru/webmaster/?id=1112272

][alter 03-07-2010 15:43 1446568

В google бот

Код:

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
А как будет Яндекса?

Sham 03-07-2010 15:53 1446571

Цитата:

Цитата ][alter
А как будет Яндекса? »

Цитата:

Цитата Sham
http://help.yandex.ru/webmaster/?id=1112272 »

еще тут http://help.yandex.ru/webmaster/?id=995329 старые вроде

][alter 03-07-2010 16:42 1446595

Проверил все хорошо, ошибок не каких не возникает. Буду ждать следующего посещения робота.

Кстати директорий «ru»и «en» у меня на ftp не было и в документации на яндексе я описания не нашел. Возможно это и было причиной.

aparator 19-07-2010 20:53 1456288

у меня вообще не индексирует н ирамблер ни яндекс ни одну страницу. уже два месяца сайту. гугл и яха быстро проиндексировали ,вот нормальные поисковики, не то-что этот яндекс. надоел уже.
Так вот, может дело в том, что я использую бесплатныей хостинг и домен 3-го уровня?


Время: 16:51.

Время: 16:51.
© OSzone.net 2001-