Думаю, многие сталкивалиили с «причудами» Яндекса, или хотя бы слышали о них. Обычно, когда вебмастер сталкивается с неверной работой поисковика, он пишет в службу поддержки и в получает ответ от Платона Щукина. Думаю, без труда вы найдете его «пёрлы» в Интернете.

Впрочем, сегодня речь идет не об этом, а о том, как мне недавно «посчастливилось» пообщаться с одним из Платонов.

Чтобы было понятно о чем речь, сразу опишу суть проблемы. Все вы знаете, что у меня есть сайт max-3000.com. Поскольку я не люблю адреса с www, то никогда их не использую. Однажды я решил добавить сайт в Яндекс-вебмастер и добавил его с адресом без www.

В октябре прошлого года, я случайно обнаруживаю, что сайт находится по адресу с www.max-3000.com. Меня это удивило, потому что давным-давно стоит 301-редирект со всех www-адресов на нормальные (без www). То есть Яндекс сам сменил адрес на ошибочный.

Дальше получается довольно веселая картина. Робот поисковика идет на сайт с www и, не понимая 301-редирект, прекращает работу. Тоже самое касается и файла robots.txt. Понятно, что все, до этого найденные адреса, исключаются из поискового индекса и отмечены как ошибочные.

Я написал об этом в службу поддержки и Платон посоветовал на 4-6 недель убрать редирект и прописать host в robots.txt. Я решил, что пару месяцев можно потерпеть, поэтому так и сделал. После этого в декабре редирект поставил опять и вижу, что Яндекс опять считает адрес сайта с www.

Опять пишу в службу поддержки. На сей раз Платон отвечает, дескать ждите, прописывайте еще раз host. Я отвечаю, что ваш робот не видит robots.txt по ошибочному адресу. Да и вообще если за три месяца Яндекс не исправил ошибочный адрес, значит это ошибка вашего ПО.

Платон, как попугай отвечает, дескать у вас главное зеркало с www, убирайте редирект, прописывайте host и потом, неизвестно через сколько, робот определит адрес верно.

Я отвечаю, что сию процедуру я уже делал. Результат нулевой. К тому же 301-редирект однозначно указывает на новый адрес, что робот должен воспринимать как руководство к действию, однако этого не проиходит. То есть робот «затыкается» на ошибочном адресе и дальше не идет.

Платон, вновь как попугай, выучивший шаблонные ответы, - главное зеркало - с www и бла-бла-бла - далее по тексту.

Я еще раз разжевываю проблему: на лицо явная ошибка ПО и в общем-то было бы неплохо не отписками заниматься, а хоть что-то сделать. Честно говоря мне уже просто надоело общаться, потому что я вам все рассказываю кратко, а вообще полная переписка - 15 писем, где я разжевываю каждую фразу, привожу ссылки и т.д.

К тому же я так понял, Яндекс экономит на своей техподдержке и набирает в неё людей, не имеющих соответствующей компетенции. То есть «мой» Платон просто не понимает вообще о чем идет речь. Ну выучил человек help на сайте, а чуть влево-вправо - всё: баста рабиц! Поэтому я прошу передать мой тикет тому, кто либо в состоянии решить вопрос, либо хотя бы понимает о чем речь.

В ответ Платон, заверяет, что «понимает проблему, но ускорить её решение вручную, к сожалению, нельзя». Мои указания на то, что робот не понимает 301-редирект, возражает:

«Робот понимает серверный редирект, он переходит на страницу, на которую организовано перенаправление и прекращает работу, так как оказывается на домене, который является неглавным зеркалом.»

То есть по версии Яндекса, редирект это переход и прекращение работы. А я, дурак, всегда считал, что редирект это переход по указанном адресу и продолжение работы уже по новому!

Совершенно очевидно, что в текущем варианте робот Яндекса, никогда не сменит ошибочный адрес на верный: робот идет на ошибочный, не понимая редиректа стопорится; при попытке получить host, он опять же идет на ошибочный robots.txt, опять получает редирект, вновь его не понимает и здесь тоже стопорится.

Тут, мне уже окончательно надоела эта переписка и я заметил, что в общем-то мне ваш поисковик глубоко до одного места: трафика с него мизер, а сам поиск некачественный. Тот же google прекрасно понимает все редиректы, и вообще я вам указал на ошибку, а будете ли вы её исправлять, ваше дело.

Вот такая история. :)

Я уже писал, почему Google лучше Яндекса. Я бы добавил еще несколько проблемных точек Яндекса.

• Получается, что Яндекс не понимает 301-редирект.
• Яндекс не понимает robots.txt, если он отдается по 301-редиректу.
• Яндекс не в состоянии понять, что адреса одного домена с www и без www, по сути это одно и тоже. Так уж исторически сложилось, что это www лепят все кому не лень и совершенно очевидно, что редирект с www (или на www, кому как удобней) нормальное решение.
• Яндекс не понимает sitemap.xml, иначе бы переделал все адреса еще полгода назад.

Но вообще я думаю, что в Яндексе просто зажрались. Если в Гугле сайт индексируется без ошибок, в Рамблере тоже нормально, то для Яндекса, видите ли, это не критерий. Ну понятно, как в том анекдоте - ошибок у программ не бывает, бывают просто недокументированные «фичи». ;)