Как происходила индексация моего сайта поисковыми системами? | О раскрутке сайта простым языком

DATAWORD - наблюдения оптимизатора
Раскрутка сайта и поисковая оптимизация

 
  

Как происходила индексация моего сайта поисковыми системами?

Раздел блога: Страницы сайта | 7 сентября 2007, 22:13

Версия для печати Версия для печати

С момента создания моего сайта прошло определённое количество времени перед тем, как мой сайт заметили поисковые системы, начав его активно индексировать.

Сегодня мне бы хотелось вам рассказать о поведении различных поисковых систем на моём сайте. Изучать их повадки, признаюсь, довольно интересно, особенно когда много о поисковых системах читаешь.

Получается своего рода практика, которая постоянно сопоставляется теории, что позволяет делать новые интересные выводы о том, как же проходит сам процесс индексирования и ранжирования собственных документов в разных поисковых системах.

Я думаю, логично рассказывать появление поисковых систем в хронологическом порядке.

Первым мой сайт посетил Google, проиндексировав все страницы сайта. Это меня, собственно, не очень-то и удивило, т. к. я к тому времени уже знал о быстрой индексации новых сайтов этой поисковой системой.

Помимо подачи заявки на добавление сайта в интерфейсе веб-мастеров Google, одновременно на одном из моих сайтов была поставлена прямая ссылка с главной страницы для надёжности процесса индексации. Примерно через неделю-две сайт появился в индексе этой поисковой системы.

Вот что можно сказать об особенностях индексации моего сайта этой поисковой системой:

Робот посещает мой сайт реже, чем это делают наши "отечественные" поисковые роботы. Я замечал, что Googlebot приходит ко мне не чаще, чем раз в 3 дня (на проверку файла robots.txt приходит чаще), что, собственно, и отображается в Интерфейсе веб-мастеров Google.

Причём, каждый визит робота сопровождается кэшированием информации в хронологическом порядке. Этот хронологический порядок сохраняется при апдейтах поисковой выдачи системы.

Я провёл своего рода эксперимент: через определённые промежутки времени менял заголовок Title. Удивительным мне показалось то, что Google запомнил хронологию их изменения и выдавал с каждым апдейтом порядковые title (а также содержание самой страницы), присвоенные странице в разные промежутки времени.

Также была замечена ещё одна особенность Google: один раз я забыл по какой-то причине упомянуть запрет индексации одной из директорий сайта, что привело к её индексации. Сколько бы я не менял текст в robots.txt данная директория не исчезала из результатов поиска. Единственный действенный метод удаления ненужных проиндексированных страниц находится в центре веб-мастеров Google, чем я и воспользовался.

С индексацией в поисковой системе  "Яндекс" было гораздо сложнее. Форма добавления ресурса на сайте "Яндекса" была заполнена в тот же день, что и форма Google, однако сайт в индексе не появлялся (даже несмотря на наличие внешних ссылок на сайт).

Возможно, медленной индексации сайта способствовало и то, что домен находится в зоне .info. В Интернете ходят слухи, что эта зона индексируется реже поисковой системой.

Проблему решила простая и в то же время эффективная вещь: поскольку мой сайт собой представляет нечто похожее на блог, я решил добавить RSS-ленту в сервисе blogs.yandex.ru с надежой на то, что мой сайт, наконец, проиндексирует хотя бы один из роботов "Яндекса".

И это сработало: сначала ко мне пришёл робот-индексатор rss, а за ним, как по цепочке, пришёл и основной индексирующий робот Yandex/1.01.001 (compatible; Win16; I).

В следующий апдейт поисковой выдачи мой сайт уже был в индексе этой поисковой системы. Прошло примерно 3 недели с момента запуска проекта. Не знаю, сколько бы индексация длилась, если бы я им не воспользовался.

Как ведёт себя "Яндекс" на моём сайте?

Вполне неплохо, робот заходит ко мне каждый день в поисках новой информации, индексирует её, в последствии она отображается в списке проиндексированных страниц. Обновления раннее проиндексированных страниц сайта проходят реже, чем включения новых страниц на сайте. Возможно, "Яндексу" помогает информация из RSS, этот факт, конечно, я проверить не смог.

"Рамблер", третья по популярности в Рунете поисковая система, меня заметил совсем недавно. Хотя форма добавления для индексации сайта в поисковой системе была мной заполнена давно.

Мне была не понятна задержка этой поисковой системы, поэтому я решил действовать дальше, вдумчиво вчитываясь в информацию, которая была предоставлена владельцам сайтов на сайте "Рамблера".

В первую очередь, по рекомендации самих разработчиков на сайте, мой проект был добавлен в Рамблер-Top 100. А также было написано письмо в службу поддержки Рамблера о том, что мой домен .info является русскоязычным.

Не знаю, что повлияло именно на индексацию сайта в этой поисковой системе: рейтинг, письмо или же внешние ссылки – в любом случае, сайт мой появился в индексе "Рамблера" после этих мер довольно быстро. Я даже не ожидал.

После включения моего сайта в индекс, робот "Рамблера" стал появляться на проекте каждый день по несколько раз. Каждое обновление страницы или добавление новой незамедлительно отражались в индексе на следующий день после добавления информации на сайт (Проиндексированные страницы находились очень хорошо по тегу title).

Я конечно и раньше слышал о возросшей "реактивности" "Рамблера", но представить это себе не мог. У меня есть мысли, что поисковая система вычленяет ссылки из RSS, направляя робота на индексацию новых страниц. Как-то раз разработчики упоминали такую возможность поисковой системы. Такую скорость индексирования пока не имеет ни один поисковик на моём сайте. Сейчас же, в январе, это не происходит. Не знаю, что там происходит у "Рамблера", но его визиты я стал замечать всё реже и реже.

Теперь хочется вкратце рассказать о других поисковых системах, которые индексировали мой сайт.

Yahoo довольно быстро меня нашёл. Форму добавления ресурса на их сайте я не заполнял. Вполне возможно, что поисковая система нашла меня по ссылкам. После публикации ресурса в Интернете мой сайт был проиндексирован ею через 3 недели.

Однако индексация сайта прошла неверно: то ли мой сайт ей показался странным, то ли она перешла с какой-то ссылки. В индексе поисковой системы показывались 3 довольно странные ссылки на мой ресурс. В таком состоянии это существовало довольно долго.

Пришлось принимать меры: в файле robots.txt было прописано поле Sitemap, которое указывало на мой файл Sitemap, откуда поисковые системы могут узнать о структуре индексируемых сайтов. Как оказалось, это сработало. Все страницы были корректно проиндексированы.

Поисковая система на моём сайте появляется довольно редко. Раз в 2 недели. Новые страницы исправно добавляются в индекс, но с неё идёт пока что очень мало трафика.

MSN меня тоже нашёл сам. По внешним ссылкам. Индексирует мой сайт редко, но в отличие от Yahoo, корректно это сделал с первого раза. Трафика с него пока что не наблюдается.

С поисковыми системами WebAlta и Gogo.ru пока что туго. Их поисковые роботы пока не появились на моём сайте. Возможно, ситуацию улучшит регистрация в каталоге Open.WebAlta и Каталог.Mail.ru. Но пока что будем за ними наблюдать. На дворе январь, роботы так и не появились на моём сайте.

А как у вас происходят дела с индексацией вашего сайта?

Перейти в начало страницы

Подписаться на rssНравится этот блог?
Подпишитесь на обновления блога (RSS)
.
Подпишитесь на комментарии (RSS).



Количество комментариев: 110

  1. Smart:

    Каталог Вебальты - путь к успеху в этой ПС ;)

  2. Vitaweb:

    Наверное, нужно стать редактором их ODP :smile:

  3. Hkey:

    Насчет веб альты даже можно не париться - трафа на ней как в сахаре воды.

  4. franklin:

    ну так развиваются ведь с каждым днем...

  5. Виталий:

    Пока что не вижу эту задачу приоритетной. Даже если и добавлять свой сайт туда, то лучше стать редактором их ODP.

  6. Sovgav:

    А я уже замучился регистрироваться на Яндексе , а он меня всё не может проиндексировать. А вот Рамблер и вправду меня зарегистрировал быстрее всех. Полученный материал действительно полезен, думаю что теперь у меня получится с Яндексом.

  7. Виталий:

    Sovgav, если есть RSS-лента, то попробовать даже нужно.

  8. exelens:

    с какой поисковой системы к Вам приходит основная масса пользователей?

    у меня с гугля. Яндекс даже рядом ле лежит =)

  9. spowen:

    У меня тоже гугл намного чаще обращается, чем яндекс. В чем может быть проблема? В обоих поискавиках сайт проиндексирован.

  10. Виталий:

    spowen, поисковые мощности обоих поисковых систем довольно сложно оценивать. Тем более по отношению к конкретному сайту. Причин такого поведения может быть много. Но если абстрагироваться от какого-то конкретного сайта и просто сопоставить поисковые системы, то серверов у Google гораздо больше, следовательно, больше возможностей быстрее индексировать сайты. Это моё субъективное мнение.

  11. maneak:

    Откуда приходит трафик зависит от темы сайта!
    Например на сайт по теме демона для чата (тоесть узкопрофильный для програмистов) приходят восновном с гугла. Яша очень тупит (он нетолько разделяет фразы но и слова!!)

    А вот на сайтик с гиф анимашками большинство с яндекса т.к. ищут ламеры и им кажется что счастье именно в яше, а гугль им непонятен..

    З.Ы. спасибо за статью!

  12. Виталий:

    maneak, что-то конкретно про контингент людей, которые пользуются той или иной поисковой системой, я бы не стал говорить :) Оптимизаторы пользуются "Яндексом" :) Догадайтесь, почему :)

  13. wakh:

    Они им "пользуются", а ищут гуглом ;)

  14. SeRg@:

    wakh - это точно :lol: лучше гугля пока ничего нету да и с индексом он успешней, забили б все дружно на яшку и проблем бы не было, а то пользуются ламерством наших пользователей и выделываются, а seoшникам сплошные проблемы - мелочи но неприятные.

  15. ainokusabi:

    Народ, я непойму, а где смотреть, какие роботы когда заходили?

  16. Автор блога Виталий:

    ainokusabi, например в логах сервера (спросите у вашего провайдера), через систему AwStats (опять же, спрашивайте у провайдера), через панели веб-мастера (Яндекс.Вебмастер, Google Webmaster Tools).

  17. alex:

    Не могли бы вы для новичков конкретизировать некоторые моменты? Как вы узнаете даты посещения роботами ваших сайтов? (Где нужно регистрироваться? Какие службы точно поисковиков дают такую информацию?) У меня к примеру висит сайт 3 месяца, так в яндексе ( служба "мои сайты") выдается информация, что мой сайт робот посещал последний раз 16 мая, а сегодня 30 мая. Как у вас получается, что роботы призодят чуть ли не каждый день?

  18. Автор блога Виталий:

    В интерфейсе "Яндекса" данные обновляются редко, ну или дата там почти всегда неточная.

    Чтобы получить точную дату визита поискового робота, необходимо получить логи доступа к серверу у вашего провайдера и уже непосредственно анализировать их, просматривая каждую запись о визите робота на определённые страницы по юзер-агенту. Чтобы не проделывать монотонную работу поиска определённого юзер-агента в файле лога сервера, можно воспользоваться специальной утилитой, которая эту информацию выдаёт в удобном графическом виде. Воспользуйтесь, например, утилитой AwStats. Спрашивайте её у вашего провайдера.

  19. Голосочек:

    Таже проблема, ни гугл ни яндекс не хотят индексировать сайт:(

  20. businessman:

    Кстати, у себя на блоге я тоже писал об этом. Если интересно мое мнение, заходите, пообщаемся.

  21. Art:

    уже месяц как никакой поисковик не индексирует, обидно.

  22. Платон:

    Я пришел к выводу, что разные поисковики любят разные
    домены (имею в виду бесплатные). Например "народные"
    сайты - Яндекс и Рамблер. Мой сайт на Narod по неизвестной причине выпал сначала из MSN, потом из
    Гугла и Yahoo по очереди. В Гугл пока "засунуть" его обратно не удалось. А вот на хостинге Yard.ru наоборот проблема с Яндексом.
    А Юкозу - везде "зеленый" свет.:)

  23. Володя:

    Пока видно только в Google ситуация с Яндексом под вопросом.. нехочет индексировать почти месяц прошёл.. :???:

  24. Медет:

    я что то понять не могу, почему, мой блог не находится никак, и причем он находится на самом гугле, и он же его и не находит, потом сайт на гугле, тож не находится, почему, подскажите как сделать так шоб они наконец меня нашли, подскажите пож..

  25. Автор блога Виталий:

    Медет, домен в какой доменной зоне у вас?
    Просто есть некоторые сложности с индексацией доменных зон, отличных от .RU и .SU

  26. Автор блога Виталий:

    Платон, как правило, для продвижения в "Яндексе" и используются "Народные" сайты, либо сайты на доменах .RU и .SU
    Проблемы с индексацией также возникают очень часто на доменах вида PP.RU NET.RU и им подобных.

  27. Сергей:

    У меня на нескольких сайтах посещения с Гугла в
    1,5 раза болше чем с других поисковиков.MSN - пусто.
    Гугл каждый день меняет количество проиндексированных стр., то увеличивает, то уменьшает. У кого так было.

  28. игорь:

    Засунул сайт golden-aces.com(интернет-казино) в поисковики одновременно 22 декабря 2008 в рамблер гугл(рус) апорт и яндекс.Самый первый проиндексировал мой сайт гугл.это случилось числа 27. Сначала не понял откуда приток посетилелей из запада.но потом решил проверить некоторые поисковики. yahoo меня сам нашел в том чесле и англоязычный.а вот яндекс и рамблер меня не как индексировать не хотят.хотя прошло уже ровно 10 дней...(((((.хотя на мой ресурс ссылок с каталогов не мало.ссылок 20 точно есть.пора бы яндексу и рамблеру. У меня опосения(может роботам что то не понравилось в контенте и метатегах?)Хотя у меня реливатность названия и контента (отличная 100%)(на каком то сервисе проверял)все слова ключивые из названия присутсвуют в контексте. и еще.у меня сайтик очень простой есть.делал года 2 назад по информатике на экзамене"клубная музыка".на народе.ру.Может мне там еще ссылку поставить.человек 9 в день имеется(несмотря на то что он проиндексирован только на яндексе)как думайте?

  29. Автор блога Виталий:

    игорь,
    Ваш домен в зоне .com. Как известно, первичная индексация этих доменов в российских поисковиках проходит долго.

    Для Рамблера вам придётся подать заявку на включение сайта в индекс, чтобы быть корректно проиндексированным и найденным в этой поисковой системе по ключевым запросам вашего сайта. Писать письмо нужно по адресу search.support@rambler-co.ru, и сайт будет добавлен в индекс от 1 дня до 2 недель, как утверждает служба поддержки поиска Rambler.

    В любом случае не делайте поспешных выводов. Подождите месяц, если ваш сайт в индексе поисковых российских поисковых систем не появится, то можно написать в ТП Рамблера по электронному адресу, который я вам уже указал, и Яндексу по http://feedback.yandex.ru/?from=webmaster

  30. игорь:

    Спасибо,Виталий за ваш ответ!

  31. СК:

    А сколько стоит оптимизация??

  32. Sasha:

    А яндекс гавно :roll:

  33. Игорь:

    Виталий здравствуйте.После моего письма мне написала поддержка вот такое письмо.И сказали что его не проиндексируют.Вот письмо
    ___________________________________
    Здравствуйте, Игорь.

    Вы писали 13 января 2009 г., 20:19:44:

    Добрый вечер, уважаемая поддержка рамблер'а! Скажите пожалуйста,
    почему сайт golden-aces.com до сих пор не прошел индексацию? Прошло
    уже более 20 дней с момента занесения сайта в базу данных рамблер'а.Спасибо за ответ!

    Ваш сайт не зарегистрирован в поисковой системе и поэтому не
    индексируется ею.

    Согласно правилам регистрации в поисковой системе, самостоятельно,
    через форму на сайте Рамблера Вы можете зарегистрировать только
    ресурсы домена .ru, а также некоторых стран СНГ.
    (см. http://help.rambler.ru/faq.html?s=1837#q1840 )

    Во всех остальных случаях следует отправить заявку на регистрацию
    сайта по адресу mailto:search.support@rambler-co.ru .

    Мы регистрируем только те сайты, которые могут представлять интерес
    для наших пользователей. К сожалению, подобный сайт у нас уже
    зарегистрирован, практически никакой новой интересной информации Ваш
    сайт не содержит, поэтому мы не видим смысла в его регистрации.
    --
    С уважением,
    Служба поддержки поиска
    mailto:search.support@rambler-co.ru

    Сохраняйте, пожалуйста, текст этого сообщения при переписке.
    _____________________________________________________________
    А как это понимать? Не бывает ведь сайта одного единственного на не индеитичную тему.Почему так????

  34. Автор блога Виталий:

    Игорь, меня удивил ответ службы поддержки Рамблера. Они не мотивировали отказ, отделавшись общими отговорками, на основе которых трудно сделать предположение, что и как на сайте нужно исправить, чтобы всё работало успешно.
    Я поражён...

    С другой стороны, и траффик с "Рамблера" не настолько велик, чтобы решалась судьба сайта. Ваша цель - Яндекс. Туда стремитесь - это основной источник трафика у нас в СНГ.

  35. Александр:

    Ну что я могу сказать... мой сайт проиндексировался на третий день и в яндексе и в гугле и в рамблере дня через 4. Секрет был понят раньше при раскрутке первого сайта... Так вот RSS это хорошо, но совсем не обязательно. Я добился быстрой индексацией добавлением сайта в закладки социальных сервисов, таких как БобрДобр. Так же использую эти сервисы для быстрой индексации новых страниц, добавляя закладки с ссылками на нужный раздел. Обязательное условие при добавлении закладок - указание популярных тегов. Почему быстро индексируется сайт в этом случае? потому как роботы с этих сайтов вообще не уходят (не то что заходят раз в три дня на ваш сайт) Они сидят на этих сайтах круглосуточно и переходят по опубликованным вами ссылкам на ваш сайт и успешно его индексируют. Плюс к этому закладки добавляют ИЦ не много, но десяточку дадут точно. Моему сайту две недели, но он уже весь проиндексирован, жду обновления ИЦ.
    И так в догоночку не ради рекламы, а ради совета добавлять закладки удобно, используя bposter.net Кстати готов обменться ссылками, кому интересно пишите.
    И про яндекс-люблю и ненавижу одновременно! Люблю за приток трафика, ненавижу за большую инертность и долготу индексирования не только самого сайта, а и размещенных на других ресурсах, где посещаемость за 1500 хостов в день...
    Всем удачи!

  36. Denis:

    Народ помогите! Мой сайт salvia-magazin.narod.ru не хочет индексировать не один поисковик((( я в этом деле новичек, но попробуйте обьяснить как можно более простыми словами че нужно делать?! Индексировал вручную, не помогло, зарегистрировался на топ100 liveinternet и mail тоже не помогает((( может это все из за того что сайт на народе?

  37. Александр:

    скоро будет целая наука о продвижении сайтов в поисковых системах)))действительно, Google проиндексировал сайт самым первым и буквально за два дня после подачи заявки...по поводу Яшки, то он был вторым(долго не приходил его робот ко мне в гости).Пришел случайно(была ссылка из форума...по ней он и проиндексировался)...в рейтинге Рамблера он был уже давно,однако посетил несколько дней назад)))

  38. Наталья:

    я в шоке от индексации Яндекса. У меня 4 сайта - не ахти какие - я еще пока новичок в этом деле, но как-то он один проиндексировал - 6 стр, второй пропустил, третий и четвертый - только главные страницы в индексе... а дальше? ссылки не нашел, чтоли?
    в общем, спасибо блогоам, подобным этому, щас попробую "подвигать" сайты - может чего и получится

  39. Автор блога Виталий:

    Denis
    Ваш сайт уже есть частично индексе "Яндекса", "Рамблера", "Yahoo". Дело лишь во времени. Да, сайты на бесплатных хостингах и на доменах 3 уровня проходят первичную индексацию дольше в русских поисковых системах, чем сайты на доменах .RU и .SU.

    Наталья
    Вам тоже нужно немного подождать. По идее, проиндексироваться должны все страницы ваших сайтов. Если этого не произойдёт, попробуйте создать карту сайта Sitemap или обратиться в службу поддержки "Яндекса".

  40. Андрей:

    Я добавил свой сайт в сервис регистрации Яндекса. Робот загрузил 1 страницу и нашел 1 ошибку - "Документ запрещен в файле robots.txt", хотя я этот файл не редактировал.Как могло так получиться?

  41. Автор блога Виталий:

    Андрей:
    На вашем сайте действительно есть файл robots.txt, составленный неправильно. Согласно стандарту, все папки, запрещённые к индексации должны описываться по примеру:
    Disallow: /Имя папки/

  42. Морозов:

    Продолжение будет?
    Были бы признательны :-)

  43. Игорь:

    Здравсвуйте, Виталий.Мои посты под номером 29 и 34....рамблер проиндексировал сайт все же.А вот яндекс никак не хочет.Следовал советам Платона(что я только не делал)Дизайн сменил, уникальный контент 100% на главной, делал все удобно для пользователей и тд....но толку не помогло.Однообразные сообщения в течении 2-ух месяцев: "развивайте сайт......." и "наши алгоритмы приняли........" уже просто надоели.....Но через месяц увидел что Тиц у моего сайта стал 10.А в индексе так и нет.что мне делать? но раз тиц появился это лучше или нет? из этого следует что рото яндекс все-таки проиндексировал ссылки?! такое ощущение что суппорт яднекса на сайт даже не смотрит, а рандомам определяет включить в индекс или нет.Порой такие говносайты есть в рунете, что даже текс не разберешь из-за нудной рекламы......

  44. Автор блога Виталий:

    Что показывают логи на вашем сайте? Отмечено ли присутствие основного индексирующего робота? Определите это по юзер-агенту этой поисковой системы или по IP-адресу роботов, которые вас посещают. (Yandex/1.01.001 (compatible; Win16; I) - основной индексирующий робот этой поисковой системы).

    Тиц может быть и у сайтов, которые не находятся в индексе этой поисковой системы. Да, поисковая система видит ссылки на ваш сайт со страниц других сайтов, но это совсем не означает, что робот перейдёт по ссылке и обязательно занесёт в себе в базу ваш сайт. Не нужно ориентироваться на этот показатель. Главным показателем посещения основным индексирующим роботом вашего сайта являются логи.

  45. Dirlsoons:

    Ну и у меня тоже.

  46. annodejainy:

    Блин вот читаешь кажется тоже так напишешь, а сядешь писать ничего в голову не лезет..

  47. Mihail:

    Мой сайт detiekb.ru Google и Yandex проиндексировали на 5ый день, чаще заходит google. Для того чтоб меня заметили поисковики ни че не делал.

  48. Автор блога Виталий:

    Mihail, ссылки тоже нигде не указывали на других сайтах?

  49. HOK:

    Кстати каталог Open.WebAlta уже умер, так что засунуть туда ничего не удастся....

  50. Автор блога Виталий:

    HOK, Да, это действительно так. Статья была написана, когда этот каталог ещё работал.

  51. jack.sun:

    А у меня с рамблером борода какая то, блогу больше месяца, топ 100 поставил сразу же. Зона "ру" Яндекс и Google индексирует прекрасно, контент уникальный. А Рамблер всё никак.
    :?:

  52. Автор блога Виталий:

    jack.sun
    1 месяц - это ещё не тот срок, при котором следует волноваться. Это даже нормальное явление. Если в течение 3-х месяцев сайт не появится в индексе поисковой системы, то можно будет смело писать в службу поддержки.

  53. SER.P:

    Здесь можно проверить индексацию сайтов - raskruty.ru/tools/index/
    Проверка в Яндекс, Google, Rambler и Yahoo.

  54. Павел:

    У меня пока в индексе Яндекса 13 страниц. Очень медленно...

  55. Владимир:

    У меня почему то сайт можно найти только по домену seoklub.ru а по поисковым фразам найти не могу. Сайт проиндексирован давно уже менят и описание и title и текст на страницах. Подскажите что можно сделать. Спасибо заранее.

  56. Сергей:

    Такая же проблема как у Владимира.Сайт vo-bank.com который можно в Гугле найти только по домену.А в яндексе его еще нет.

  57. NecroSith:

    А добавление и индексация, это всё бесплатно или платно?? :?: :?: :?:

  58. Zerohold:

    Все приблизительно так и есть. Внес сравнил со своими наблюдениями, внес коррективы. Для Yahoo. Спасибо

  59. Universaliya:

    А мой сайт Яндекс не хочет индексировать. Спросила у Платона почему - ответил, что "Страницы Вашего сайта осуществляют перенаправление на страницы других доменов, не предоставляя пользователям какого-либо ценного собственного контента." - вот и думаю....чтобы это значило )

  60. Автор блога Виталий:

    Владимир:

    Смотря какие поисковые запросы используются. Увеличивайте количество ссылок на ваш сайт по конкретным ключевым словам.

    Сергей:

    Так часто и бывает. "Яндекс" долго включает иностранные домены в поиск. Ваш домен зарегистрирован недавно. Индексация вашего домена уже пошла. Некоторые страницы в индексе присутствуют. Подождите до следующего апдейта поиска "Яндекса". Если сайт так и не будет проиндексирован, пишите в службу поддержки "Яндекса".

    NecroSith:

    Добавление в поисковые системы происходит бесплатно. Вы просто сообщаете роботу о том, что существует ваш сайт. А робот уже сам решит, когда ему ваш сайт проиндексировать. Возможно, он раньше его найдёт по ссылкам в Интернете.

    Universaliya:

    Возможно, ваш сайт использует HTTP-редирект 301 или 302. В таких случаях сайты могут не индексироваться поисковыми системами, т. к. эта техника часто применяется в строительстве доров. Попробуйте избавиться от редиректов на вашем сайте и снова обратитесь в службу поддержки "Яндекса".

  61. Павел:

    Виталий, скажите пожалуйста, почему у меня в яндексе проиндексированна только главная страница :sad: , хотя во всех остальных поисковиках, намного больше!? (сайт pavlyxa.ru)
    Может такое быть, что мой блог находится в бане!?
    Зарание спасибо!!!

  62. Автор блога Виталий:

    Павел:
    То, что в индексе есть хотя бы одна страница, уже означает, что ваш сайт не забанен. Это очень частое поведение "Яндекса", связанное с первичной индексацией сайта. На моём блоге раньше тоже была всего одна страница проиндексирована некоторое время. Затем поисковый робот добавил в базу все остальные страницы блога.
    Если до этого ваш сайт вообще не был представлен в этой поисковой системе, то это нормальная ситуация. Подождите немного, если ситуация не изменится, пишите в службу поддержки "Яндекса".

  63. иван:

    Обычно индексация сайта всеми поисковиками совпадает с завершением основной работы над сайтом.Когда сайт в наших глазах уже является сайтом с большой буквы.
    А куда нам торопиться,если мы работаем для людей,а не для роботов? :razz:

  64. uran-abbat:

    А по приколу сегодня вогнал в Гошу за 16 минут

  65. Ирина:

    У меня сразу как-то в Яндексе много страниц появилось, а вот шел он очень долго до меня. :roll: Гугл пришел быстро, но страниц пока мало в индексе :???:

  66. Kernel_panic:

    Гуголь меня невзлюбил... Сначала я вообще игрался с сайтиком и менялись ссылки часто и в гуголь попали как раз эти уже давно мертвые ссылки. Удалял их через веб морду и запрещал в robots.txt но все равно все это висит в кэше гугла. Уже полтора месяца новых страниц в индексе гугля не появляется,хотя гуглобот заходит раз по 10 в день. С яндексом все лучше. Первая индексация произошла недели через 2. Потом через неделю появилось 22 страницы у яши ,а еще через неделю их стало 33. С Yahoo примерно так же. Обновляется индекс не так часто но он хотя бы есть. Вся надежда на Яшу. Посмотрим что дальше будет

  67. Виктор:

    Спасибо за статью. Всё понятно и красиво расписано. У поставил заявку на индексирование своего блога в гугл. Он за 1 день проиндексировал 7 из 13 страниц. Не знаете, будет он остальные индексировать позже, или на них он уже болт забил?

  68. Автор блога Виталий:

    Виктор:
    Я думаю, Google в скором времени проиндексирует все страницы вашего сайта. Такое бывает, что при первичной индексации в индексе есть не все страницы сайта.

  69. Kernel_panic:

    Вот такая интересная вещь, сменил домен на зону .ru (новый купил) и через 5 дней уже был в индексе Гугла, Яша пока тормозит. По сравнению с месячным ожиданием индекса старого домена этот проиндексировался мгновенно.

  70. Консантин:

    Не могу проиндексировать сайт. А есть гденибуть платная индексация?

  71. Автор блога Виталий:

    Консантин:
    Платной индексации не существует. Поисковые системы индексируют бесплатно.

  72. p0kem0n:

    у меня такая проблема В яндексе " Ваш сайт не проиндексирован (Индексирование сайта запрещено в robots.txt)" как поменять robots.txt ?
    захожу нажимаю изменить содержимое файла меняю сохраняю
    жму посмотреть файл и там все запрещенно.Хотя в самом файле все разрешено. ЧТО МНЕ ДЕЛАТЬ ? заранее благодарен

  73. Kernel_panic:

    Ну значит неправильно правила созданы.
    User-agent: Yandex
    Allow: /
    Попробуй так,если будет нормально ковыряй правила

  74. Автор блога Виталий:

    p0kem0n:
    Скорее всего, у вас хостинг на Ucoz, а там все созданные недавно сайты находятся на карантине в течение 30 дней. В течение этих 30 дней файл robots.txt редактировать нельзя, а сайт не индексируется поисковыми системами. Сделано это для того, чтобы избежать наплыва спаммеров. Как только пройдёт месяц, возможность редактирования этого файла у вас появится. Если не появилась, то обратитесь в службу поддержки хостинга.

  75. Ходус Андрей:

    По-моему ждать индексирования глупо. Лучше обменяться ссылками с сайтами с похожей тематикой (у которых высокий рейтинг) и сайт проиндексируется автоматически.

  76. Автор блога Виталий:

    Ходус Андрей:
    Да, вы правы, Андрей. Да и вообще можно писать статьи хорошие, на вас итак будут ссылаться, если они будут интересные. Вам даже о раскрутке сайта думать не придётся.

  77. Ходус Андрей:

    И то верно :)) Но прежде чем оценить статьи, люди должны попасть на сайт, а для этого он уже должен быть проиндексирован))

    Я скорее про всякие закладки, где можно опубликовать свой блог, если разместить в 6-7ми сервисах свою ссылку, можно будет уже завтра увидеть свой блог в гугле :)

  78. Автор блога Виталий:

    Ходус Андрей:
    Иногда даже достаточно ссылки с какого-нибудь форума или комментария в блоге. Ну можно ещё со страниц другого вашего сайта, проиндексированного поисковыми системами, сослаться.

  79. Роман:

    всем здрасте! у меня такая проблема сделал сайт начал добавлять в поисковики везде нормально, яндекс пишет урл запрещен к индексации, проверил по истории доменов, домен с весьма внушительной историей, писал в аддурл отвечали типа развивайте сайт и пр. полтора месяца назад написал письмо, после того как привел в порядок сай (уникальный контент и пр.) ничего не ответили, но с запрета сайт сняли, в адурилке добавляется, но вот уже полтора месяца не индексируется, притом что в гугл и рамблер все нормально, что делать, домен очень не хочется менять, уж оч он мне понравился...

  80. Роман:

    да, адрес сайта plitkaplus.ru

  81. Автор блога Виталий:

    Роман:
    Известно, что иногда "Яндекс" довольно долго проводит первичную индексацию сайта. Процесс может занять даже 2-3 месяца.
    Но, тем не мнеее, просмотрите код ваших страниц: возможно, они не нравятся "Яндексу".
    Я, мельком глянув, обнаружил следующие недочёты, которые могут сказаться на индексации вашего сайта:
    1) Заспамленность тега Title - там должен быть небольшой связный текст или заголовок статьи, но никак не перечисление ключевиков
    2) Заспамленность метатега Description. Этот тег создан для короткого описания, а не для перечисления ключевиков
    3) Внизу главной страницы ссылка на главную же страницу со списком ключевиков
    4) Неправильно оформленный файл robots.txt. Имеет смысл его переписать, для "Яндекса" сделать отдельные директивы. На данный момент у вас всё в куче - так делать не рекомендуется, особенно, если используются директивы, которые не поддерживаются другими поисковыми системами.

  82. Роман:

    ну это все понятно, но во первых вешал на сайт попутно другой домен он его индексирует (keramostroi.ru сейчас опять повесил...) и по тому же принципу у меня еще один сайт, т.е. все те же ключевики в тегах ссылки с главных и пр. все индексируется нормально, думаю проблема не в самом сайте а в домене...

  83. Автор блога Виталий:

    Роман:
    Почему вы сразу об этом не сказали? Дело в том, что "Яндекс", вероятно, склеил ваши домены. И вполне естественно, что сайт в поиске не может показываться сразу по 2 доменам. Скорее всего, в этом ваша проблема. Домен склеен с другим доменом.

  84. Роман:

    не думаю потому что позже домен keramostroi индексировался с другим сайтом..., ну.. вобщем это вряд ли.., и висел он не так долго, да и в robots прописан host: plitkaplus.ru но спасибо за совет, сниму перенаправление что бы точно не склеил, а то еще этих проблем не хватало... :smile: Вчера разговаривал с сеошниками, посоветовали писать в службу поддержки(заваливать письмами) говорит проблема может быть в глюках яндекса, запрет с аддурл они сняли, а запрет на индексацию еще где то остался.., вообщем чувствую предстоит долгая и мучительная переписка...

  85. Автор блога Виталий:

    Роман:

    У вас файл robots.txt составлен некорректно. Перепишите его, согласно требованиям, изложенным в моей статье: http://dataword.info/robots.php

  86. Балакирев Никита:

    Написал программу , которая может упростить индексацию больших сайтов. Она из карты сайта в хтмл файле создаёт совокупность файлов на каждом из которых может быть расположено фиксированное число ссылок
    :roll: http://lifeisfine.ru/2010/04/parser-sitemap-v-kartu-sajta/

  87. Роман:

    Подскажите как быть если яндекс склеил домены, что нужно что бы их расклеить?

  88. Автор блога Виталий:

    Роман:
    Если домены склеены, то на одном из доменов поместите другое содержание сайта. Сделайте оба домена максимально не похожими друг на друга. Через какое-то время поисковая система сама расклеит домены. Также снимите все редиректы, если таковые имеются. И дождитесь 2-3 обновлений выдачи. Если этого не произошло (домены до сих пор склеены), напишите в службу поддержки поисковой системы и подробно объясните вашу проблему.

  89. Serega:

    Я тоже запустил сайт stok-carpets.ru
    а индексации так и нету, только копия главной странице, спасет только время?

  90. Автор блога Виталий:

    Serega:
    Прошло ещё слишком мало времени, чтобы делать какие-либо выводы. Можете постепенно увеличивать количество внешних ссылок с трастовых ресурсов на страницы вашего сайта.

  91. Блог Смирнова Петра:

    :sad: почему то мой сайт яндекс выдает в поиске но в яндкекс.вебмастере пишет что ваш сайт не проиндексирован. В чем дело? подскажите

  92. дмитрий:

    виталий тебя спасет только время и ссылки на сайт...

  93. Автор блога Виталий:

    Блог Смирнова Петра:
    Задайте этот вопрос службе поддержки "Яндекса". Как правило, данные в панели "Я.вебмастер" обновляются реже, поэтому не всегда отражают реальную ситуацию. Но если всё же сайт так и не отображается в панели долгое время, а в поиске есть, то есть смысл обратиться за помощью к ним.

  94. [засекречено]:

    Подскажите!
    Я забыла пороль от рамблера и не помню контрольный вопрос!
    Можно вернуть мою почту или уже все?

  95. Автор блога Виталий:

    [засекречено]
    Похожая проблема, только с сервисом Mail.ru. Вы случайно не помните, не указывали ли вы в анкете альтернативный электронный адрес, на который, в случае чего, можно попытаться выслать пароль от почты? Если да, то можете им воспользоваться.
    А так да. Если вы не помните пароль и секретный вопрос, то шансов вернуть почту мало. Как вариант, можете написать службе поддержки и детально рассказать о вашем ящике, прилагая как можно больше доказательств, что он именно ваш. Возможно, вам повезёт, и адрес вернут.

    Если же не поможет, то остаётся ждать. Через какое-то время неиспользуемые ящики аннулируются, и в последствии их можно заново зарегистрировать.

  96. Роман:

    Добрый день Виталий! Я уже писал Вам по поводу сайта plitkaplus и keramostroi проблема так и не решилась. Писал в яндекс, сказали теперь все отлично, через 2 недели проиндексируется, но не тут то было, прошло 3 недели результат нулевой. В выдаче в кеше яндекса на keramostroi висит контент сайта plitkaplus хотя там был просто шаблон интерент магазина аналогичный тому из которого сделан plitkaplus, прописал на обоих сайтах в robots host: www .plitkaplus.ru не помогает, сейчас поставил на keramostroi вообще другой cms вот думаю прописать там в robots host или нет? И чего еще можно сделать, да, склейку яндекс вроде бы не показывает. и у plitkaplus проиндексировал sitemap раза 3 уже..., что за хрень ума не приложу.., запарился я уже с ним...

  97. Автор блога Виталий:

    Роман:
    Вот вы пишете: "прописал на обоих сайтах в robots host: www .plitkaplus.ru"
    Зачем вы это сделали? Директива HOST отвечает за то, какой из доменов является ГЛАВНЫМ ЗЕРКАЛОМ! Это прямой путь к склейке доменов! Уберите пересечения обоих доменов через HOST из файла robots.txt.

  98. Роман:

    Виталий:
    Да убрал уже, уже и на keramostroi абсолютно другой движок поставил, теперь буду ждать апдейта, можт поможет...

  99. Yury:

    Очень понравилась статья.Я полный профан в сети и вебмастер из меня никакой,но надеюсь с помощью ваших статей и из меня что-нибудь получиться.

  100. hunter1:

    У меня яндекс сразу начал индексировать,гугл очень медленно,а рамблер всего один раз.

  101. Дмитрий:

    Не понимаю почему Yandex не индексирует наш сайт www .keramolist.ru хотя Google и Yahoo давно проиндексировали, а яндекс не хочет, робот яндекса "Yandex/1.01.001 (compatible; Win16; I)" появляется постоянно... Что посоветуете? Как повлиять на скорейшую индексацию в яндексе?

  102. Автор блога Виталий:

    Дмитрий:
    Ваш сайт создан недавно. На данный момент у вас всё в порядке. Это стандартная ситуация при индексации новых доменов.
    Роботу "Яндекса" нужно время для первоначальной индексации проекта. Главная страница вашего сайта уже в индексе. В течение нескольких месяцев следите за положением сайта в индексе. Если же индексации всего контента не будет, обратитесь в службу поддержки "Яндекса".

    Как вариант, увеличивайте количество качественных внешних ссылок на ваш сайт, только не увлекайтесь. Всё должно быть в меру.

  103. MassaneT:

    Имею проблемы с индексированием нескольких своих сайтов, домены дроп, попробую поработать по предлагаемой схеме, посмотрим что получится

  104. Дмитрий:

    Спасибо за ответ, Виталий! Яндекс проиндексировал УРРРААА!!! А вот rambler не хочет...

  105. Василий:

    Яндекс вообще тормоз, ему и в ЖЖ-шках и в каталогах ссылок ссылку на свой сайт тыкаешь, а он не хочет ее кушать. на новом сайте хочу попробовать, как тут советовали через социальные закладки.

  106. Diesel-PLGT:

    Добавил урлу сайта во все поисковики - гугл сразу схавал все страницы, а яндекс индексировал только главную, да и то без поисковых фраз, тупо название сайта (оно же название страницы). Подскажите плиз, с чем это может быть связано? И если не сложно, гляньте на возможные ошибки с тегами, robots.txt и прочим, а то я совсем новичок. Сайт world-of-sushi.ru. Заранее спс!
    P.S. Прошу не судить строго - первая работа над сайтом, плохо получился...

  107. Ирина:

    А я бы не согласилась на счет закладок и блогов яндекс. Это кому как повезет. У меня сайт biznecc.ru не индексируется полтора месяца. При том, что первым делом в различные закладки был добавлен, rss форума в яндекс блоги. И наоборот другой сайт только добавила в форму добавления сайтов в яндекс, нигде не продвигала ни в закладках, нигде. Проиндексировался за 2 недели. Теперь думаю, что яндекс лояльнее к сайтам, на которые ссылок в интернет нет...

  108. Автор блога Виталий:

    Diesel-PLGT:
    У вас новый домен, всё происходит по правилам первоначальной регистрации. Проблем пока что нет.

    Ирина:
    Это не всегда так. Ссылки должны быть трастовыми с тематических ресурсов, которые относятся к вашему сайту.

  109. Ирина:

    Виталий, с тематических ресурсов, наверное, стоило бы делать ссылки, не могу не согласиться! А вот регистрация в каталогах и закладках только созданного сайта, как я теперь думаю, вредит индексации. Увы, горький опыт.

  110. Автор блога Виталий:

    Ирина:
    В любом вопросе важно знать меру, особенно для первоначальной регистрации. Нельзя злоупотреблять ссылками. Всем же понятно, что недавно созданный сайт не может резко получить много входящих ссылок с закладок и каталогов, т. к. за такое короткое время просто люди не могут узнать о его существовании. Закладки нужны и важны, но во всём нужно знать меру, в том числе и ссылках с популярных ресурсов. Ссылки должны расти постепенно, без резких скачков.

Хотите высказать своё мнение по теме? Пишите!

ВНИМАНИЕ!
Комментарии, которые не несут смысловую нагрузку, могут быть удалены! В URL можно использовать только ссылку на ваш блог или Twitter, ссылки на другие ресурсы могут быть удалены.

Поля, помеченные *, обязательны для заполнения.


Честные способы раскрутки сайтов от SEOMAIN.

Потребление памяти: 11.82MB