Skip to content
 

Индексация сайта в Яндексе

YAndeks-naydetsya-vse

Создав новый сайт, молодой вебмастер с нетерпением ждет, когда же пройдет первая индексация сайта в Яндексе.

Приятно чувствовать себя молодым. Очень многие вебмастера с любовью говорят о своем сайте: «Мой сайт еще совсем молодой». Понятно, что молодые сайтостроители иногда не владеют какими-то нужными знаниями и методиками. Мудрость приходит с возрастом.

Мне, например, было очень интересно узнать, что же такое индексация сайта, и как проходит индексация сайта в Яндексе.

Считается, что Яндекс в первую очередь проводит индексацию русскоязычных сайтов. Поэтому сайты на доменах русскоязычной зоны  ru, su, ua, рф, на начальном этапе индексируются гораздо быстрее, чем на доменах буржунета com, net, info и прочих.

Это следует учитывать при выборе доменного имени. Правда потом, когда обнаруживается, что сайт русскоязычный, ситуация выравнивается. Но есть вероятность, что первую индексацию придется ждать дольше.

Как поисковый робот может узнать о новом сайте? По ссылке с другого уже проиндексированного сайта или после регистрации сайта в поисковой системе — добавления в аддурилку.

Аддурилка Яндекса, аддурилка Google, так же как и сервисы для вебмастеров других поисковых систем предоставляют такую услугу. Вы размещаете туда Url своего сайта и регистрируете его. Не следует забывать, что там тоже может быть очередь, а, значит, индексация страниц сайта может произойти не мгновенно. Всему свое время.

Как же происходит индексация сайта? Любая поисковая система имеет свои дата-центры, где многочисленные сервера хранят информацию о проиндексированных документах. Эта информация и попадает в поисковую выдачу.

Поисковый робот по ссылке приходит на новый сайт или документ (страницу) и считывает информацию. Начинается индексация сайта в Яндексе.

Поисковая система особым образом преобразует информацию и сохраняет ее на серверах своего дата-центра.

В чем смысл такого преобразования? Все слова нового документа выстраиваются в алфавитном порядке, и рядом с каждым словом указываются его координаты и другие нужные для поисковика данные. Если слово в документе встречается несколько раз, то рядом с ним будет несколько наборов координат.

Преобразованный документ особым образом сжимается. Получается совсем небольшой по размеру текстовый файлик, который и будет участвовать в поиске.

Это так называемый алгоритм инвертированных индексов или обратная индексация.

Такой алгоритм позволяет значительно ускорить поиск. Недостаток алгоритма в том, что информация искажается и от этого страдает качество.

Но наряду с обратной индексацией, поисковая система сохраняет и копию Вашего документа (прямая индексация).

Для чего это нужно? Вы, наверное, уже заметили,  что по разным поисковым запросам на одну и ту же статью выводится разное описание (сниппет) в поисковой выдаче.

Это поисковая система каждый раз вырезает подходящую фразу описания (сниппет) из Вашего документа. Поэтому документ и должен быть под рукой, и в поисковой выдаче Яндекса присутствует копия документа.

А вебмастеру стоит позаботиться о хороших сниппетах, чтобы привлечь внимание посетителей. Ведь именно читая эту строку, посетитель принимает решение, какой сайт выбрать для просмотра в поисковой системе.

Вид поисковой выдачи Яндекса

Если честно, такой сниппет я  совсем не ожидала увидеть, в теге описание стоит совсем другая фраза. Но поисковая система решила, что такое описание больше соответствует данному поисковому запросу.

Вот так, не вдаваясь в технические подробности, можно описать процесс индексации. Надо же представлять, как  происходит индексация сайта в Яндексе. Похожим образом действуют и другие поисковые системы.

Для Яндекса важно, чтобы на сайте была установлена карта сайта для поисковых систем и Robots.txt. Требования Яндекса по этим вопросам изложены на  help.yandex.ru. В файле Robots.txt можно дать указание закрыть индексацию некоторых страниц.

Документы, представленные к индексации, должны быть уникальными. Поэтому о плагиате лучше позабыть. Говорят, что Яндекс лимитирует индексацию, и более 100000 – 150000 документов на одном сайте не индексирует. Но рядовому гражданину вряд ли удастся достичь таких огромных чисел. Об этом скорее должны задуматься крупные организации.

Желаю Вам успешной индексации во всех поисковых системах!

Узнай возможные причины, почему Яндекс не индексирует сайт.

Считаешь информацию полезной? Поделись с друзьями!

69 комментариев

  1. Доступное и понятное изложение об индексации сайта

  2. Полезная статья для вебмастера,особенно для начинающего, спасибо!

  3. Спасибо, Елена! Ваши статьи очень хорошие,понятно написаные и дают ценные знания новичкам.

  4. Александр:

    Спасибо автору статьи, понятно разложили все по полочкам про индексацию сайта.Эта проблема очень актуальна.

  5. все доступно написано. это очень полезная информация для начинающего сайтостроителя)))
    Спасибо :-)

  6. Доходчиво объяснено. Благодарю!
    Лена, не знаете ди, если такая ситуация: изменена дата выхода стаьи — с ранней на более позднюю или вообще что-то в стаье добавлено (дополнено) — будет ли происходить индексация (в первом случае вообще страница не проиндексирована, во втором могла уже быть проиндексирована).

  7. Вера:

    Здравствуйте. Пожалуйста подскажите, как мне лучше сделать. Дело в том, что на начальном этапе написания контента я наделала много ошибок и на сайте ещё есть статьи, которые я не успела отредактировать. Есть статьи, которые я исправила, но Яндекс их все равно не индексируем. Поэтому. я отредактировала статью и создала новую запись, а старую удалила.Яндекс проиндексировал ее через 3 часа. Можно так делать?

  8. Алексей:

    Файлы sitemap.xml и robots.txt важны не только для яндекса…

  9. Юлия:

    Сколько раз читаю такую информацию, а только теперь начала понемногу понимать.

  10. ВЕРА! Если старое непроиндексировано, то, думаю, можно. Советую предварительно проверить на плагиат с помощью Адвего — plagiatus.exe
    Скачать из инета, установить у себя на компе и проверять уникальность каждой статьи перед ее публикацией.

  11. По логике после внесения изменений статья должна быть переиндексирована.

  12. Анна:

    Как всегда интересная информация. Учимся, но еще больше надо научиться.

  13. Илья:

    А еще яндекс очень по хитрому страницы в индекс помещает. Сегодня, например, 50 страниц, завтра 20, послезавтра 60. а потом опять 20

  14. Нина:

    Информация полезная для использования каждый день любому начинающему и не очень вебмастеру.Спасибо за ресурс знаний!

  15. Для меня это актуальная тема. Я в этом еще очень мало понимаю, поэтому дополнительная информация совсем кстати. У Вас все очень хорошо получается. Молодец!

  16. Андрей:

    Спасибо за доходчивое разъяснение.

  17. Олег:

    Спасибо за разъяснения:)простые и понятные

  18. Наталья:

    Полезная статья не только начинающему вебмастеру. Немного не по теме: расскажите что-нибудь про Digg. По Вашему совету я зарегистрировалась. Хотелось бы узнать подробности.

  19. спасибо за полезную статью

  20. Полезная статья!У меня вроде бы такая проблема сейчас.Было 9 проиндексированных страниц.Сейчас стало 3.Может из-за того что Робота сменил?

  21. спасибо за доступное изложение! хоть буду примерно представлять как происходит индексация

  22. Лариса:

    Столько интересных материалов на сайте! Буду изучать. Спасибо Вам!

  23. Когда моя статья «что такое открытая ссылка» попала в топ через неделю начались казусы и на первой позиции по этому запросу выходили — «танки онлайн», я естественно написал Платону, в ответе было написано, что проблема будет решаться. Если сейчас задать этот запрос, то результаты выдачи уже гораздо лучше подходят по смыслу…

  24. anna174:

    Жаль, что когда я начинала, не видела Вашу статью! Я так намучилась, пока ждала индексации сайта именно Яндексом!

  25. Как раз сейчас изучаю этот вопрос более досконально, ваша информация пришлась к месту. Как всегда все понятно изложено. Спасибо за статью.

  26. Создается впечатление матерого сайта, не верится, что сайт создан недавно и через тренинг Твой старт. Я нахожу много интересного для себя. А еще сколько материала потом мне пригодится. Про индексацию еще больше узнал, спасибо.

  27. Спасибо за полезную статью, некоторые вещи узнал!

  28. Антон:

    Крутая статья, спасибо. У меня с индексацией сложности. После регистрации в яндексе, он мне сказал, что в моем роботе закрыт от индексирования весь сайт. Как такое может быть?

  29. А я вот думала: ну почему мой сайт все никак не индексируется… А он и «com», и аддурилки я еще не использовала. Большое спасибо за информацию и за правильный заголовок — я на него и пришла, а так бы дальше барахталась.

  30. Владислав Никитин:

    В последнее время мнения начинают расходиться, даже пользуясь аддурилкой, яндекс не всегда принимает это как полезное действие, скажем в силу того, что Вы слишком часто это делаете…

  31. Павел:

    Не нужно торопиться с индексацией — делайте полезный сайт для людей и Яндекс непременно его проиндексарует. Не суетитесь с аддурилкой.

  32. Артем:

    Коллеги, у меня индексировалась только 1 страница. С чем это может быть связано? 70% страниц находится под фильтром яндекса. помогите, пожалуйста.

  33. Артем! Сложный вопрос. Я посмотрела Ваш robots.txt, вроде все, как у всех. ЧПУ ссылки стоят (если недавно поставили, то может еще немного подождать и будет индексировать), уникальность пары статей проверила — нормально.
    В аддурилку сайт добавляли? Обычно не индексируется, если закрыто роботом или не уникальный текст. Хорошенько разберитесь с этими двумя вопросами.
    Еще, бывает, не индексирует, если малая скорость загрузки сайта и много рекламы.
    Если ничего не помогает, советуют поменять домен. Некоторые хостинги помогают переехать со всем содержимым.
    А еще любая поисковая система оставляет за собой право: хочу индексирую, а хочу не индексирую. Но это, думаю, не Ваш вариант.

  34. Артем:

    Спасибо. Поковыряюсь еще. В аддурилку добавился.

  35. Артем! Вам нужно изменить ссылки и поставить плагин для ЧПУ , иначе все роботом закрыто от индексации, не дождетесь Посмотрите настройки WordPress

  36. Сайт Елены читаю ежедневно, очень важная и полезная информация, но доходит как до утки — на третьи сутки… Спасибо!

  37. Инна! У меня тоже не все сразу получается. А Ваш сайт мне очень нравится, там есть чему поучиться, так что обучение — взаимное.

  38. Ну вот и я подсела на Ваш сайт. Все так интересно. Про индексацию читаю уже не первый раз, и в аддурилках яндекса и гугла добавилась где-то недели 2 назад, но что-то у меня сомнения по поводу моей индексации.Такое ощущенеие, что меня яндекс нормально не проиндексировал, да и гугл как-то странно показывает, типа внутренних ссылок нет имного чего еще.Эх! Скорее всего, нужно и мне дорасти до момента осознания «что есть индексация».

  39. Читаю Ваш сайт. Информация полезная конечно и нужная и многое что показано В картинках я применяю на сВой сайт. Но даже тут. Зашла добаВить для индексации сайт на яндекс и началось — ВВедите назВание приложения (а что это за приложение?) сылку на иконку (какую иконку?) какие то еще требоВания.Тоже самое касается регистрацией В аддурилках. Где хоть почитать про это? У Вас не Возникало идеи создать слоВарик для не умных как я?

  40. Лилия! Для добавления в аддурилку вводится Url сайта и все.

  41. Тамара:

    Спасибо, начинаю понимать. Оказывается я не одна. У меня в статье написано, Добавьте постоянные ссылки в закладки. У меня вопрос Куда и Как добавить и Где взять???
    Как хорошо что есть люди которые разбираются. Спасибо ВАМ.

  42. Елена:

    Благодарю за статью! Успехов Вам!

  43. Тамара! Ознакомьтесь, как установить браузер Google Chrome и сделать там закладки. А расширение браузера RDS bar поможет проверить, проиндексирован Ваш сайт или нет.

  44. Елена, спасибо. Я как-то аддурилку совсем игнорирую. А недавно заметила, что Гугл индексирует сразу — на следующий день. А Яндекс тормозит, но другие сайты про SEO пишут, что это нормально. Яндекс может отставать на неделю. Я поняла — нужно заняться аддурилкой.

  45. alexdent2000:

    спасибо за полезную информацию!

  46. Сергей Куприянов:

    Сниппет поисковой выдачи формируется по своим законам, это правда и это давно проверено на практике, но тег Description обязательно должен содержать описательную часть публикуемой авторской статьи…
    Еще на выдачу очень влияет РЕГИОНАЛЬНОСТЬ поискового запроса…

  47. Проверил индексацию сайта, яндекс показал что у меня есть исключенные страницы и используется мета-тег noindex. Как его убрать? Скажите пожалуйста.

  48. Denis! А нужно ли его убирать? Эти теги специально используют, чтобы закрыть внешние ссылки сайта.
    А исключенные страницы есть у всех. Файл Robots.txt исключает некоторые страницы специально, чтобы не было дублей.

  49. Хорошо, но тогда почему у меня индексируется только одна главная страница, а остальные страницы «закрыты» для индексации этим мета-тег noindex? Спасибо, с уважением Денис!

  50. Denis! Советую прочитать «Почему Яндекс не индексирует сайт?» (включая комментарии) и разобраться со своим robots.txt .

  51. Ирина:

    Спасибо Елена. Очень много советов для начинающих. Постоянно просматривают вас в Твиттере.

  52. Прочитала сначала, что Яндекс не индексирует более 150 000 знаков и ужаснулась. Вот, что значит быть блондинкой.:)
    А статья изложена довольно интересно. Ваш взгляд на все процессы, Елена, мне всегда нравился. Все так изложено здорово. Я прямо картинки в уме рисовала, как Яша из моих статей фразы выдергивает:)

  53. Сергей:

    Вы все очень популярно обьяснили в этой статье, С удовольствием буду читать все остальные ваши статьи!

  54. Карина:

    Спасибо за доступное и интересное изложение в статьях. Сайт достойный уважения.

  55. Ксения Юрьевна:

    Здравствуйте Лена, давно у вас на сайте не была, у вас за это время появились интересные статьи. Я боролась со своими битыми ссылками почти целый месяц.
    Сегодня только прочла у компетентных людей, что robots.txt нужно всегда писать с маленькой буквы, особенно при его вставке в корень сайта.

  56. У меня тоже молодой сайт Пока занимаюсь его развитием и наполнением. Спасибо за статью — очень доступно.

  57. Елена, спасибо! Иду по вашим стопам, прохожу обучение в Твоем Старте.
    У вас классный сайт, живой и полезный!

  58. Алла:

    Спасибо вам большое за информацию! Я думаю эта статья про индексирование в Яндексе будет вполне понятна для каждого.

  59. Марина:

    Здравствуйте, Елена. Очень нравится ваш сайт, добавила его в закладки. Много качественного и нужного контента, особенно для начинающего сайтостроителя. Меня мучает вопрос нужно ли индексировать молодой сайт, если на нем мало контента, либо контент до конца не оптимизирован? Что такое индексация и как её надо делать, примерно понятно, а вот когда это лучше всего сделать?

  60. Марина! Это в большинстве случаев происходит автоматически, при появлении на сайте более 10 уникальных статей в одной из категорий.

  61. Марина:

    Спасибо, Елена! Теперь перестану беспокоиться и буду работать над хорошим контентом.

  62. Елена, добрый день. Подскажите, пожалуйста, где правильно разместить код Яндекс.Метрика? На сайте сервиса написано, что он должен быть размещен между тэгами . Но мой сайт сделан по шаблону, и я не могу найти это место. При открытии кода через Dw и поиска я также не вижу этот тэг. Скажем, код Google Analytics я успешно разместил на главной странице, и он работает. Код яндекс.метрики я разместил вслед за кодом гугл, но яндекс почему-то его не видит. С другой стороны, яндекс успешно индексирует все страницы сайта. Где тут подвох?

  63. Григорий! На молодых сайтах не рекомендуют устанавливать Яндекс Метрику, т.к. она не способствует продвижению сайта, т.к. определяет поведенческие факторы не только для Вас, но и для себя…
    У меня стоит только Google Analytics.
    Ставить одновременно и то и это, на мой взгляд излишне…

  64. Хорошая статья. Впервые узнал что более 150 000 страниц на одном сайте не индексирует яндекс…(

  65. Галина:

    Примите мою благодарность и признательность! Ещё раз убеждаюсь, что женщины — учителя объясняют всё конкретно и на понятном мне языке.

  66. Ирина:

    Елена! Спасибо за прекрасную статью! Много полезного.

  67. А кто компетентен в GOOGLE? Почему PageRank не работает? Или это уже история?

  68. Николай Васильевич! PageRank — это уже история.

  69. Ясное и доходчивое объяснение. Надо Ваш сайт в закладки определить.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *