Индексация сайта – это процесс сканирования Вашего сайта поисковыми роботами (Яндекс, Google, Rambler и др.) с целью включения их в поисковый индекс. То есть статьи, только что написанная, сразу не попадает в результаты поиска поисковых систем, а появится “там” только после индексации этой самой статьи.
Для начала, когда Ваш сайт или блог еще новый, Вам нужно, чтобы поисковики проиндексировали сам сайт в целом. Для этого Вы можете воспользоваться уроком, где показывается то, как добавлять блог в Яндекс, Google и другие поисковые системы.
Как запретить индексацию сайта
Как ускорить индексацию сайта
Многие вебмастера ищут и придумывают все более изощренные способы ускорения индексации сайта. Честно, я за этим не гонюсь. Почему? Почему я не хочу увеличить скорость индексации страниц моего блога? Ведь, если статья сразу появляется в результате выдачи поискового запроса, значит ради привлечения дополнительных посетителей выгодно туда попасть? Почему мне это не нужно?
Ответ прост: мои статьи этого блога индексируются поисковиками в течении нескольких минут! Как? Ответ ниже.
- Если Вы хотите, чтобы статьи индексировались как можно быстрее, просто пишите чаще. Вот примерное поведение поисковой системы: I день: заходит на Ваш поисковый сайт, сканирует его добавляет необходимое в поисковую выдачу, заходит к примеру завтра, опять сканирует, но ничего нового не находит (если не происходило изменений), и следующий раз он уже зайдет к Вам не послезавтра, а где-то а через 3 дня (все сроки условные, постарался объяснить процесс индексации).
Таким образом, можно сделать вывод, что чем чаще обновляется сайт (блог), тем чаще на него заходят поисковые роботы. - После написании статьи, сразу же, в обязательном порядке, сами же нажимайте на кнопку Retweet своего блога (Как вставить кнопку Retweet?). Таким образом, поисковик “проникнет” на Ваш блог через Twitter и др.
- Если Вы наберете, например, в Яндексе, поисковый запрос “как ускорить индексацию сайта”, Вы прочтете много статей, которые будут советовать Вам добавлять в пункт “Сервисы обновления” новые сервисы, на которые будут идти оповещения, после того, как Вы опубликуете статью.Я тоже раньше этим занимался, добавлял туда более 30 сервисов. Но это дополнительная нагрузка на блог, и, как я заметил, и без этих >30 сервисов, мой блог отлично индексируется. В списках сервисы обновлений у меня всего стандартных 3 сервиса (Вы можете посмотреть это зайдя в админку Настройки –> Написание –> Сервисы обновления):
- Создайте карту сайта с помощью плагина Google XML Sitemaps.
- Также крайне желательно создание “человеческой” карты сайта (тот, что выше – для поисковых роботов), к примеру с помощью плагина Dagon Design Sitemap Generator. С его помощью Ваша статья будет находится “на глубине” от главной странице не более чем на 2-3 клика, что тоже есть плюс для поисковиков.
- Поставьте на блог RSS-подписку.
- Грамотно перелинковывайте внутренние страницы. Помните: внутренняя перелинковка необходима блогу, как рыбе вода. Если, конечно же, Вы не хотите, чтобы у Вас было 2-3 читателя.
Как проверить индексацию сайта в Яндексе, Google и др. поисковых системах
Если Вы хотите просто узнать, сколько страниц у Вас проиндексировано в Яндексе (пример), Вы просто можете зайти на панель вебмастера Яндекса. Там Вы найдете всю необходимую информацию (количество проиндексированных страниц показано в графе “Страниц в поиске”):
Как добавлять блог или сайт в панель вебмастера Яндекса, я писал тут.
Количество проиндексированных статей Вы можете просмотреть с помощью SeoBar для Opera (более подробно о нем здесь):
Также проверить индексацию сайта в Яндексе или др. поисковых систем можно с помощью этого сервиса: http://be1.ru/stat/. В начале вводите адрес сайта:
Здесь Вы можете видеть “кнопочки”, при нажатии на которых, будут показываться проиндексированные страницы:
Кстати, кроме проверки индексации сайта в Гугле, Яндексе и других поисковиках, данный сервис обладает довольно интересным и полезным функционалом. Не поленитесь, уделите полчасика своего внимания, возможно, Вы найдете что-то стоящее для себя.
На сегодня все. До встречи на следующих уроках. Всего доброго!
Рекомендую для чтения: Сможет ли Ваш сайт попасть в Яндекс Каталог?
Петр, недавно заметил у reclampa shakin terehoff – страницы заканчиваются на .html, посмотрел у себя на relax-gid – заканчиваются на /
Как сделать .html ? Это влияет на индексацию?
Скачай плагин 301 Redirect – и сделай редирект старых страниц на новые:
http://site.com/stranica/ на http://site.com/stranica.html
В панельке этого плагина и ребенок разберется)))
Удачи!
как сделать нашел, но если поменять, страницы все вылетят из индекса и внешние ссылки битыми окажутся ((
Вот у меня у одного блога все страницы наверное по этой причине и вылетели из индекса яндекса – осталась только одна страница – главная!
нет, явно не из-за этого. Скорей всего АГС. Вот урок про АГС: https://reclampa.ru/sozdanie-bloga/poleznoe_dlya_bloga/kak-vyvesti-sajt-iz-pod-ags-filtr-yandeksa-ags-17-ags-30.html
мне кажется это не влияет на индексацию…
Уже давно это не влияет на индексацию. Поисковые роботы уже ищут все. Это было раньше, когда поисковые системы не так уж были развитыми.
Спасибо вы подытожили мои знания в этом вопросе)
Так сказать кучу по полочкам разложили)
Да это точно, особенно 1 пункт понравился, буду теперь писать больше статей) Сайт у меня правда на дле, но эта статья тоже помогает.
Мои страницы сайта например не заканчиваются на хтмл и ничего не происходит , но гугл же индексирует. Поэтому ничего в этом .
Хороший, качественный контент – уже половина успеха. И думаю это видит сейчас каждый, что пытается продвинуть ресурс с помощью качественного контента. Спасибо за статью, кое что забрал в свой багаж знаний )
Месяц назад добавила сайт для индексации в яндекс, все еще не проиндексировано…. Почему такое может быть?…
И еще один вопрос ( очень нужен ваш совет) – нашла один сайт, который полностью копирует инфу с моего сайта, причем как только статья появляется на моем сайте, она тут же появляется и на том сайте… подскажите что можно сделать, как защититься от них?… Как проверить есть ли они в яндексе, а то получиться – когда яндекс придет на мой сайт, скажет, что это я копирую у них контент…. надеюсь понятно? Жду вашей помощи….
Попробуйте достучаться до хостинга того сайта. Или же выйти как-нибудь на связь с владельцем того сайта…
Поставьте плагин WPCopyRight Pro и отмените копирование правой кнопкой мыши, по крайней мере это создаст трудности для плагиата
Не помогло((( ни первый, ни второй вариант
А ты попробуй жестоко линковать свои статьи тегом текст через каждое предложение, и если они автоматически тырят статьи то и с сылкой, а если в ручную то хоть пусть потрудятся и по вырезают теги и ссылки=)))))
блин тег не делается вот:
<a href="ссылка на твой сайт">текст</a>
Петр, здравствуй!
Сегодня узнал, что яндекс проиндексировал толкьо первую страницу моего блога. в чем может быть причина? В Гугле всё в полном порядке, проиндексированны все страницы.
Спасибо,
Андрей
Не слышал раньше о сервисе be1.ru/stat. Узнал много нового и интересного о своём блоге.
Андрей, у меня такая же проблема, гугл уже давно проиндексировал страницы, рамблер тоже не отстаёт, а вот Яндекс никак не хочет индексировать, ограничился лишь главной страницей. Блог в сети уже полтора месяца.
Пётр, подскажите, в чём может быть дело? Заранее спасибо!
О, отлично! Некоторые моменты новые для меня. Благодарю за статью!
Пётр, у Вас не работает ссылка https://reclampa.ru/blog/plugin-xml-sitemaps. Я уже десяток, наверное, перечитала ваших уроков, где упоминается этот плагин Google XML Sitemaps для создания карты сайта – и везде ошибка 404.
Спасибо, исправил.
Да у меня та же проблема с индексацией, только первую страницу проиндексировал. Хотя блогу больше 3 месяцев и статей достаточно. Подскажите пожалуйста в чем проблема?
может статьи репнутые, или есть похожие)))?
есть такие сервисы что статьи проверяют на схожесть, попробуйте мож чем то помогут+)
Петр, добрый день. Помогите, пожалуйста, советом. Моему блогу всего около месяца. И вот недавно я прочитала статью на одном из сайтов о том, что google индексирует одни и те же
статьи дважды (на главной странице и в ярлыках). Там было рекомендовано запретить индексировать
ярлыки и архив блога. Я и сама заметила, что когда проверяю сколько у меня страниц проиндексировано вылезает какое то неимоверное
количество (включая те, что я давно удалила). Но дело в том, что как только я это сделала, меня на следующий день проиндексировал Яндекс
(я ждала этого около 3 недель). И захватил именно страницы из ярлыков 7шт. и больше ни какие. Что делать? Снять запрет или ждать пока он
меня снова поситит и возмёт то, что нужно????
Здравствуйте!!!
У меня возникла проблема… Сайт отображается в яндексе как-то лысо))
Т.е. обычно он выдает в списке сайты, у которых есть название и описание, а у моего их нет (только домен отображается). Подскажите, как их добавить, чтобы они отображались?
Извиняюсь, что немного не по теме данного урока… Поискала, но не нашла подобного.
Буду благодарна за помощь!
Тут возможна такая проблема: если Вы не установили Platium Seo Plugin, то описание не будет показываться. Если Вы установили его, то пропишите в его настройках в поле Home Description его описание. Через некоторое время сайт проиндексируется и будет и название, и описание.
Артур, спасибо за ответ 🙂
Данный плагин установлен и описания в полях “Home Title” и “Home Description” есть…
Сайт функционирует 2 месяца, пора бы уже отобразиться…
Попробую данный плагин переустановить)
Я точно не понимаю вас ВСЕХ, но может вам просто мето-теги поставить, я так делаю и сё а про «Home Title» и «Home Description» я воще не слыхал=)))
Ваш комментарий ожидает модерации.
А как запретить индексацию html страниц?
Когда я перехожу через поисковик к себе на блог вижу такую надпись ”
Не найдено Извините, но того, что Вы ищете, тут нет.”
Вот например http://games1.x10.mx/arcade/beep-2011rusrepack-by-sxsxl.html
Отличный у Вас сайт, нашел для себя много полезной информации. Спасибо!
Соглашусь, здесь очень много интересных статей, вы не смогли бы подсказать – как можно проверить количество обратных ссылок сайта? Раньше проверял yahoo, а теперь этот сервис почему то не работает.(
впиши в поисковик “Онлайн анализ сайта” и там их те кучя вылезет, они се провиряют и ТИЦ и PR и обратные и внешние ссылки всё при все. [прим. админ.: много комментариев с ссылками на Ваш блог. Еще один подобный – бан-лист]
тоже проблема с индексацией робот яши уже раза 4 заходил и ничего даже главную не проиндексировал а в гугле все нормально вот только страниц многовато слишком в индексе. Короче незнаю на одном слишком много на другом вообще нифига. Если кто знает в чем проблема напишите пожалуста. Зарание спасибо!!!
я не знаю, но может БАН=(
ДОбрый день..
Все делаю как Вы говорите, а индексации вообще нет…
роботы был на сайте но ни одну страницу не добавил..
В чем проблема вообще не понимаю..
помогите советом.
Петр, добрый день! Буду рада, если кто из многочисленных читателей поможет, чтобы не отвлекать нашего гуру)))). Что происходит с яндекс вебмастером? Или со мной!! Добавляю новый сайт, выхожу на страницу подтверждения прав на управление сайтом. А там ничего не предлагают не мета-тега, не….. всего остального. Вчера тоже самое проделала с Гуглом, сегодня в индексе 23 страницы. Что происходит у меня с яндексом, подскажите пожалуйста. fotovknige.ru
Проблема решилась! Стоит только попросить помощи… Просто зашла через хром и все срослось))). До этого через оперу заходила(((.
Петр, добрый день, подскажите, пожалуйста, что необходимо сделать. Около двух недель назад у меня появился блог fotovknige.ru. Все сообщения в google проиндексировались на 2 день. А сегодня обнаружила, что у меня в googlе проиндексировалась каждая картинка, как отдельная страница. Итого, 234 страницы. В реальности их около 40. Что мне необходимо сделать, чтобы исправить данную ситуацию?
Попробуйте пройти этот урок https://reclampa.ru/raskrutka-bloga/seo_optimizaciya/fajl-robots-txt-pravilnyj-primer-na-wordpress-dlya-yandeksa.html
По мне самое важное в продвижении и оптимизации сайта, это:
* Перелинковка страниц (так как робот будет от одной вашей странице к другой ходить и индексировать, тем самым получается почти карта сайта ток через сайт вес=)))
* А в наборе внешних ссылок самым важным является тематика (она должна быть схожей с вашей)
* ну и в самом сайте самым при самым важным является индивидуальные статьи (контент или как там его называют, забыл=))))
Насчет твиттера интересно, а вот если дублировать статьи в других соцсетях (например в группе вконтакте, фейсбуке, одноклассниках) с ссылками, даст эффект?
Подскажите. Допустим я написал контент на ресурсе, а через 2 дня его у меня спионерили-скопировали на свой сайт. И поисковик проиндексировал ресурс плагиатора быстрее. Получается моя статья станет работать на другого? И вот допустим в блоге куча сообщений-тем. Нужно ли вручную прописывать их все в поисковике. Спасибо отдельное за Вашу работу-труд титанический.
Ерунда какая-то с этим яндексом твориться…статьи индексируются и появляются в поиске затем пропадают…хотя все статьи уникальны, пишу сам…платон ответил шаблоном…прям не знаю что и делать…сайту уже больше меняца…с гуглом все нормально, но трафика с него куда меньеш чем могло бы быть с яндекса…
Петр, помогите пожалуйста! До недавних пор (месяца 2 назад) Яндекс исправно индексировал сайт. А потом почти все страницы выпали из индекса. КАк выяснилось это связанно с ошибкой 500. просмотрела форумы – везде все ссылаются на внутреннюю ошибку сервера. Но как ее решить? Что предпринимать? некоторые пишут, что проблемы с файлом htacces, но он установлен по тому примеру, что вы давали в своих уроках и он всегда был таким. Другие – на ошибки в php коде… а как их найти? подскажите что делать или хоть к кому обратиться за помощью. СПАСИБО!!!
Лилия, как-то у меня что-то на подобие было, связался с тех поддержкой хостинга, они у себя что-то там поменяли, ошибка пропала и сайт стал нормально индексироваться
Да, обратитесь в техподдержку хостинга.
спасибо, что откликнулись – уже голова кругом идет. Я обратилась – они мне сказали посмотреть логи ошибок в личном кабинете (я использую Хостенко, по рекомендации Петра). Там коды какие-то – я так понимаю это связанно с php. лесть боюсь. может посоветуете к кому обратится – скину скриншот. там в общем-то практически одна ошибка по всем страницам – вот пример: mod_fcgid: stderr: PHP Parse error: syntax error, unexpected ‘}’ in /var/www/vhosts/rusarmenia.ru/httpdocs/wp-content/themes/photoframe/footer.php on line 6. Буду премного благодарна, если подскажете что именно надо сделать с этой 6-ой строкой в футере….
вот моя 6-ая строчка футера –
1.Удалите лишний закрывающий знак “}” или 6ую строчку вообще.. .Она у вас – это линия?
2. Возможно вы что-то не так вставили, недокопировав первый, открывающий такой же знак. В таком случае, нужно его поставить, а этот не удалять.
3. Выложите фрагмент кода по больше, можете кинут на мейл, помогу, но аж в понедельник)) можете здесь, думаю найдутся желающие помочь.. все таки конкурс комментаторов..=)
что-то не получается ее разместить. ее не видно просто! спасибо, что откликнулись, сейчас еще попробую
размещайте в комментариях подобные коды в будущем при помощи тега произвольный код
скиньте мне пожалуйста свой мейл – я скину весь файл по почте, а тут не получается разместить часть кода.
СПАСИБО!
a.k.buystocknetwork@gmail.com не обещаю 100% решения!)
Антон, спасибо. я скинула весь файл.
Надеюсь, поможете ….
1. [quote comment=”22683″]a.k.buystocknetwork@gmail.com не обещаю 100% решения!)[/quote]
Антон, в общем Ваши рекомендации совсем не помогли – шаблон полностью съехал, восстановила все как было.
2. [quote comment=”22687″]размещайте в комментариях подобные коды в будущем при помощи тега произвольный код[/quote]
Виталий, возможно я задам глупый вопрос, но он актуален для меня – а как вставить произвольный тэг?
3. моя проблема так и не решена. Может кто-то поможет?
СПАСИБО!!!
Товарищи, кто знает PHP? Откликнитесь, пожалуйста.
Кстати, Петр, Вы как-то писали, что создаете команду для выполнения разных заказов. Готова воспользоваться Вашими услугами, если есть специалисты.
Helpppppp!!! Сайту 4-ый месяц. Индексировался с самого начала. Последние 2 недели запросы робота приходят, но не индексируется Яндексом ни одна страница. Подскажите, пожалуйста, что делать. С чего начинать?
Да, Петр! Круто когда моментальная практически индексация. Такой вопрос: захожу в панель вебмастера яндекса и тамнаписано, что робот посещал сайт допустим сегодня, но новых статей в индексе нет (((. Написал по этому поводу в поддержку – ответили: после посещения роботом страницы в индексе появляются в течение 2-х недель!!! Это же пипец! Как понимать??
Зачетная статья , мне очень помогла!
Вы написали, что стоит обновлять сайт каждый день новым материалом. Но у меня такой вопрос. Если у меня на сайте добавляется каждый день новости 2-3 , но текста в них бывает и до 200 символов не доходит, то как вы считаете робот тоже будет чаще заходить?
Заходить будет часто, но из-за качества контента практически нереально “пробиться”.
чтобы не спамить пингами можно поставить плагин WordPress Ping Optimizer, тогда пинги будут отправлять только после публикации поста, а при обновлении/редактировании не будут
«Но это дополнительная нагрузка на блог» – где про 30-ть сервисов.
А как данная нагрузка сказывается на работоспособности сайта?
Если Вы оптимизатор, продвигаете сайт в поисковых системах Яндекс, Google методом покупки тематических SEO-ссылок через ссылочные и статейные биржи SetLinks, Sape, MainLink, LinkFeed, то Вам обязательно необходима проверка индексации страниц, на которых Вы размещаете платные ссылки. В этом Вам поможет сайт и программа iChecker.biz для массовой (пакетной) проверки индексации страниц (URL-s) в поисковых системах Яндекс, Google.
Сколько полезных советов по индексации. Определённые полезные моменты я узнал для себя. Буду применять, а то не все страницы у меня в индексе. Спасибо за статью
Решил тоже внести свой вклад в статью. Вчера все искал как ускорить индексацию яндексом, внятных ответов так и не нашел, и решил для начала выполнить рекомендации яндекса, а точнее одну настроить “If-Modified-Since”. До того как настроил этот параметр, при апдейте первый раз попало 12 страниц в поиск, после еще одного, вообще осталось 10. Вчера наладил это дело, и ура!!! После сегодняшнего апдейта, яндекс добавил все мои труды в свой индекс. Код скопировал с сайта “last-modified ТОЧКА com”, На самом сайте можно и проверить работает ли у вас ошибка 304 или нет. Код установил перед закрывающим тегом /head в файле HEADER. Примечание: Если ваш сайт использует кэш браузера, после установки кода, найдите другой ресурс для проверки, а то на вышеуказанном так и будет писать что 304 не поддерживается.
Вот нашел более компактный код вставляется над всеми надписями в файл HEADER
?php header(“Last-Modified: ” . get_the_modified_date(‘r’))? Только знаки надо поставить по краям
Раньше на блоге спама было меньше )))
Моя последовательность простая:
1) Закидываю текст статьи в Яндекс, подтвердить авторство
2) После размещения странички закидываю ссылку в Яндекс Вэбмастер как новую страницу
3) Бросаю ссылку в группу вконтакте
4) Покупаю дешёвые 2-3 твиттера.
Не знаю на сколько это правильно, но странички попадают в индекс через 1-2 апа
Можно подробнее по первому пункту?
Жаль что http://be1.ru/stat/ не работает уже, но это не страшно так как есть много других сервисов
Мы запустили сервис для ускорения индексации. Это пингер поисковиков и блог сервисов. Пингует напрямую поисковики и опосредованно через ряд сервисов. Пользуйтесь: adne.info/index
Подробно и полезно…. Сейчас работает такой метод продвижения сайтов как преобразование ссылок в изображения….Так что изображения вещь полезная и до конца свой потенциал они еще не исчерпали….
Интересная статья. Подчеркнул для себя полезность ретвитов на статьи блога для улучшения индексации. Раньше не придавал соц. сетям большого значения.
Петр, здравствуйте!
Сайту уже 10 месяцев. Тематика: заболевания суставов. Трафик с ПС около 1,6 к в сутки – и все Яндекс. Домен куплен без истории, сайт наполняется постоянно, ссылки покупаются ежемесячно. Гугл вообще не дает трафика (20 чел в сутки это смешно). Индексация в Яше – 410 стр, в гугле – 344 стр.
В чем может быть проблема и как ее решить?
Гугл очень любит ссылки, можно попробовать поиграться с ссылочной массой.
Подскажите пожалуйста! Яндекс.Вебмастер не индексирует страницы, а пишет “Страница обходится роботом, но отсутствует в поиске”
С чем это может быть связано?
Сайт молодой?
Отличная статья. Вы говорите о ретвите статьи, я же правильно понимаю, что это же относится к вк и фб?