Как узнать, почему яндекс не индексирует страницу сайта?

Содержание

Twitter & Prospero.ru

Наша задача — закупить много разнообразных (по содержанию) твитов с качественных аккаунтов со ссылками на сайт. Обычно 50 штук хватает, чтобы пригнать быстро-роботов, которые за пару дней всё проиндексируют (ну или почти всё).


Создание кампании в Prospero.ru для покупки твитов

Далее можно сразу создавать кампанию или же «перейти к новому варианту»:

Варианты кампаний

Если не переходить, то можно распределить закупку твитов по времени (например, растянуть закупку 50-ти штук на пару дней). Если перейти — то задания на размещение твитов будут выдаваться пользователям по мере их поступления.

Теперь самые главные настройки кампании. Нужно отметить галочкой:

  • «Каждый твит должен быть размещен всего один раз»;
  • «Микроблоги, в которых будет размещена реклама, должны находиться в индексе основного поиска Яндекса»;
  • «Распределить публикации рекламных твитов/ретвитов на все время проведения кампании»;
  • «В одном микроблоге рекламный твит кампании за все время ее проведения может быть размещен всего один раз»;

Затем отмечаем пункт «Использовать расширенные настройки» и выбираем «Минимальное значение klout score» в промежутке от 40 до 50. Чем больше это значение, тем лучше твиттер-аккаунт, однако и желающих выполнить задание будет меньше.

Все остальные расширенные настройки не особо интересны. Разве что можно указать дату в поле «Аккаунт в твиттере должен быть создан до». Я обычно указываю 5 месяцев до текущего момента.

Ну и в конце придумываем сами твиты — текст и ровно одна ссылка, можно ещё хэш-тег добавить. Также можно указать URL твита, чтобы купить ретвиты для него, через вертикальную черту указывается их количество.

Сочиняем твиты для ускорения индексации сайта

Цены на твиты можно ставить минимальные. На данный момент они от 50 копеек — для «старого варианта», и от 2 руб. — для «нового».

На какие страницы сайта покупать твиты?

Да на любые. На главную, на категории, на отдельные статьи или товары. При покупке нескольких твитов на одну и ту же страницу желательно сочинять разные тексты твитов.

Такой метод помогает ускорить индексацию как информационных сайтов, так и магазинов. И лучше всего — именно новых, когда нужно как можно скорее всё проиндексировать.

По опыту могу сказать, что для индексации отдельных страниц этот приём не всегда помогает (бывают такие «застрявшие» страницы, которые никак не хотят влетать в индекс). Тем не менее, для большей части из них этот метод поможет.

Таким образом, алгоритм по ускорению индексации простой:

  1. проверяем, нет ли технических ошибок,
  2. отправляем сайт в AddUrl всех ПС,
  3. размещаем хорошие твиты со ссылками.

Раньше в Prospero даже была статистика, где можно было увидеть, что в такое-то время робот Яндекса перешёл по вашей ссылке в твите. Жаль, нет её сейчас..

По моим наблюдениям, ссылки с Твиттера лучше всего помогают ускорить индексацию сайта именно в Яндексе (с Гуглом часто хватает Submit URL). И гораздо лучше, чем «лайки» в ВК и «классы» в ОК.

Случайные публикации:

  • Как найти нужную картинку – 5 основных источников для поиска картинок….нтернете.

    Но картинки, взятые с Гугл или Яндекс, нельзя использовать для

  • Правильные настройки файла Robots.txt для WordPress — быстро и без плагинов!…так: Disallow: /category/*/ Allow: /category/*/*/ Вообще, с настройками
  • Как загрузить фото для форума на фотохостинг и разместить BBcode…лько картинок одновременно, Вам необходимо кликнуть на зеленый кружок с
  • Создание мобильной версии сайта на WordPress с помощью плагина WPtouch…астройках плагина или приобрести его Pro-версию, но если вам просто нужно,
  • Партнерка для заработка на мобильном трафике GG.Agency…т качества и количества трафика, который Вы можете предоставить для мобильного трафика.

Оставьте комментарий:

Почему сайт не индексируется в поисковиках

Казалось бы, для чего человек создаёт интернет-ресурс? Все очень просто он желает чем-то делиться либо продавать. Так как интернет, это в первую очередь информация, то вебмастер явно захочет ею поделиться. Для этого он создаст сайт, как правило, и будет ждать его индексации поисковыми системами, но что делать если Яндекс не индексирует сайт?

Но пожалуй, хватит о насущном, давайте о реальности поговорим. Вебмастер, создавая сайт, наполняя его контентом, рано или поздно начинает задаваться вопросом, почему мой сайт не посещают? Ведь я прочитал очень полезную содержательную статью «какой тематики лучше создать сайт?» Теперь, как мне кажется я гуру интернет-сообщества вебмастеров и индексация сайта мне безразлична, я позову на сайт знакомых своих…

В чем разница между успешными вебмастерами

Давайте для начала разберёмся, почему у одних вебмастеров сайт индексируется быстро, а вы месяцами не можете попасть в поисковые выдачи показалось бы очень релевантным запросам.

Многие скажут, что ты никогда не узнаёшь алгоритма поисковых роботов и то, как они добавляют страницы в свой поиск после индексации вашего сайта, но сразу скажу сказать точно нельзя, но можно предположить отталкиваясь от ряда правил.

Итак, поиск любой поисковой системы направлен на качественную поисковую выдачу информации, то есть робот должен стремиться к максимально схожим результатам выдачи, что запросил клиент.

Поисковые компаний последнее время все чаще пишут, о том, что им больше по душе сайты (СДЛ), сделанные для людей, а сателлиты они искусственно понижают в поисковой выдаче.

К сожалению для того, чтоб индексация сайта проходила успешно вышесказанного недостаточно в первую очередь вы должны разрешить индексацию своего сайта поисковому роботу. Вот семь наиболее частых проблем, почему сайт не индексируется поисковиками google и яндекса.

Можно ли ускорить индексацию?

Повлиять на скорость загрузки html-документов поисковыми роботами можно. Для этого следует придерживаться следующих рекомендаций:

  • Повышать количество соцсигналов, побуждая пользователей делиться линками в своих профилях. А можно брать твиты с живых аккаунтов в Prospero (klout 50+). Если составите свой вайт-лист твиттеров, считайте, что получили мощное оружие для ускорения индексации;
  • Почаще добавлять новые материалы;
  • Можно по самым дешевым запросам в своей тематике директ начать крутить;
  • Вносить адрес новой страницы в аддурилки сразу же после ее публикации.

Высокие поведенческие факторы на сайте также положительно влияют на скорость обновления страниц в поиске. Поэтому не стоит забывать о качестве и полезности контента для людей. Сайт, который очень нравится пользователям, обязательно понравится и поисковым роботам.

В Google вообще все очень легко — добавить страницу в индекс в течение нескольких минут можно сканированием в панели для веб-мастеров (пункт сканирование/посмотреть как Googlebot/добавить в индекс). Таким же образом можно быстро переиндексировать необходимые страницы.

Ваш домен ранее был забанен

Такое часто случается. Когда:

  • регистрируешь хороший и звучный домен
  • по обратным ссылкам все нормально
  • делаешь хороший сайт с нормальным дизайном
  • наполняешь уникальным и толковым контентом
  • а он не хочет никак индексироваться

В таком случае дела не очень хороши. Но все равно это можно поправить. А именно:

  • написать запрос на пересмотр (если Яндекс, узнать в чем причина)
  • написать на форуме Google (постараться узнать в чем причина)
  • развивать проект

Статья в тему: Как проверить сайт на бан поисковых систем?

Но по опыту скажу. Если домен не лезет в течении 3-4 месяцев нормально. То лучше развивать проект на другом домене. Как минимум это будет быстрее и на порядок проще.

Без нормальной индексации сайта – поисковое продвижение в принципе невозможно. Первое, что нужно сделать – это проиндексировать сайт и сделать так, чтобы новый контент на нем быстро индексировался поисковиками.

Мы рассмотрим 12 причин, по которым у вашего сайта могут быть проблемы с индексацией в поисковых системах Google и Яндекс.

Переходим к причинам:

1. Google и Яндекс пока не нашел ваш сайт

Такое случается в том случае, если вы только что выложили свой сайт и ничего не делали для того, чтобы поисковые системы его заметили.

В таком случае не стоит ожидать быстрой индексации. Но это легко можно поправить.

Для этого нужно сделать:

  • Добавить сайт в поисковые системы (Add url)
  • Добавить сайт в Google и Яндекс вебмастер

После чего, нужно немного подождать и ваш сайт должен проиндесироваться. Обычно это занимает от пару часов, до пару дней и более.

2. Сайт или страницы закрыты в robots.txt

Это часто бывает причиной, которую не учитывают разработчики и выкатывают сайт закрытым от индексации в файле robots.txt. Но такое легко можно поправить.

Если у вас не много технических разделов, то можно обойтись и таким robots.txt:

Но если на сайте нужно много чего закрывать, то:

  • закрываем только те разделы, что не нужно индексировать
  • оставляем для индексации все остальное

Тогда все с вашим сайтом должно быть нормально.

 3. Включены приватные настройки

Если вы используете систему управления сайта WordPress, то по умолчанию могут стоять приватные настройки. Это действительно может быть причиной того, что сайт до сих пор не проиндексирован.

Для этого нужно зайти в:

  • Настройки
  • Чтение
  • Видимость для поисковых систем
  • Убрать галочку

Многие забывают убрать эту галочку и потом не могут понять, в чем же причина не индексации сайта.

4. Сайт закрыт от индексации в noindex в мета тегах

Индексацию контента или страницы так же можно закрыть с помощью мета тега. Выглядит он так:

<meta name=»robots» content=»no index, nofollow»>

Все что нужно:

  • проверить код на наличие такого тега и что в нем прописано
  • убрать строку кода
  • или просто сделать follow и index

Пример:

Из нашей практики встречались и такие сайты, на которых это было причиной индексации.

 5. Ошибки сканирования

Если возникает много ошибок при сканировании, то поисковый бот просто может не дойти до нужных страниц.

Чтобы это проверить:

  • Заходим в Google Webmaster Tools
  • Сканирование
  • Ошибки сканирования

Если есть какие-то критические ошибки. Просто нужно их исправить и все будет хорошо.

6. Сайт заблокирован в .htaccess

В этом файле обычно прописывается 301 редирект. Но в нем, так же можно закрыть от индексации поисковыми системами.

Для того, чтобы это проверить:

  • находим на сервере файл .htaccess
  • в коде смотрим, чтобы не был закрыт сайт

Это может быть причиной, но многие даже не думают в этом направлении. А как вариант не стоит исключать.

7. Хостинг или сервер работает не стабильно

Если в момент, когда поисковый бот пришел на сайт индексировать страницы, сайт не доступен, то это может быть причиной не индексации.

Как минимум стоит позаботиться о том, чтобы up time у вашего сервера был хорошим и хостинг стабильным.

Сервисов, которые позволяет это проконтролировать множество. Если нужно бесплатно, то Яндекс Метрика оповещает о том, когда сайт не доступен.


Как я сказал, сервисов множество, вводим в поиск uptime checker и получаем множество результатов сервисов. А дальше выбираем на вкус и цвет.

8. Проблемы с AJAX/JavaScript

Не секрет, что Google индексирует AJAX и JavaScript. Вот ссылка для разработчиков с инструкцией: https://support.google.com/webmasters/answer/174992

Но на данный момент поисковая система индексирует эти языки не так легко и просто как HTML.

В случае, если вы не правильно настроили все для поиска в AJAX и JavaScript, то Google не проиндексирует ваш сайт и страницы.

Вот полезная информация из справки Гугла на этот счет: https://support.google.com/webmasters/answer/174993

9. У вас на сайте много дублированного контента

Если на сайте много дублированного контента, как:

  • страницы
  • мета тегов

То во первых можно получить санкции от Google Панды. Во вторых это может быть причиной того, что сайт не индексируется.

На эту причину стоит обращать внимание. Так как сейчас это № 1 причина, за которые можно получить санкции и сложности в дальнейшей раскрутке сайта

 10. Очень медленная скорость загрузки сайта

Скорость загрузки сайта влияет на позиции и это один из факторов ранжирования. Поэтому если ваш сайт грузиться очень долго, то вполне вероятно, что он не будет нормально индексироваться.

После чего, нужно учесть все моменты со скоростью загрузки и сделать ее очень быстрой.

Факапы

Не только новичкам свойственно допускать простые ошибки. Профи в случае остановки показов часто начинают глубоко копать — хотя решение может лежать на поверхности.

1. Не пополнен баланс

Да, и такое бывает. Причем не всегда дело в забывчивости или невнимательности. Есть и объективные причины.

Длительное проведение безналичных расчетов

Если вы оплачиваете со счета юрлица или ИП, деньги могут идти до трех рабочих дней. А в некоторых случаях — до 10. При пополнении накануне праздников можно просто не рассчитать, на сколько это может растянуться.

Выход — следить за состоянием баланса. Если вы работаете по предоплате, вносите сумму с запасом — чтобы хватило хотя бы на месяц рекламы.

Еще один вариант — настроить автоматическое пополнение. Оно доступно и в Google Ads, и в Яндекс.Директе.

Справка по оплате: Яндекс, .

Деньги в рекламных системах учитываются без НДС

В Google Ads и Яндекс.Директе сумма на балансе указана без учета НДС (для РФ — 20%). Например, если вы пополнили счет на 6000 руб., то по факту на балансе будет 5000 руб. Именно 5000 руб. вы будете тратить на рекламу — ставки и бюджеты в интерфейсах рекламных систем тоже указаны без НДС.

Из-за этого нюанса вы можете неправильно рассчитать месячный бюджет, и он закончится раньше времени. Естественно, показы при этом тоже остановятся.

Справка по НДС: , .

2. Блокировка показа рекламы при регулярном мониторинге выдачи

Открываем Google и вбиваем коммерческий запрос вроде «купить красную икру». На первой строчке видим объявление. Вводим этот же запрос еще раз — и объявления больше нет. Уже на пятый-седьмой раз объявлений в выдаче вообще не будет, а если и будут, то где-то внизу или на 3-4 странице.

Google персонализирует выдачу под каждого пользователя. Поэтому если вы начинаете мониторить объявления/позиции, Google понимает, что вам показывать объявления нет смысла, и отключает рекламу (мало ли, может, вы сейчас начнете скликивать конкурентов…).

Решение — перед мониторингом выдачи почистить кэш и вводить запросы в режиме инкогнито. Если же вы просматриваете объявления конкурентов, быстрее и эффективнее будет собрать их с помощью бесплатного парсера (как им пользоваться — описали здесь).

Интересно, что для Яндекса эта история не актуальна. Здесь хоть обновляй страницу, хоть вводи одинаковые запросы — объявления как показывались, так и показываются.

3. Приостановлены показы в Яндексе/Google

Казалось бы, кампания включена — все в порядке. Но не спешите переходить к другим пунктам чек-листа. Убедитесь, что также включена группа объявлений, объявления и ключевые слова, которые вы вводите в поиске с целью увидеть объявление.

Если хотите быстро понять, какие группы/объявления/ключи приостановлены, используйте сортировку по статусу

В Google Ads для быстрого запуска необходимых групп/объявлений/ключей удобно использовать автоматизированные правила.

Также выявить приостановку/удаление объявлений в Google Ads вы можете в разделе «История изменений» — отфильтруйте данные по типу изменений, и вы найдете «пропавшие» объявления.

История изменений доступна и в Яндекс.Директе (фильтр «Параметры изменения» / «Статусы»)


Это чисто гугловский факап — здесь вы ничего не можете поделать. Суть в том, что Google для обеспечения безопасности пользователей периодически проверяет аккаунты. На время проверки (обычно не более трех дней) объявления отключаются. После завершения проверки показ возобновится автоматически.

Основные причины почему сайта нет в поиске Яндекс

Основных причин по которым сайт не отображается в выдаче Яндекса три. И мы начнем с самой простой и распространенной.

Сайта нет в индексе Яндекса так как он молодой

Обычно этой проблемой страдают молодые, только что созданные сайты. Как правило те, кто сайты создаёт, не утруждают себя привлечением для обхода сайта быстроробота. На самом деле этим должны заниматься те, кто в дальнейшем будет продвигать WEB проект.

Проще говоря, чтобы Яндекс узнал о рождении нового сайта, ему нужно об этом сообщить. Он конечно и сам способен со временем прийти на новый сайт и проиндексировать его, но для того чтобы этот процесс ускорить, нужно в ручном режиме загнать все страницы сайта в поисковый индекс. Делается это в Яндекс вебмастере, через сервис индексации и переобхода страниц.

Основной ошибкой большинства интернет магазинов, как раз и является то, что они выгружают ежедневно десятки, а то и сотни карточек товаров, но не заносят их в ручном режиме на переобход в вебмастер Яндекса. В результате, такой товар лежит на сайте и не работает до тех пор, пока Яндекс о нем не узнает.

На самостоятельную индексацию молодого сайта может уходить до двух месяцев. Вот поэтому сайта и нет в поиске Яндекса и не будет до тех пор, пока робот скроллер не узнает о его существовании.

О том, как часто индексируется сайт и как ускорить его индексацию, я написал очень подробный мануал. Ознакомиться с ним можно здесь.

Сайта нет в поиске Яндекс так как он под фильтром

Это более печальная ситуация. Зачастую с ней сталкиваются сайты, которые продвигают запрещенными методами. Как правило, хозяева таких ресурсов заставляют своих SEO оптимизаторов быстро загонять сайт на первые места поисковой выдачи Яндекс. Но единственный быстрый способ раскрутки это применение чёрного SEO. Отсюда и БАН.

Попав под фильтр, сайт либо частично, либо полностью вылетает из индекса и перестаёт отображаться в поиске. Владельцы таких сайтов это ощущают сразу, глядя на счетчик посещаемости, цифра которого уменьшается до нуля.

Определить под какой конкретно фильтр угодил сайт и за что на него наложил санкции Яндекс, можно, но не так то просто это сделать.

Самым распространённым фильтром из-за которого сайт перестаёт отображаться в поиске Яндекс, является фильтр Минусинск. Он банит сайты продвигающиеся за счет покупных ссылок.

Следующий фильтр называется “Баден-Баден“, он банит сайты за переоптимизацию текстов ключевыми словами. В свою очередь Баден-Баден делиться на два типа. хостовый фильтр, когда под санкции попадает URL целиком и постраничный, когда отдельные страницы вылетают из поисковой выдачи, либо понижаются ниже 50 мест. Есть и другие фильтры от Google и Яндекс, основные и самые опасные я описал тут.

Сайта нет в поиске из-за плохой оптимизации

Обратная проблема переоптимизации – недооптимизация. Если сайт переоптимизировать, то попадёшь в бан, а если недооптимизировать, то такой сайт обгонят конкуренты. Вот и приходиться всем оптимизаторам ходить по “лезвию бритвы”.

Именно с такими сайтами на SEO консультациях я встречаюсь чаще всего. Их нет в поиске, так как метатеги на страницах таких ресурсов полностью отсутствуют. Без метатегов (H1-H6, Title, Description, Alt) поисковому роботу достаточно сложно определить, о чем идет речь на странице изучаемого сайта. Ну и в свою очередь, он понижает ранжирование таких WEB проектов.

Что такое метатеги и как их правильно прописывать, Вы можете прочитать здесь. Более глубоко о нюансах грамотной оптимизации метатегов я рассказываю на своих онлайн уроках.

Для тех, кто не хочет вникать во все тонкости SEO науки, но в тоже время хочет увидеть свой сайт в ТОП 10 выдачи Яндекс, я предлагаю свою услугу по продвижению сайтов. Если не хотите работать руками, то придётся платить деньги. Других вариантов просто нет. Но рекомендую очень серьезно подойти к выбору подрядчика на продвижение сайта. Последнее время количество мошенников в SEO сфере начало расти в геометрической прогрессии.

Обязательно ознакомьтесь с моей статьёй, как обманывают SEO оптимизаторы. Она поможет Вам исключить основные виды развода.

7 секретов: почему сайт не индексируется в яндексе

1. Сайт закрыт тегами noindex, noffolow, неправильный robots.txt

Чтоб индексация сайта была полной и безболезненной вам нужно зайти в админ панель — настройки — чтение (снимите галочку) попросить поисковые системы не индексировать сайт. Как написать правильный robots.txt для сайта wordpress я писал здесь.

3. На сайте присутствует 100% копипаст.

Обязательно пишите свой текст, если нет фантазии, то читайте и как в школе пишите изложения — это тоже своего рода уникальный контент.

 4. Контент-сайта не содержательный (неактуальный).

Под неактуальным контентом, я подразумеваю устаревшую информацию, к примеру, о счёте между двумя футбольными командами, игравшими между собой год назад, хотя в день игры информация находилась на первых полосах, газет, журналов, и поисковых систем, а сегодня о ней все забыли.

6. Сайт под фильтром.

На самом деле есть два выхода из этой ситуаций, первый написать в техническую поддержку поисковой системы, а вторая создать новый домен, а о старом забыть навсегда. Как выйти из-под фильтра я писал здесь.

7. Обращение в техническую поддержку сайта.

Стоит ли писать в техническую поддержку, если сайт не индексируется? Однозначно, для того, чтоб писать кому-либо вы должны выждать несколько недель, после чего можете написать в поддержку, но наверняка у вас проблема кроется в вашем сайте. Внимательно перепроверьте свой сайт, прежде, чем писать в поддержку.

Это только некоторые причины, почему сайт не индексируется в яндексе и google не считая файла robots.txt для вашего сайта.

И также хочу добавить, что для высоких поисковых вершин, вам необходимо иметь хороший показатель сайта, возраст домена, репутация, хорошая статистика при посещаемости вашего сайта. В стадии завершения моего очередного поста, как обычно, даю следующий урок из своего видеокурса, «как новичку зарабатывать эффективно на сайте пассивно?».

В заключение

Индексация сайта важнейший момент для поискового продвижения сайта. Поэтому сначала нужно найти причину, понимать следствия. В итоге не допускать того, чтобы с индексацией сайта были проблемы.

Хорошие статьи по индексации сайта в помощь:

— Как быстро проверить индексацию страниц всего сайта?

— Как быстро проиндексировать сайт или страницу?

— Почему Яндекс медленно индексирует молодые сайты?

А что вы думаете про причины не индексации или плохой индексации сайта?

PS: если вы перепробовали все причины и сайт не индексируется, то однозначно стоит писать в поддержку поисковых систем и узнавать причину у них.


С этим читают