Yandex плохо индексирует сайт, или влияние Яндекс метрики на индексацию

Я уже не раз поднимал тему плохой индексации сайта, поисковиком Yandex. Причин на это может быть много. Примерно год назад, на этом сайте, проблема была в хостинге ukraine, а именно в том, что очень много сайтов находятся на одном ip, и поэтому Яндекс не индексирует все страницы, потому что не хочет нагружать сервер и не зависит от того кто занимается продвижением вашего сайта. Подробнее об этом я писал в с статье Яндекс не индексирует WordPress и OpenCart или отзыв о хостинге Ukraine. Но прошло время, за которое я успел сменить хостинг, и вернуться по своим соображением назад на ukraine и даже купить выделенный ip, на котором находился только мой сайт. Но а это время, что другой хостинг, что выделенный ip картину улучшали, но не удавалось достичь 100% индексации, а это крайне важно если вас интересует работа в интернете, а именно работа над своим блогом. Поскольку от индексации зависит и ваш заработок, а именно:

• Чем лучше индексация тем больше посетителей на вашем сайте, поскольку поисковик знает больше статей написанных вами
• Разные ссыльные агрегаторы, на которых довольно много заработка охотнее размещают на вашем ресурсе ссылки. А большинство агрегатов за непроиндексированные URL ничего не платит, а более того понимажет рейтинг в системе, что в принципе правильно.

Борясь уже который месяц и Яндексом я перепробовал буквально все что смог найти в интернете:

1. Добавлять адреса в адурилку Яндекса (addURL), таким образом принудительно оповещая яшу что вот она, статья то, приходи и читай. Но кроме оповещение что яша уже знает про нее и когда-то дойдет я ничего не получал.
2. Создавать и пересоздавать robots.txt. Как это сделать вы можете прочитать в этой статье
3. Создавать и пересоздавать sitemap.xml. Как это сделать вы можете прочитать в этой статье
4. Создать карту сайта в HTML формате.  Как это сделать вы можете прочитать в этой статье
5. Открыть RSS ленту и добавить во всякие RSS источники. Я в принципе против этого, об этом я писал в статье Как отключить RSS канал на WordPress, но индексация важнее.
6. Менял хостинг. Это в принципе дало результат но маленький.
7. Покупал ссылки, чтобы повысить траст.
8. Писал письма в тех. поддержку Яндекса.
9. Закрывал все ссылки от индексации не просто тегами, а специальными скриптами. Подробнее об этом в статье Как скрыть ссылки от индексации в WordPress и OpenCart
10. Проверил и перепроверил ping сервера

Но все эти шаги результата не давали, Яндекс приходил крайне редко и только избранные статьи попадали в индекс, что меня конечно же не устраивало. Перечитав весь возможный интернет, проверив что никаких фильтров не наложено я начал включать мозг сам, и пробовать придумать что-то самостоятельно.

Решение пришло когда я думал про отчеты для Adwords. А именно теория состояла в том что если поставить метрику на сайт от яндекса, то метрика заставит прийти яндекс и все проиндексировать. Последовательность действий моя была такой:

1. Установить код Яндекс метрики на сайт
2. Через некоторое время, после того как убедился что код стал правильно открыл все страницы сайта в новых вкладках и уделил каждой странице, примерно, по 5 сек, чтобы посещение было зарегистрировано.
3. Закрыл вкладки, и через некоторое время, часа 2-3, повторил предыдущий пункт с открытием вкладок.

И как следствие со следующим апдейтом яндекса половина статей была уже в индексе, а через 2-3 апдейта индексация сайта составила 98%, что меня очень даже устраивало.

Надеюсь данная статья станет вам полезной и решит вашу проблему с индексацией вашего сайта Яндексом. Также буду рад если вы расскажите ваши варианты в комментариях.