Процесс, когда поисковая машина обходит страницы сайта и помещает их в базу, называется индексацией.
Именно индексация дает сайту возможность попасть в поисковик.
То есть если сайт плохо или вообще не индексируется поисковой машиной, это значит, что пользователи не смогут найти его в Яндексе или Гугле, и это сведет посещаемость практически к нулю.
То есть сео оптимизация невозможна без индексации.
Что же нужно, чтобы проиндексировать сайт.
– Качественный хостинг.
Поисковый робот зайдет на сайт несколько раз подряд, а в это время сайт будет недоступен, его выбросят из индекса как несуществующий, даже если недоступность сайта во время «визитов» робота была случайным совпадением.
– Наличие карты сайта со ссылками на все страницы.
Крайне желательно, чтобы до любой страницы можно было дойти не более чем за три перехода по ссылкам.
– Иначе робот такой сайт не проиндексирует, и пользователь не доберется до его глубин.
– Сайт необходимо регулярно обновлять или пополнять уникальным контентом.
Именно обновление или дополнение свежей информации «призывает» роботов на сайт, а если на сайт не ходят даже роботы – откуда ждать живых людей?
Встаёт вопрос где взять уникальный текст, писать самому хотя, при желании этому можно научиться на курсах по копирайтингу, или содержать копирайтера?
На этот вопрос есть простой ответ – существуют биржи где находятся те кто ищет кому написать текст за деньги, и оказывается таких бирж много, и разобраться в этом поможет биржа текстового контента – заходите, и пользуйтесь себе во благо.
Несмотря на соблюдение этих правил, есть много того, что может помешать индексации сайта.
Например, затрудняют индексацию:
– Java-script. Для поисковых систем это пустое место: роботы не исполняют скрипты, которые, тем не менее, исполняются на стороне клиента.
Это связано с тем, что серверам поисковых систем не нужна дополнительная нагрузка.
То есть ссылки и тексты с применением Java-script не будут проиндексированы.
– Flash. Раньше применение Flash было однозначной проблемой для индексации.
Однако в последнее время Яндекс и Рамблер начали индексировать флеш-элементы, однако чрезмерно использовать их не стоит, поскольку это значительно осложняет индексацию.
– Ещё раньше имела значение информация, что тег NOINDEX позволяет скрыть текст и ссылки от поисковиков – то, что «закрыто» этим тегом, в поисковик не попадет. Если вы хотите, чтобы страница была полностью проиндексирована, этот тег использовать нельзя. Иногда по ошибке использованный тег может застопорить индексацию всего сайта. НО сегодня, этот тег имеет ввиду только Рамблер, Google же не будет обращать на него внимания, и сама ссылка все же будет учтена и по ней передастся вес.
– Фреймовые структуры замедляют индексацию.
Очень часто используется тег NOFRAMES, который позволяет индексацию текста и ссылок на странице с фреймами.
Однако часто поисковики расценивают этот тег как спам, используемый с целью сокрыть контент от пользователя.
– Редиректы – перенаправление пользователя без его желания на другие страницы.
За эти действия поисковые системы могут занести сайт в бан-лист, поскольку это распространенная схема спама – поисковик индексирует нормальную страницу, а пользователь при заходе на нее попадает совсем в другое место.
Если редирект идет со стороны сервера, бана не будет, но и лучше индексация от этого не станет.
– Дубликаты страниц, которые засоряют индекс поисковика.
В результате многочисленных этапов оптимизации сайта под поисковые системы появляется много дубликатов, многие из которых уже не существует.
Тогда начинается чистка – страницы просто удаляются из индекса, и начинается новая индексация.