Урок 84. Битые ссылки на сайте, динамические URL, ЧПУ

Два понятия, которые вынесены в подзаголовок требуют расшифровки и внимательного отношения к себе. Итак:

• Динамическими URL называются те адреса, в которых имеются различные функции, а также символы, способные меняться. Характер изменения зависит от того, какой скрипт прописан на сайте для той или иной страницы. Чаще всего для динамических адресов добавляются такие символы как ?, % и другие – вы уже могли видеть их на различного рода современных сайтах.
• При этом у каждой страницы имеется и собственный идентификатор сессии. Этот код уникален и всегда добавляется в адресной строке сайта. Идентификатор используется для того, чтобы отслеживать поведение конкретного посетителя на сайте. Это позволяет в будущем проверить поведенческие факторы для каждого конкретного сайта. Использование идентификаторов полезно как для поисковых систем, постоянно собирающих статистику, так и для самих владельцев сайта.

Однако такие особенности поведения адресов страниц также сопряжены с рядом других проблем, которые негативно отражаются на индексации. Нередко возникает ситуация, при которой постоянная динамическая смена URL той или иной страницы вносит путаницу в заранее рассчитанные алгоритмы поведения поискового робота. Как итог – ваш сайт получает серьезные проблемы с индексацией и процесс продвижения сайта не имеет нужного эффекта. 

Если у вас возникают проблемы с индексацией и при этом имеется подозрение, что причина в динамическом URL и проблемах с идентификаторами сайта, вам стоит обратить внимание на следующие варианты действия:

1. Введите запрет для поисковых систем на индексацию тех страниц, в составе адреса которых присутствует идентификатор. Однако запрет нужно вводить только при первичной индексации, так как в будущем поисковой робот будет анализировать адрес страницы внесенной в индекс и определит, что он имеет отличия от индексирования только по причине прибавления идентификатора.
2. Используйте директ 301. В этом случае перенаправление пользователя должно проводиться на ту страницу, которая не имеет соответствующего идентификатора. Это благоприятно отразится на поведенческих факторах в будущем.

Обратите внимание, что существует ряд случаев, при которых просто нельзя отказаться от специального идентификатора сессии. В этом случае вам потребуется внимательно работать с РНР кодом. Основная цель такой работы – запрет просмотра таких сессий с идентификаторами поисковыми роботами. Однако обратите внимание на то, что такой вариант пригоден только для экстренных случаев. Главная причина – страница с сессией никуда не исчезает, а скрывается при помощи ошибки 404. Ну а о том, к чему приводит распространение на сайте страниц с подобными ошибками, мы уже говорили в предыдущих уроках. У вас возникнут проблемы, как с индексацией, так и с последующим ранжированием сайта.

Если вы понимаете, что других путей помимо полного закрытия страницы для поисковых роботов нет, вы можете воспользоваться несколькими основными методами её закрытия:

1. Воспользуйтесь специальным инструментарием поисковых систем для веб-мастеров. Так как с подобными проблемами сталкиваетесь не только вы, крупные поисковики предусмотрели варианты закрытия конкретных страниц. Если вы ориентируетесь на запрет индексации для роботов Яндекса, вам потребуется просто занести все адреса страниц, которые будут закрыты в специальной директиве Clean-param. Для Google всё не менее просто. Вам нужно только воспользоваться вкладкой «Конфигурации сайта», а затем пройти по пути Настройка – Обработка параметров. Заветную вкладку запрета индексации вы увидите именно там.
2. Поработайте с файлом .htaccess. В нем могут указываться различные команды, в зависимости от специфики конкретной страницы. К примеру, добавление строки «php_flag session.use_trans_sid Off» отключит передачу идентификатора с его добавление к адресу конкретной страниц, а «php_flag session.use_only_cookie On» поспособствует передаче идентификатора с помощью cookie.

Сама по себе работа с динамическими адресами всегда оказывается достаточно сложной. Потому наиболее распространенным вариантом при взаимодействии с такими адресами является перенаправление пользователя на страницы со статическим URL. Это становится возможным благодаря использованию 301 редиректа. 

При проведении технической оптимизации перед специалистом стоит очень важная задача – избавить сайт от наличия на нем различного рода динамических адресов и идентификаторов. В конечном итоге это всегда поможет вам справиться с возникновением большого количества дублей страниц и, тем самым, поспособствовать правильному ранжированию сайта.

Говоря о проблеме смены динамического URL, часто используется введение адреса транслитерацией. При этом получается ЧПУ – это понятие можно перевести как человекопонятный URL. Такой адрес быстрее запоминается, в него легко вставить запросы, которые на данный момент находятся на продвижении по конкретной странице. 

После того, как вы настроите ЧПУ для вашего сайта, вам потребуется позаботиться и о настройке правильной переадресации на данную страницу. Именно использование ЧПУ позволяет правильно перевести динамические адреса страниц в псевдостатические, что позитивно сказывается на дальнейшей индексации. Особенно стоит обратить внимание на этот аспект в том случае, если вы продвигаете страницу по ряду высококонкурентных запросов.

Однако работа с переводом адресов в формат ЧПУ достаточно сложна и требует от веб-мастера большого уровня профессионализма. Однако при выборе подходящей CMS можно обойти множество подводных камней. Прежде всего, за счет специальных функций, которые позволяют системе администрирования сайта быстро переводить адреса в формат написания транслитерацией. 

Среди оптимизаторов существует твердое понимание того, что чем больше полезной информации доступно на сайте для индексации силами поискового робота, тем больше у вашего сайта возможностей оказаться проранжированным правильно. Если на сайте представлено большое количество информации и поисковой робот в процессе индексации может получить к ней доступ, результаты в виде повышения позиций сайта в выдаче не заставят себя долго ждать. Однако, в деле правильной индексации, также имеется и одно вероятное препятствие – битые ссылки на сайте. 

Битые ссылки могут привести пользователя на страницу, которая не существует. Следовательно, как пользователь, так и поисковик при работе с сайтом получит ошибку с кодом 404. Как результат – позиции сайта могут быть пессимизированы, а сама индексация проведена неправильно.

Причин по которым появляются битые ссылки на сайте может быть множество. Однако чаще всего они возникают в следствии:

• Отсутствия правильного перенаправления после замены динамических адресов на псевдостатические;
• Удаления страницы, на которую ведет ссылка с других страниц;
• Неправильной записи адреса страницы.

Как можно понять из перечисленного выше – появление битых ссылок – это результат неправильной работы оптимизатора, который не имеет должного опыта или сознательно работает спустя рукава. Однако такой подход к работе с ресурсом быстро получает «отдачу» со стороны поисковых систем. Роботы получают слишком много ссылок на несуществующие страницы, и пессимизация не заставляет себя ждать. Сильно бьет наличие ссылок и по поведенческим факторам. Если на вашем сайте присутствуют битые ссылки, это говорит о том, что у вас намного больше шансов получить высокий уровень отказа от дальнейшего просмотра информации на ресурсе.

Как избавиться от проблемы с битыми ссылками? Ответ прост – необходимо регулярно вручную проверять состояние сайта и ссылок, которые ведут на различные страницы. Если вы получаете ошибку за номером 404 после перехода по ссылке, вам необходимо немедленно исправить положение.

Если вы обнаружили на своем сайте битые ссылки, вам нужно проделать следующее:

1. Провести полное восстановление контента на тех страницах, которые оказались «битыми».
2. Провести ревизию ссылок на битые страницы и удалить все те, которые ведут с других страниц сайта.
3. Изучить адрес страниц на предмет наличия в нем ошибок и, в случае необходимости, полностью исправить такого рода ошибки.

Крайним методом борьбы с битыми ссылками станет полное закрытие их от индексации. Однако всегда стоит помнить, что это – временная мера и прибегать к ней стоит только в крайнем случае. К примеру, если вы знаете, что на сайте существуют битые ссылки, но не можете понять их природу или подозреваете, что индексация произойдет быстрее, чем вы исправите выявленную проблему.

Неправильное прописывание адреса страницы может стать серьезной проблемой при индексации. Те вебмастера, которые не хотят сталкиваться с такими проблемами и терпеть пессимизацию позиций своего ресурса в выдаче, всегда регулярно проверяют состояние ссылок на сайте в ручном режиме. 

Если вы всё-таки нашли неправильно прописанные или битые ссылки – требуется сделать максимум для их исправления. Нередко лучшим вариантом становится полное ограничение индексации той или иной страницы.

Старайтесь прийти к тому, чтобы на вашем сайте был минимум ссылок на страницы, которые выдают код ошибки 404. В таком случае вы сможете быть уверены в том, что поисковой робот сможет провести правильную индексацию страниц вашего ресурса. При этом, злоупотреблять ограничением индексации той или иной страницы – не стоит. Таким образом, вы можете лишить поисковой робот доступа к полезному и важному контенту на вашем сайте. А чем больше на сайте контента, тем больше у вас шансов на правильную индексацию поисковыми системами и получение хороших позиций в выдаче.