Google может не сканировать URL с неоднократно повторяющимся элементом пути

Google может пропускать и не сканировать URL, в которых один и тот же элемент пути повторяется несколько раз. Об этом сообщил специалист отдела качества поиска Google Джон Мюллер.

Один из пользователей форума Google Webmaster Help задал вопрос, касающийся сайта wandelingen.nl, контент которого Google не индексировал. При переходе на этот сайт URL мгновенно меняется на такой: wandelingen.nl/_/_/1/_/_/_/_/_/_/_/_/_. При перемещении по ресурсу к адресу добавлялось все больше элементов типа «_/_/_/_/_/_/».

Мюллер рассказал, что при добавлении нескольких повторяющихся элементов в путь, URL могут выглядеть для Google как невалидные. Поэтому система может их пропускать.

Чтобы избежать проблем с индексацией, необходимо избегать ситуации, при которой один и тот же элемент будет многократно повторяться в разных URL при наличии динамического сайта.

Источник: Google Webmaster Help