Чтобы не попасть в черный список поисоквых систем, веб-мастер при создании сайта должен быть осведомлен хотя бы в некоторых вопросах оптимизации. Роковой ошибкой, приводящей к дубликату контента по-неволе, является создание страницы, предназначенных для браузера и для печати, которые дважды индексируются поисковиками как одинаковый текст. Возможно, что это уже не считается нарушением. Другая типичная ситуация, когда интернет-магазин содержит одну и ту же группу товаров с огромным ассортиментом, и для каждого варианта существует своя страница с описанием, а между собой такие страницы практически ничем не отличаются, кроме url-адресов. Еще один путь к двойному контенту пролегает через разные url-адреса одной и той же страницы, которые роботы могут воспринимать как спам. Когда страница доступна по адресу www.mysite.ua/page.php?id=1 и www.mysite.ua/newarticle для поисковиков это может означать два разных документа, имеющих одинаковый контент, поэтому страница в результатах выдачи может быть пессимизирована. Выходом из ситуации служит перенаправление со всех аналогичных страниц на эталонную, одну-единственную 301 редиректом. На сервере Apache такое перенаправление осуществляет модуль mod_rewrite. Один из вариантов — создание в корневом каталоге сайта файла .htaccess, в который вносится нужный код:

Из этих трех строк первая включает механизм перезаписи url, вторая строка проверяет название вызванной страницы, третья перенаправляет на указанный домен. Статус перенаправления permanent дает паукам понять, какой у страницы постоянный и действительный адрес.

На сайтах сделанных на php, средство trans_sid автоматически модификацирует URL-адреса страницы, добавляя к ним переменные сеанса для пользователей. Это средство запоминает сеансы тех пользователей, у которых в браузерах запрещено сохранение cookie. Серьезная проблема этих модификаций может возникнуть при индексации одной и той же страницы, содержащей сеансы, поисковиками, которые принимают их за дублированый контент. Иногда, проверяя наличие проиндексированных страниц, можно увидеть, что сайт не содержит такое количество страниц, сколько показывает поисковый робот. Многие веб-разработчики отключают возможность автоматической модификации url страниц, так как включаться и отключаться идентификаторы сессий могут динамически в PHP-коде. Осведомленные оптимизаторы и веб-мастера применяют специальные технологии для маскирования включения и выключения идентификаторов сессий, различая, кто приходит на сайт - паук или человек.

Контент для сайта от 4$ за 1000 символов

СЕО-статьи по теме:

1. Сателлиты, блоги и покупка ссылок в раскрутке сайта

2. Как выбрать систему управления контентом

3. Индексация сайта: основной и дополнительный индекс Google

4. Дорвей - поисковый спам