Зеркальщик
Зеркальщик – алгоритм поисковой системы, разновидность поискового робота, предназначенный для поиска в интернете зеркал сайтов с целью их последующего склеивания. Здесь, зеркало – копия сайта по другому адресу.
Наличие в базах данных повторяющейся информации создает неоправданную повышенную нагрузку на программно-аппаратные ресурсы поисковой системы. Поэтому при обнаружении дублированных сайтов робот-зеркальщик назначает один из ресурсов главным зеркалом, а второстепенные зеркала исключаются из индексации. Это и называется склейкой.
Алгоритмы выбора главного зеркала поисковыми системами не обнародуются. Поэтому часто в качестве главного зеркала назначается не тот сайт, который нужен вебмастеру.
Чтобы не произошло ошибки при назначении главных зеркал, веб-мастеру необходимо предпринять собственные действия.
Мероприятия для назначения главного зеркала
- Указать поисковой системе, какой из сайтов считать главным зеркалом и заносить в индекс можно на сайте поисковой компании.
- Дополнительно главное зеркало настраивается в управляющем поисковым роботами файле robots.txt при помощи команды host.
User-agent: Yandex
Host: www.site.ru
Склейка зеркал может занимать несколько недель. После назначения главного зеркала все накопленные поисковые параметры будут отнесены к сайту главного зеркала.