Плагин "SEO Meta Robots" помогает закрыть от индексации страницы интернет-магазина, которые не должны индексироваться поисковыми системами и которые проблематично закрыть через файл "robots.txt". На данный момент, в плагине поддерживаются настройки для следующих типов страниц:
- Скрытые страницы товаров
- Скрытые страницы категорий
- Страницы пагинаций (страницы с GET-параметром "page")
- Артикульные страницы товаров (страницы с GET-параметром "sku")
- Мусорные страницы (страницы с любым GET-параметром кроме "page" и "sku") ; (страницы с несколькими GET-параметрами) ; (страницы с символом "?" на конце URL-адреса) ; (страницы отзывов о товарах, на которых нет ни одного отзыва)
Всего есть 3 способа закрыть страницу от индексации (не считая HTTP-заголовки):
- через файл "robots.txt"
- через метатег "robots"
- через "link canonical"
Все эти способы поддерживаются поисковыми системами Yandex и Google, однако последний из них "Link Canonical" - является лишь рекомендацией для поисковых систем и может ими игнорироваться.
Например, Yandex 4 июля 2019 года официально объявил о том что поисковая система игнорирует "Link Canonical" и всё равно индексирует страницы. Это подтверждается на практике. Поэтому использование других способов закрытия страниц сайта от индексации, помимо "Link Canonical", крайне необходимо.
Подробно об индексации страниц интернет-магазинов и способах закрытия страниц от индексации я написал в на странице своего блога.
Плагин "SEO Meta Robots" закрывает страницы от индексации с помощью метатега "robots". В отличие от "Link Canonical", - метатег "robots" строгий, поисковые системы всегда его учитывают и строго следуют ему.
Главные преимущества плагина "SEO Meta Robots"
Подробная инструкция по настройке
С настройкой и проверкой плагина справится даже неопытный пользователь: помощь программиста не потребуется.
Настройка занимает несколько минут
Плагин работает через хуки: интеграция в тему дизайна не требуется. Но на крайний случай возможность выводить плагин через хелперы предусмотрена.
Автоматическая генерация метатегов
Плагин работает по принципу "установил - настроил - забыл": метатеги внедряются автоматически.
Только безопасные настройки
В плагине скрыты настройки, которые чаще всего могут лишь навредить SEO-продвижению: активировать нестандартные настройки можно только через доработку конфигурационного файла.
Возможности для SEO-экспериментов
В плагине можно настроить отдельные метатеги для Yandex и Google для каждого типа страниц (например, закрыть от индексации скрытые товары в Yandex, но оставить их для индексации в Google).
Совместимость плагина
- Работает на всех темах дизайна, имеющих хуки "frontend_category", "frontend_product", "frontend_head". Есть возможность выводить плагин не через хуки, а через хелперы.
- Работает на страницах сайта с любыми типами URL страниц (естественный, смешанный, плоский).
- Совместим с плагинами "Бренды", "Бренды PRO", и другими плагинами, создающими собственные типы страниц.
- Совместим с плагином "SEO-фильтр" и другими плагинами, превращающими определенные страницы с GET-параметрами в оптимизированные страницы с ЧПУ URL.
Совместимость плагина с другими плагинами, а также некоторые важные особенности плагина подробно описаны в документации по плагину.
Обратите внимание! В плагине Meta Robots нет и никогда не будет возможности настроить метатег "robots" для нескрытых страниц товаров по каким-либо произвольным критериям: отсутствию изображений, отсутствию цен, итп. Такие способы закрытия страниц от индексации приведут к проблемам с краулинговым бюджетом, т.к. ссылки на эти товары могут выводиться в различных листингах, карте сайта, и роботы поисковых систем всё равно периодически будут заходить на эти страницы по найденным ссылкам.
Если вы хотите удалить определенные товары из поиска - найдите способ установить для них статус "Скрыт с сайта" и используйте для настройки метатега штатный функционал плагина. Так вы убьете нескольких зайцев сразу: уберете товары с витрины сайта, с экспортируемых файлов на сайты агрегаторов, из поисковых систем (используя данный плагин), итд.
А если на вашем сайте товары уже скрываются не через статус "Скрыт с сайта", а с помощью доработок темы дизайна, то я настоятельно рекомендую проверить на вашем сайте функционал фильтрации товаров в каталоге, функционал подбора рекомендованных товаров в карточках товаров, итд. Если будете внимательны - найдете много интересных багов. Откажитесь от подобных доработок в пользу стандартного функционала скрытия товаров.
Для того чтобы автоматизировать скрытие товаров через статус "Скрыт с сайта" можно (и нужно) использовать плагин "Управление товарами".
В документации подробно описаны: инструкция по настройке, инструкция по проверке, ответы на часто задаваемые вопросы.
Хочешь принимать участие в разработке плагинов для Webasyst и обсуждении новостей SEO-отрасли? Вступай и пиши в "SEO-флудилку" в Telegram - https://t.me/seo_flood
