Какие страницы должны быть Noindex или Nofollow?
Многие маркетологи и владельцы веб-сайтов прикладывают много усилий, чтобы их страницы занимали высокие позиции в результатах поиска Google. Для этого эти страницы должны быть проиндексированы и доступны в поисковых системах. Тем не менее, есть некоторые страницы, которые вам не нужно индексировать, поскольку они ничем не помогают или просто существуют для соблюдения правил веб-сайта.
Точно так же некоторые ссылки на каждой странице иногда не обязательно должны переходить в Google. Они могут привести к плохим или некачественным сайтам, которые могут повредить вашему рейтингу.
Индексирование как можно большего количества страниц для повышения вашего авторитета в результатах поиска не всегда является хорошим вариантом, равно как и переход по ссылкам. Это объясняет, почему вы должны тщательно решать, какие страницы не индексировать, а какие ссылаться на nofollow.
В этом посте описывается, как работают noindexing и nofollowing, а также обсуждаются, какие типы страниц или ссылок следует применять. В нем также рассматриваются некоторые простые способы создания страниц noindex и ссылок nofollow в WordPress. Начнем с основ!
Краткое объяснение Noindex и Nofollow
Как работают индексация и отслеживание поисковыми системами?
Поисковые системы создают ботов для изучения ваших веб-сайтов, пытаясь понять, о чем ваш контент, как он организован и так далее. Прежде чем генерировать результаты с ваших веб-страниц, они должны просканировать все ссылки на сайте, проиндексировать эти ссылки в своей базе данных, а затем отобразить их на страницах результатов поиска.
Боты Google переходят по всем ссылкам на вашем сайте, чтобы более подробно изучить ваши страницы, а затем предоставить пользователям, выполняющим поиск, актуальные данные. В результате, вводя запрос в Google, вы на самом деле ищете информацию в его обширном индексе сайтов и файлов.
Очевидно, что имеет смысл индексировать релевантные и важные страницы, что поможет вам получить больше кликов и увеличить трафик. Но индексация и переходы по нежизнеспособным страницам и ссылкам определенно вредят вашим усилиям по SEO.
В чем разница между noindex и nofollow?
Noindex и nofollow — это метатеги, которые можно добавить в исходный HTML-код веб-страницы. Эти метатеги предназначены для прямого взаимодействия с программами поисковых систем (ботами), которые сканируют ваш сайт.
Тег Noindex указывает поисковым системам сканировать страницу, но не индексировать и не отображать ее в результатах поиска. По умолчанию веб-страница настроена на «индексирование». Поэтому всякий раз, когда вы хотите удалить или скрыть страницу от поисковых систем, вы можете изменить термин в метатегах робота. Это позволяет вам лучше контролировать, какие страницы попадают в поисковую выдачу.
Атрибут nofollow требует от поисковых систем игнорировать веб-страницы, на которые вы ссылаетесь. Хотя ссылки играют решающую роль в поисковой оптимизации, только внешние ссылки с авторитетных и влиятельных веб-сайтов и внутренние ссылки помогают укрепить доверие к вашему сайту и повысить его рейтинг. Nofollow-ссылки, которые не проходят через PageRank, вряд ли повлияют на ранжирование в поисковых системах.
Почему вы не должны индексировать страницы или ссылки nofollow?
Как только важные страницы, посты в блогах и целевые страницы перестанут индексироваться или отслеживаться, вы можете потерять огромный источник трафика на свой сайт. Это объясняет, почему большинству владельцев сайтов не нужны неиндексированные страницы или страницы nofollow. Они всегда проверяют, сканируют ли поисковые роботы и индексируют ли их веб-страницы.
Тем не менее, noindex-страницы и nofollow-ссылки в некоторых случаях все же оказываются полезными.
Неиндексируемые страницы
Могут быть разные случаи, когда вам нужно исключить некоторые страницы из индексации Google. Давайте рассмотрим две основные причины, по которым вам следует защищать страницы от индексаторов Google.
Предотвращение дублирования контента
Часть вашего контента может появляться несколько раз в разных версиях. Совершенно излишне позволять Google индексировать все эти страницы.
Защитите конфиденциальный контент
Некоторые из ваших страниц, содержащие важные источники и продукты, не должны находиться в открытом доступе и загружаться на страницах поиска Google. Важно держать их подальше от глаз Google.
Nofollow-ссылки
Борьба со спамом в блогах
Спамеры склонны оставлять ссылки на свои сайты на вашей странице комментариев. Nofollow-ссылки не полностью предотвратят спам, но каким-то образом удержат спамеров от нацеливания на ваш сайт.
С какой основной целью спамеры оставляют свои ссылки на вашем сайте? Они будут использовать клики ваших пользователей, чтобы увеличить их трафик и повысить рейтинг в Google. Однако с nofollow-ссылками их ссылки больше не учитываются при расчете PageRank.
Повысить посещаемость сайта
Имейте в виду, что ссылки полезны не только для целей SEO. Ссылки nofollow могут повысить посещаемость вашего веб-сайта и улучшить бизнес, узнаваемость бренда или услуги. Действительно, хорошая и качественная ссылка создает ворота для доступа посетителей к вашему контенту. Если посетитель посчитает ваш контент полезным, он может поделиться им в своих постах. Таким образом, можно сказать, что ссылки nofollow косвенно ведут к последующим ссылкам.
Правильно следуйте ссылочному весу
Ссылочный вес — это фактор ранжирования поисковых систем, описывающий силу ссылок между страницами. Поскольку мощная страница будет распределять силу по ссылкам в своем содержании, вы должны убедиться, что вы отдаете силу страницы основным ссылкам. Важным элементом SEO является обеспечение того, чтобы ваши ссылки были хорошо читаемы и имели логический смысл.
Страницы, которые должны быть Noindex
Страница благодарности
Эта страница обычно отображается после того, как посетители предпримут необходимые действия, например введут адрес электронной почты в поле подписки, зарегистрируются для загрузки вашего программного обеспечения или купят ваши продукты.
Люди видят страницу благодарности только тогда, когда они совершают действие, которое вы от них ожидаете. Если посетители могут попасть на эту страницу через поиск Google, вы не только предлагаете свой самый ценный контент бесплатно, но также можете потерять аналитические данные всего вашего сайта.
Архив автора
Поскольку у большинства блогов есть один или два автора, страница автора почти такая же, как домашняя страница блога. Контент будет дублироваться, если вы покажете эти два типа страниц в результатах поиска. Вам нужно не индексировать их, чтобы избежать этого обстоятельства.
Пользовательские типы сообщений
Пользовательские типы сообщений, такие как продукты в WooCommerce, имеют тонкий или низкокачественный контент. Более того, когда вы устанавливаете плагины, они могут сопровождаться нежелательными пользовательскими типами сообщений. Эти страницы бесполезны для посетителей и для вашего собственного сайта, поэтому держите их подальше от страниц результатов поиска.
Страницы администратора и входа
Эти страницы автоматически не индексируются, поскольку администраторы или авторизованные пользователи обычно входят в систему через прямые URL-адреса. Однако страницы входа, которые обслуживают сообщества, такие как Mediafire, Dropbox, являются исключениями.
Результаты внутреннего поиска на вашем собственном сайте
Эта страница испортит впечатление от поиска, как только посетители увидят ее в поисковой выдаче. Вместо того, чтобы получить результаты, они должны снова выполнить поиск. Он может быть представлен в виде виджета поиска в WordPress или панели поиска товаров в WooCommerce.
Страницы профиля сообщества
Знаете ли вы, что 75% веб-сайта Moz были деиндексированы? Бритни Мюллер ранее обнаружила, что более 56% проиндексированных страниц были страницами профилей сообщества, которые содержали неактивные или спамные профили с плохими обратными ссылками. После того, как они решили не индексировать URL-адреса профилей сообщества ниже 200 баллов, веб-сайт в конечном итоге оказал положительное влияние на трафик. Пример доказывает, что важно, чтобы нерелевантные профили не попадали на страницы результатов поисковых систем.
Страницы вложений
WordPress создаст отдельную страницу вложений при загрузке изображения. Неудивительно, что Google индексирует и показывает посетителям эти страницы, которые в основном пусты с изображением и некоторыми словами описания. Сделаете ли вы страницы вложений доступными для вашей аудитории? Возможно, нет.
Ссылки, по которым вам не следует переходить
Ссылки, отправленные пользователями или ссылки в комментариях
Ссылки в комментариях в блогах часто неуместны и могут вести на вредоносные сайты. Когда люди публикуют эти ссылки на вашей странице, она должна делиться силой с бесценными сайтами. Помните, что Google сканирует и индексирует ваш сайт на основе всех ссылок в вашем контенте, поэтому будет очень плохо, если ваш сайт будет связан с ненадежными ссылками или веб-сайтами.
Как только для этой ссылки установлено значение «nofollow», вы можете способствовать продвижению обсуждения, не отвлекаясь на бессмысленные комментарии. Поскольку ссылки в комментариях не приносят никакой ценности для SEO, спамеры могут больше не беспокоиться об этом.
Платные ссылки
Обычно вы монетизируете свой блог, размещая на своих страницах рекламный контент. Вы можете добавлять логотипы или ссылки на сайты спонсоров и получать оплату за реферальный трафик от вашей аудитории. Однако необходимо указать Google, что ваш контент спонсируется, и вы не несете ответственности за какие-либо веб-сайты, на которые ведут ссылки. Что еще более важно, эти ссылки не должны влиять на ваш SEO и рейтинг.
Ссылки nofollow в этом случае оказываются хорошим вариантом. Вы по-прежнему получаете прибыль от этих сайтов, добавляя ценные ссылки для удобства пользователей и направляя трафик.
Сомнительные и ненадежные ссылки
Google предпочел бы, чтобы на вашем сайте была интуитивно понятная навигация и понятные URL-адреса. Это означает, что он может сосредоточиться на достоверной информации, чтобы эффективно направлять своих ботов через каждый уголок вашего сайта.
Вы должны добавить метатег nofollow к ссылкам, содержание которых не связано с вашим или исходит из подозрительных источников.
Как сделать неиндексированные страницы
Узнайте 3 способа запретить поисковым системам индексировать определенные страницы вашего сайта!
Используйте метатег «Noindex»
Этот тег добавляется в раздел заголовка HTML-кода страницы, сообщая поисковым системам, что не нужно индексировать вашу страницу. Поместите метатег robots в раздел <head> данной страницы, например:
<!DOCTYPE html>
<html><head>
<meta name="robots" content="noindex" />
(…)
</head>
<body>(…)</body>
</html>«Robots» после мета-имени указывает, что этот мета-тег применяется ко всем поисковым роботам. Если вы хотите, чтобы ваши страницы не индексировались определенным поисковым роботом, например Google, обновите тег следующим образом:
<meta name="googlebot" content="noindex" />Этот тег указывает боту Google не показывать страницу в результатах поиска. Однако он по-прежнему появляется в поисковой выдаче других поисковых систем, таких как Bing или Ask.com.
Одновременно можно использовать несколько метатегов robots:
<meta name="googlebot" content="noindex">
<meta name="googlebot-news" content="nosnippet">Используйте HTTP-заголовок X-Robots-Tag
X-Robots-Tag можно использовать как фактор ответа заголовка HTTP. Разместите приведенный ниже синтаксис, чтобы запретить поисковым роботам индексировать страницу.
HTTP/1.1 200 OK
Date: Tue, 25 May 2010 21:42:43 GMT
(…)
X-Robots-Tag: noindex
(…)Используйте файл robots.txt
Отредактируйте файл robot.txt через FTP-клиент или «Файловый менеджер» в панели управления хостингом.
User-agent: *
Disallow: /login/Вы можете настроить таргетинг на определенных ботов с помощью строки user-agent. Вторая строка определяет часть URL-адреса, следующую за вашим доменным именем. Если вы хотите, чтобы Google не индексировал вашу страницу входа с URL-адресом http://example.com/login/, просто добавьте /login/ в эту строку.
Поскольку добавление неправильных инструкций в этот файл отрицательно сказывается на вашем сайте, использование файла robots.txt не рекомендуется для начинающих. Имейте в виду, что этот файл доступен для всех, поэтому боты или пользователи знают, какую страницу вы пытаетесь скрыть. Более того, вы можете защитить свою страницу от поисковых роботов Google только на своем сайте. Если на вашу страницу ссылаются из публикации на другом сайте, она все равно отображается в результатах поиска.
Подведение итогов
Теги noindex и nofollow не ухудшают видимость вашего сайта в результатах поиска, как вы думали. Прежде чем думать о том, как вы можете проиндексировать свои страницы, задайте себе 2 вопроса: хотите ли вы, чтобы эта страница отображалась в результатах поиска? Следует ли разрешать поисковым системам переходить по всем ссылкам на этой странице?
Тег Noindex запрашивает у поисковой системы удаление страниц из индекса доступных для поиска страниц. Тег nofollow не позволяет Google передавать ссылочный вес через ссылки на веб-странице.
Google уделяет внимание только ранжированию релевантных страниц и анализу качественных ссылок. Убедитесь, что вы предоставляете значимый контент и ссылки, которые могут повысить ваш поисковый рейтинг и иметь наибольшее значение для вашей аудитории.
Noidexing некоторых определенных страниц, таких как страницы благодарности, авторский архив или страницы администратора и входа, помогает предотвратить отображение дублированного контента, а также защитить конфиденциальную информацию. Ссылки «Nofollow», отправленные пользователями, платные ссылки и сомнительные ссылки, заблокируют спам в комментариях и перестанут распространять силу вашего контента на отображаемые на нем ссылки.
Оставьте свой комментарий ниже, если у вас есть какие-либо опасения по поводу того, какие страницы вы должны запретить индексировать или использовать nofollow?
