Прошло десять лет с тех пор, как Google представил алгоритм Penguin и занял более жесткую позицию в отношении манипулятивных методов построения ссылок.
Алгоритм претерпел ряд обновлений и стал частью основного алгоритма Google в режиме реального времени, в результате чего штрафы стали менее распространенными, но по-прежнему существуют как в частичном, так и в масштабном формате.
По большей части Google утверждает, что игнорирует множество некачественных ссылок в Интернете, но по-прежнему бдительно и отслеживает неестественные шаблоны, такие как схемы ссылок, PBN, обмен ссылками и неестественные шаблоны исходящих ссылок.
Знакомство с Penguin
В 2012 году Google официально запустил «обновление алгоритма веб-спама», которое специально нацелено на ссылочный спам и манипулятивные методы построения ссылок.
Алгоритм веб-спама позже стал известен (официально) как обновление алгоритма Penguin через твит от Мэтта Каттса, который тогда был главой группы веб-спама Google.
Хотя Google официально назвал алгоритм Penguin, официальной информации о том, откуда взялось это название, нет.
Название алгоритма Panda пришло от одного из ключевых инженеров, участвовавших в его разработке, и более чем вероятно, что Penguin произошел из аналогичного источника.
Одна из моих любимых теорий именования Penguin заключается в том, что она отдает дань уважения Пингвину из Бэтмена DC.
Небольшой отчет о погоде: мы обновили данные алгоритма 1st Penguin час назад. Влияет на <0,1% поисковых запросов на английском языке. Контекст:
— Мэтт Каттс (@mattcutts) 26 мая 2012 г.
До алгоритма Penguin количество ссылок играло большую роль в определении оценки веб-страницы при сканировании, индексации и анализе Google.
Это означало, что когда дело дошло до ранжирования веб-сайтов по этим показателям для страниц результатов поиска, некоторые некачественные веб-сайты и фрагменты контента оказывались на более заметных позициях в результатах обычного поиска, чем должны были.
Зачем был нужен Google Penguin
Война Google с низким качеством началась с алгоритма Panda, а Penguin был расширением и дополнением к арсеналу для ведения этой войны.
Penguin был ответом Google на растущую практику манипулирования результатами поиска (и ранжированием) с помощью черных методов построения ссылок.
Каттс, выступая на конференции SMX Advanced 2012, сказал:
Мы смотрим на это как на что-то, предназначенное для борьбы с некачественным контентом. Все началось с Panda, а потом мы заметили, что спама по-прежнему много, и Penguin был разработан для решения этой проблемы.
Цель алгоритма заключалась в том, чтобы получить больший контроль и снизить эффективность ряда методов рассылки спама.
Лучше понимая и обрабатывая типы ссылок, которые зарабатывают веб-сайты и веб-мастера, Penguin работал над тем, чтобы естественные, авторитетные и релевантные ссылки вознаграждали веб-сайты, на которые они указывали, в то время как манипулятивные и спамные ссылки были понижены.
Penguin работает только с входящими ссылками сайта. Google просматривает только ссылки, указывающие на рассматриваемый сайт, и вообще не просматривает исходящие ссылки с этого сайта.
Первоначальный запуск и влияние
По собственным оценкам Google, когда Penguin впервые был запущен в апреле 2012 года, он затронул более 3% результатов поиска.
Небольшой отчет о погоде: мы обновили данные алгоритма 1st Penguin час назад. Влияет на <0,1% поисковых запросов на английском языке. Контекст:
— Мэтт Каттс (@mattcutts) 26 мая 2012 г.
Penguin 2.0, четвертое обновление (включая первоначальный запуск) алгоритма, было выпущено в мае 2013 года и затронуло примерно 2,3% всех запросов.
Сообщается, что при запуске Penguin был нацелен на две конкретные манипулятивные практики, в частности, на схемы ссылок и наполнение ключевыми словами.
Схемы ссылок — это общий термин для манипулятивных методов построения ссылок, таких как обмены, оплата ссылок и другие неестественные методы ссылок, описанные в документации схемы ссылок Google.
Первоначальный запуск Penguin также был нацелен на наполнение ключевыми словами, которое с тех пор стало ассоциироваться с алгоритмом Panda (который считается в большей степени алгоритмом качества контента и сайта).
Ключевые обновления и обновления Google Penguin
С момента его запуска в 2012 году алгоритм Penguin претерпел ряд обновлений и обновлений, и, возможно, ряд других настроек, которые вошли в историю как неизвестные обновления алгоритма.
Google Penguin 1.1: 26 марта 2012 г.
Это было не изменение самого алгоритма, а первое обновление данных внутри него.
В этом случае веб-сайты, которые изначально были затронуты запуском и активно очищали свои ссылочные профили, немного восстановились, в то время как другие, которые не были обнаружены Penguin в первый раз, испытали влияние.
Google Penguin 1.2: 5 октября 2012
Это было еще одно обновление данных. Это затронуло запросы на английском языке, а также затронуло международные запросы.
Прогноз погоды: обновление данных Penguin будет сегодня. Заметно пострадало 0,3% англоязычных запросов. Подробности:
— Страшный Мэтт Каттс (@mattcutts) 5 октября 2012 г.
Google Penguin 2.0: 22 мая 2013
Это была более технически продвинутая версия алгоритма Penguin, которая изменила то, как алгоритм влиял на результаты поиска.
Penguin 2.0 повлиял примерно на 2,3% запросов на английском языке, а также на других языках пропорционально.
Кроме того, это было первое обновление Penguin, в котором поиск доказательств направленного на веб-сайт ссылочного спама глубже, чем домашняя страница веб-сайта и страницы категорий верхнего уровня.
Google Penguin 2.1: 4 октября 2013 г.
Единственное обновление Penguin 2.0 (2.1) произошло 4 октября того же года. Это затронуло около 1% запросов.
Хотя официального объяснения от Google не было, данные свидетельствуют о том, что обновление данных 2.1 также улучшило то, насколько глубоко Penguin просматривал веб-сайт и сканировал его глубже, а также проводил дальнейший анализ на предмет наличия спам-ссылок.
Google Penguin 3.0: 17 октября 2014
Хотя это было названо крупным обновлением, на самом деле это было еще одно обновление данных; позволяя тем, на кого повлияли предыдущие обновления, появляться и восстанавливаться, в то время как многие другие, которые продолжали использовать методы спам-ссылок и избежали радара предыдущих воздействий, почувствовали воздействие.
Сотрудник Google Пьер Фар подтвердил это в сообщении в своем профиле Google+ и сообщил, что для полного развертывания обновления потребуется «несколько недель».
Far также заявил, что это обновление затронуло менее 1% англоязычных поисковых запросов.
Google Penguin 4.0: 23 сентября 2016
Почти через два года после обновления 3.0 было выпущено последнее обновление алгоритма Penguin.
Самым большим изменением в этой итерации стало то, что Penguin стал частью основного алгоритма.
Когда алгоритм трансцендирует, чтобы стать частью ядра, это не означает, что функциональность алгоритма изменилась или может снова резко измениться.
Это означает, что изменилось восприятие алгоритма Google, а не сам алгоритм.
Теперь, работая одновременно с ядром, Penguin оценивает веб-сайты и ссылки в режиме реального времени. Это означало, что вы можете видеть (в разумных пределах) мгновенные результаты вашей работы по построению ссылок или исправлению.
Новый Penguin также не был скуп на раздачу штрафов за ссылки, а скорее обесценил сами ссылки. Это контрастирует с предыдущими версиями Penguin, где негатив был наказан.
При этом исследования и, исходя из личного опыта, алгоритмические штрафы, связанные с обратными ссылками, все еще существуют.
Данные, опубликованные SEO-специалистами (например, Майклом Коттамом), а также наблюдение за алгоритмическими понижениями, снятыми с помощью файлов отклонения после Penguin 4.0, подтверждают это убеждение.
Алгоритмические понижения Google Penguin
Вскоре после того, как был представлен алгоритм Penguin, веб-мастера и бренды, которые использовали методы манипулятивного построения ссылок или заполнили свои профили обратных ссылок большим количеством некачественных ссылок, начали замечать снижение органического трафика и рейтинга.
Не все понижения рейтинга Penguin касались всего сайта — некоторые были частичными и касались только определенных групп ключевых слов, которые были сильно заспамлены и чрезмерно оптимизированы, например ключевые продукты, а в некоторых случаях даже бренды.
Веб-сайт пострадал от штрафа Penguin, снятие которого заняло 17 месяцев. Воздействие Penguin также может передаваться между доменами, поэтому смена доменов и перенаправление старого на новый может вызвать больше проблем в долгосрочной перспективе.
Эксперименты и исследования показывают, что использование переадресации 301 или 302 не устраняет эффект Penguin, а на форуме веб-мастеров Google Джон Мюллер подтвердил, что использование метаобновления с одного домена на новый домен также может вызвать осложнения.
В общем, мы рекомендуем не использовать перенаправления мета-обновления, так как это может вызвать путаницу у пользователей (и роботов поисковых систем, которые могут принять это за попытку перенаправления).
Восстановление Penguin Google
Инструмент дезавуирования был полезен для специалистов по поисковой оптимизации, и это не изменилось даже сейчас, когда Penguin существует как часть основного алгоритма.
Как и следовало ожидать, были опубликованы исследования и теории о том, что дезавуирование ссылок на самом деле ничего не делает для алгоритмического понижения рейтинга на основе ссылок и ручных действий, но эта теория была публично опровергнута представителями Google.
@joshbachynski disavows может помочь Пингвину.
— Мэтт Каттс (@mattcutts) 28 июня 2013 г.
При этом Google рекомендует использовать инструмент дезавуирования только в крайнем случае при работе со спамом со ссылками, поскольку дезавуирование ссылки намного проще (и более быстрый процесс с точки зрения его эффекта), чем отправка запросов на повторное рассмотрение для хороших ссылок. .
Что включить в файл отклонения
Файл отклонения — это файл, который вы отправляете в Google, в котором говорится, что нужно игнорировать все ссылки, содержащиеся в файле, чтобы они не повлияли на ваш сайт.
В результате отрицательные ссылки больше не будут вызывать негативные проблемы с ранжированием вашего сайта, например, с Penguin.
Но это также означает, что если вы по ошибке включили высококачественные ссылки в файл отклонения, эти ссылки больше не будут способствовать вашему рейтингу.
Вам не нужно включать какие-либо примечания в файл отклонения, если только они не предназначены исключительно для справки. Можно просто включить ссылки и ничего больше.
Google не читает никакие пометки, сделанные вами в вашем файле отклонения, поскольку они обрабатывают его автоматически, без участия человека.
Некоторые считают полезным добавлять внутренние обозначения, такие как дата добавления группы URL-адресов в файл отклонения или комментарии об их попытках связаться с веб-мастером по поводу удаления ссылки.
Как только вы загрузите файл отклонения, Google отправит вам подтверждение.
Но хотя Google обработает его немедленно, он не будет немедленно сбрасывать со счетов эти ссылки. Таким образом, вы не оправитесь мгновенно от подачи дезавуирования в одиночку.
Google по-прежнему нужно выйти и просканировать те отдельные ссылки, которые вы включили в файл отклонения, но сам файл отклонения не будет предлагать Google сканировать именно эти страницы.
Кроме того, невозможно определить, какие ссылки были обесценены, а какие нет, поскольку Google по-прежнему будет включать обе ссылки в отчет о ссылках в Google Search Console.
Если вы ранее отправили файл отклонения в Google, они заменят этот файл новым, а не добавят его.
Поэтому важно убедиться, что если вы ранее отклоняли ссылки, вы по-прежнему включаете эти ссылки в свой новый файл отклонения.
Вы всегда можете загрузить копию текущего файла отклонения в Google Search Console.
Отклонение отдельных ссылок и доменов
Рекомендуется отклонять ссылки на уровне домена, а не отдельные ссылки.
В некоторых случаях вы захотите отклонить отдельные конкретные ссылки, например, на крупном сайте, который сочетает в себе качественные и платные ссылки.
Но для большинства ссылок можно сделать дезавуирование по домену.
Google нужно просканировать только одну страницу на этом сайте, чтобы эта ссылка была снижена на вашем сайте.
Выполнение отклонения на основе домена также означает, что вам не нужно беспокоиться о том, что эти ссылки будут проиндексированы как с www или без www, так как отклонение на основе домена будет учитывать это.
Поиск ваших обратных ссылок
Если вы подозреваете, что Penguin негативно повлиял на ваш сайт, вам необходимо провести аудит ссылок и удалить или отклонить некачественные или спам-ссылки.
Консоль поиска Google включает список обратных ссылок для владельцев сайтов, но имейте в виду, что он также включает ссылки, которые уже являются nofollow.
Если ссылка nofollow, это не окажет никакого влияния на ваш сайт. Но имейте в виду, что в будущем сайт может удалить этот nofollow без предупреждения.
Существует также множество сторонних инструментов, которые будут отображать ссылки на ваш сайт, но поскольку некоторые веб-сайты блокируют сканирование своего сайта сторонними ботами, они не смогут показать вам все ссылки, указывающие на ваш сайт.
И хотя некоторые из сайтов, блокирующих этих ботов, являются высококачественными известными сайтами, которые не хотят тратить пропускную способность на этих ботов, некоторые сайты, занимающиеся спамом, также используют его, чтобы скрыть свои некачественные ссылки от сообщений.
Мониторинг обратных ссылок также является важной задачей, поскольку иногда отрасль, в которой мы работаем, не совсем честна, и могут происходить негативные SEO-атаки. Это когда конкурент покупает спам-ссылки и указывает их на ваш сайт.
Многие используют «негативное SEO» в качестве оправдания, когда их сайт попадает в Google из-за некачественных ссылок.
Тем не менее, Google заявил, что они довольно хорошо распознают это, когда это происходит, поэтому большинству владельцев веб-сайтов не о чем беспокоиться.
Это также означает, что упреждающее использование функции отклонения без явных признаков алгоритмического штрафа или уведомления о ручном действии — хорошая идея.
Интересно, однако, что опрос, проведенный SEJ в сентябре 2017 года, показал, что 38% оптимизаторов никогда не дезавуируют обратные ссылки.
Просмотр профиля обратных ссылок и тщательное изучение каждого ссылающегося домена на предмет того, нужна ли вам эта ссылка или нет, — непростая задача.
Удаление ссылок
Google рекомендует вам сначала попытаться связаться с веб-сайтами и веб-мастерами, откуда исходят плохие ссылки, и запросить их удаление, прежде чем вы начнете их отклонять.
Некоторые владельцы сайтов требуют плату за удаление ссылки.
Google рекомендует никогда не платить за удаление ссылок. Просто включите эти ссылки в файл отклонения и перейдите к следующему удалению ссылок.
Несмотря на то, что информационно-разъяснительная работа является эффективным способом восстановления после штрафа за ссылки, она не всегда необходима.
Алгоритм Penguin также учитывает ссылочный профиль в целом, а также количество высококачественных естественных ссылок по сравнению с количеством спам-ссылок.
Хотя в случаях частичного штрафа (влияющего на чрезмерно оптимизированные ключевые слова) алгоритм все равно может повлиять на вас. Основы обслуживания и мониторинга обратных ссылок должны держать вас в курсе.
Некоторые веб-мастера даже заходят так далеко, что включают «условия» в положения и условия своего веб-сайта и активно взаимодействуют с веб-сайтами, которые, по их мнению, не должны ссылаться на них:
Положения и условия веб-сайта в отношении ссылки на рассматриваемый веб-сайт. Оценка качества ссылок
У многих возникают проблемы при оценке качества ссылок.
Не думайте, что если ссылка исходит с сайта .edu, она высокого качества.
Многие студенты продают ссылки со своих личных веб-сайтов на эти домены .edu, которые являются чрезвычайно спамовыми и должны быть отклонены.
Точно так же существует множество взломанных сайтов в доменах .edu с некачественными ссылками.
Не судите строго по типу домена. Хотя вы не можете делать автоматические предположения в отношении доменов .edu, то же самое относится ко всем TLD и ccTLD.
Google подтвердил, что просто нахождение в определенном TLD не помогает и не вредит поисковому рейтингу. Но вам нужно сделать индивидуальную оценку.
Существует давняя шутка о том, что в домене .info никогда не было качественной страницы, потому что ее использовало очень много спамеров, но на самом деле из этого TLD исходит несколько ссылок отличного качества, что показывает, почему индивидуальная оценка ссылок это так важно.
Остерегайтесь ссылок с предполагаемых высококачественных сайтов
Не смотрите на список ссылок и автоматически не рассматривайте ссылки с определенных веб-сайтов как ссылки отличного качества, если только вы не знаете, что очень конкретная ссылка имеет высокое качество.
Тот факт, что у вас есть ссылка с крупного веб-сайта, такого как Huffington Post или BBC, не делает ее автоматической высококачественной ссылкой в глазах Google — во всяком случае, вам следует больше сомневаться в этом.
Многие из этих сайтов также продают ссылки, хотя некоторые из них замаскированы под рекламу или делаются мошенниками, продающими ссылки в своих статьях.
Эти типы ссылок с высококачественных сайтов на самом деле являются низкокачественными, что было подтверждено многими SEO-специалистами, получившими ручные меры по ссылкам, которые включают ссылки с этих сайтов в примеры Google. И да, они, вероятно, могут внести свой вклад в проблему Penguin.
По мере увеличения рекламного контента мы будем видеть, что все больше и больше таких ссылок помечаются как некачественные.
Всегда исследуйте ссылки, особенно если вы планируете не удалять какие-либо из них просто на основании сайта, с которого находится ссылка.
Рекламные ссылки
Как и в случае с рекламными объявлениями, вам нужно подумать о любых ссылках, которые могут указывать на вас сайты, которые могут считаться рекламными ссылками.
Платные ссылки не всегда означают обмен денег на ссылки.
Примерами рекламных ссылок, которые технически являются платными в глазах Google, являются любые ссылки, предоставляемые в обмен на бесплатный продукт для ознакомления или скидку на продукты.
Хотя эти типы ссылок были хороши несколько лет назад, теперь они должны иметь статус nofollow.
Вы по-прежнему будете получать ценность ссылки, но вместо того, чтобы помогать ранжированию, это будет происходить за счет узнаваемости бренда и трафика.
У вас могут быть ссылки из рекламной кампании, проведенной много лет назад, которые теперь негативно влияют на сайт.
По всем этим причинам жизненно важно индивидуально оценивать каждое звено. Вы хотите удалить ссылки низкого качества, потому что они влияют на Penguin или могут привести к ручным действиям в будущем.
Но вы не хотите удалять хорошие ссылки, потому что именно они помогают вашему рейтингу в результатах поиска.
Рекламные ссылки, которые не являются nofollow, также могут инициировать ручное действие для исходящих ссылок на сайте, разместившем эти ссылки.
Восстановление Penguin не предвидится?
Иногда после того, как веб-мастера приложили немало усилий, чтобы очистить свои ссылочные профили, они все еще не видят увеличения трафика или рейтинга.
Этому есть ряд возможных причин, в том числе:
- Первоначальный рост трафика и рейтинга был замечен до того, как алгоритмический штраф был неоправданным (и, вероятно, краткосрочным) и исходил от плохих обратных ссылок.
- Когда ссылки были удалены, не было предпринято никаких усилий для получения новых обратных ссылок большей ценности.
- Не все отрицательные обратные ссылки были дезавуированы/удалена достаточно большая часть отрицательных обратных ссылок.
- Во-первых, проблема не в ссылках.
Когда вы оправитесь от Penguin, не ожидайте, что ваши рейтинги вернутся к тому, что было до Penguin, и не ждите, что возвращение будет немедленным.
У слишком многих владельцев сайтов сложилось впечатление, что они сразу же начнут занимать первые места по своим самым популярным поисковым запросам, как только Penguin будет снят.
Во-первых, некоторые ссылки, которые вы отклонили, вероятно, способствовали искусственному повышению рейтинга, поэтому вы не можете ожидать, что эти рейтинги будут такими же высокими, как раньше.
Во-вторых, поскольку у многих владельцев сайтов возникают проблемы с оценкой качества ссылок, некоторые высококачественные ссылки неизбежно дезавуируются в процессе, ссылки, которые способствовали более высокому рейтингу.
Добавьте к этому тот факт, что Google постоянно меняет свой алгоритм ранжирования, поэтому факторы, которые приносили вам пользу раньше, теперь могут не иметь такого большого влияния, и наоборот.
Мифы и заблуждения о Penguin Google
Одна из замечательных особенностей индустрии SEO и тех, кто в ней участвует, заключается в том, что это очень активное и яркое сообщество, и всегда в Интернете ежедневно публикуются новые теории и результаты экспериментов.
Естественно, это привело к появлению ряда мифов и неправильных представлений об алгоритмах Google. Penguin ничем не отличается.
Вот несколько мифов и неправильных представлений об алгоритме Penguin, с которыми мы сталкивались на протяжении многих лет.
Миф: Penguin — это пенальти
Один из самых больших мифов об алгоритме Penguin заключается в том, что люди называют его штрафом (или тем, что Google называет ручным действием).
Penguin строго алгоритмический по своей природе. Google не может поднять его вручную.
Несмотря на то, что изменение алгоритма и штраф могут привести к значительному падению рейтинга веб-сайта, между ними есть довольно существенные различия.
Штраф (или ручное действие) применяется, когда член команды Google по борьбе с веб-спамом отреагировал на пометку, провел расследование и счел необходимым применить штраф к домену.
Вы получите уведомление через Google Search Console об этом ручном действии.
Когда вы подвергаетесь ручному действию, вам нужно не только просмотреть свои обратные ссылки и отправить отказ от спама, который противоречит рекомендациям Google, но вам также необходимо отправить запрос на пересмотр в команду Google по борьбе с веб-спамом.
В случае успеха штраф будет отменен; и в случае неудачи он возвращается к просмотру профиля обратных ссылок.
Понижение версии Penguin происходит без участия члена команды Google. Все делается алгоритмически.
Раньше вам приходилось ждать обновления или обновления алгоритма, но теперь Penguin работает в режиме реального времени, поэтому восстановление может происходить намного быстрее (если было выполнено достаточно работы по исправлению).
Миф: Google уведомит вас, если Penguin зайдет на ваш сайт
Еще один миф об алгоритме Google Penguin заключается в том, что вы будете уведомлены, когда он будет применен.
К сожалению, это не так. Search Console не уведомит вас о том, что ваш рейтинг упал из-за приложения Penguin.
Опять же, это показывает разницу между алгоритмом и штрафом — вы будете уведомлены, если вас поразит штраф.
Однако процесс восстановления после Penguin удивительно похож на процесс восстановления после пенальти.
Миф: Отклонение плохих ссылок — единственный способ обратить внимание на Penguin
Хотя эта тактика удалит много некачественных ссылок, она отнимает много времени и является потенциально пустой тратой ресурсов.
Google Penguin оценивает процент ссылок хорошего качества по сравнению со ссылками спамового характера.
Таким образом, вместо того, чтобы сосредотачиваться на ручном удалении этих некачественных ссылок, возможно, стоит сосредоточиться на увеличении количества качественных ссылок на вашем веб-сайте.
Это лучше повлияет на процент, который учитывает Penguin.
Миф: вы не можете оправиться от Penguin
Да, вы можете восстановиться из Penguin.
Это возможно, но для этого потребуется некоторый опыт работы с непостоянной природой алгоритмов Google.
Лучший способ избавиться от негативных последствий Penguin — это забыть обо всех существующих ссылках на вашем веб-сайте и начать получать оригинальные ссылки, предоставленные редакцией.
Чем больше таких качественных ссылок вы получите, тем легче будет освободить ваш сайт от захвата Penguin.
Рекомендуемое изображение: Пауло Бобита / Search Engine Journal
Специальная подборка для Вас