Анализируем, возможно ли находить заброшенные домены для PBN-сетей или подклеек, используя парсинг и автоматизацию. Как вы понимаете, в большей степени PBN и подклейки приносят эффективность при работе с Google.
Немного вступительных скриншотов из аналитики, чтобы развеять ваши сомнения об экспертности материалов и о том, нужно ли читать статью дальше.
Полномасштабный парсинг с настроенной автоматизацией и минимальным количеством багов был запущен мною с 21 марта 2023 года. Ранее, осенью 2022 года, была альфа-версия парсинга. В альфа-версии просто собирались дропы, чтобы получить понимание, нужно ли копать глубже или нет. Принесет ли это результат клиентам или станет очередным сливом бюджета. Если кратко, то это эффективно и дешево относительно аукционов доменов.
На момент написания статьи — 11 мая 2023 года — в базе собрано 2 860 000 доменов. Пример представлен на рисунке 2.
Можете не вчитываться в типы парсинга, я расскажу о них ближе к концу статьи, когда буду затрагивать инструментарий. Просто держите в голове, что больше всего доменов мы находим с парсинга после выдачи Google. Этот тип парсинга я еще называю After Google Serp.
Замечательно, статистика по парсингу доменов есть, но сколько же дропов у нас в базе? Всего их 64 500 шт. на момент написания статьи.
64 500 дропов — это много или мало? Мало! Ежедневно из базы выкупается порядка 0,5-1,5% дропов. Обращаю внимание: не только нами. Какие именно домены выкупаются и зачем, рассмотрим далее в статье. Все остальные домены — мусор.
На какие вопросы аналитического характера хотелось бы ответить в рамках данной статьи? Вопросы я разделю на два типа.
Тип №1. Вопросы новичков:
- Что за PBN?
- Что за дропы?
- Что такое парсинг?
- Как это все помогает в Google?
Тип №2. Вопросы олдскульников:
- Какие домены находите?
- Под какие страны работаете?
- Кто и какие домены выкупает?
Вопросы новичков пройдём по верхам, чтобы отразить основную суть, без воды. Вопросы олдскульников разберем подробно, с примерами из практики.
Добавлю еще третий тип вопросов — порог входа. Как и с поведенческими факторами в Яндексе, придется потратиться на серверы, прокси, автоматизацию и ряд других инструментов. Кратко затрону вопросы экономики.
Что такое PBN? Коротко и по делу
Это список подконтрольных вам сайтов. Все статьи, материалы, изображения находятся под вашим контролем. Но ни Google, ни Яндекс не должны связать подконтрольные сайты с вашей личностью или с вашим money-сайтом. Все PBN-сети строятся на аукционных и дропнутых доменах.
Основная цель PBN-сети — передавать ссылочный вес на money-сайты по нужным вам анкорным ключевым словам. Если коротко и совсем по верхам, то подобная история способствует росту позиций в Google.
Если нужно подробнее, записывайтесь на курс по PBN.
Что такое дропы?
Дропы — это заброшенные домены, которые можно купить здесь и сейчас по цене их регистрации у регистратора доменов. Цена регистрации может существенно различаться и зависит от доменной зоны. Например, для .ru/рф доменов стоимость регистрации составляет 200 р., и от вас требуется только паспорт. Возьмем другой пример: дропы с доменной зоны .sport регистрируются от 60 000 р., и на этапе регистрации у вас попросят документы, подтверждающие вашу принадлежность к спортивным СМИ или в целом принадлежность вас и вашей организации к спортивной тематике.
Что такое парсинг?
Этот вопрос касается поиска дропов лишь частично, потому что парсить в интернете можно все что угодно. Наша задача — найти множество заброшенных доменов, используя парсинг сайтов, выдачи Яндекс или Google.
Таким образом, используя инструментарий (обычную “лягушку” — Screaming Frog), даже самый простой SEO-специалист уровня джуниор может поставить на парсинг какой-нибудь сайт СМИ, собрать с него внешние ссылки, обрезать внешние ссылки до уровня домена и проверить статус-регистрации собранных доменов.
Другой вопрос, что использование лягушки для парсинга дропов — совсем нерациональное решение, а проверка WHOIS вручную может растянуться на длительное время. На помощь придет инструментарий, о котором я расскажу ниже в разделе “Порог входа”.
Какие домены находим?
В большей степени мы были ориентированы на русскоязычную доменную зону, так как 80% клиентов на PBN приходит к нам именно из России. Но с середины апреля–начала мая 2023 г. мы активно взялись за СНГ и EN направление. На рисунке 5 представлена текущая статистика парсинга по ТОП-15 доменным зонам в базе.
Как видим, преобладает .ru и .com зона. Но вы ошибетесь, если скажете, что в СНГ и EN направлении нет доменов (дропов). Очень многое зависит от доменной зоны, под которую вы собираете PBN. Для примера возьмем пост из популярной рубрики “Пятничный дроп”, которая выходит на нашем телеграм-канале каждую пятницу: https://t.me/seoantteam/315
Пропарсили Киргизию, нашли ряд интересных доменов, часть из них опубликовали в посте. Остальную часть забрали на эксперименты.
В чем суть эксперимента? Поднять дроп, опубликовать на нем всего одну статью на морде и понять, способен ли домен ранжироваться в Google. Нам не хватало ссылок для проектов из указанного GEO. В итоге имеем следующее:
- Статью на морде опубликовали 27 апреля.
- 11 мая она в топ-10-20 по Киргизии.
Пример на рисунке 7. Запросы замазали из-за NDA.
Какие выводы можно сделать? Очень простые:
- Дропы в Киргизии есть.
- Дропы в Киргизии ранжируются отлично при минимальных трудозатратах.
- С дропов можно ставить ссылки на проекты, которые требуют именно этого регионального ссылочного.
Под какие страны работаем?
Под любые. Парсинг полностью автоматизирован. Если требуется парсинг какой-то нестандартной страны, то нужно лишь купить местные прокси, чтобы парсить наиболее качественно сайты и не получать блокировки. Для примера возьмем топ-16-30 доменов. Сам пример показан на рисунке 8.
Кто и какие дропы покупает?
Прикрепим скриншот из базы данных и детально рассмотрим, например, ряд доменов из топ-20 по убыванию рейтинга DR.
Начинаем по порядку:
- norma.sport — домен был куплен 4 апреля. В узких кругах узнали, что он торгуется сейчас за 5000 $. Почему сами не купили? Не было документов.
- *.watch — не требует комментариев. Адалт.
- augmentin2018.site –- букмекеры. Обратите внимание: здесь защита по клоакингу. Если просто откроете домен, то будет непонятная форма, но сразу идите сюда и читайте код: https://search.google.com/test/rich-results/result?id=AvPu1yVayxIB8xvKcXFwRg&hl=ru
У многих может быть вопрос: что еще за клоакинг? Если коротко: для GoogleBot отдается один контент, для всех остальных — другой. Таким образом в черных нишах скрывают от конкурентов ссылочные профили. Зайдя в проверку расширенных сниппетов вы отправляете запрос на сайт из-под UA GoogleBot и, что самое главное, из-под IP GoogleBot.
- p*od.center — очередное казино.
- maelewano.ru — куплен на подклейку.
- onlyyou-elvis.ru — клей на стройку.
- rosalana.ru — PBN, уже запущен под эссейку.
- bu*tweldfitting.com –- очередное казино.
- dessence.pro –- кто-то решил купить под money-сайт по разработке сайтов.
- w*tatus.ru –- 18+, наркотики.
- rpsport.ru –- кто-то поднял веб-архивный домен и сделал сквозняки на свои гембл сайты.
- freestand.ru –- кто-то запустил PBN и залил кучу статей по автомобильной тематике, аксессуарам и ремонту. Множество внешних ссылок.
- tochnyifitnes.ru –- какой-то интернет-магазин одежды заклеил на себя.
- xn—-7sbaal9ajcqykmvg0e.xn--p1ai — очередное казино.
- kuis.kz — кто-то выкупил под крипту.
- korabl.net — кто-то купил под сериал.
Довольно интересный пример, как продвигается vevanta.ru (стройка). Куплен ряд дропов, и со всех них идут ссылки на изображения (CDN поддомен). Видимо, в стройке нужно много безанкорки с изображениями. Минимальное количество текстового релевантного контента:
- https://okcenter-vladivostok.ru/
- https://kirpichnova.ru/
- https://shumoff59.ru/
- xn—-7sbad0boxbqcnh6o.xn--p1ai
- https://izddom.ru/
Итак, что мы имеем? Если опустить точечные примеры, интернет-магазин одежды, стройку, то дропами до сих пор занимаются серые и черные тематики: казино, гембл, адалт. Белых проектов в нашем примере не так много. Но все же помнят, что статистика собирается всего 2 месяца? Поэтому наблюдаем и мониторим дальше. Конкуренция пока невысокая.
Порог входа
Разделить можно на минимальный и максимальный порог.
Минимальный
- Сервер — где-то 100 евро/месяц.
- A-Parser — 300$.
- Xevil — 4500 р.
- Прокси — от 10 000 р./месяц.
Итого: примерно 53 000 р. на железо и софт, чтобы просто начать парсить дропы.
Максимальный
- Сервер — примерно от 150 евро/месяц.
- A-Parser с поддержкой API — 479$.
- Xevil — 4500 р.
- Прокси — от 10 000 р.
- Программист, который способен настроить всю автоматизацию парсинга. И все, что вам остается делать, — разгребать дропы, поднимать, индексировать, ставить ссылки.
Как показала практика, многие не знают, что такое A-Parser, Xevil, и не особо умеют автоматизировать процессы. Если ваш багаж знаний не позволяет настроить это все собственноручно или вы вообще не понимаете, что такое PBN-сети и как их запускать, то добро пожаловать на наш курс, там вас ждет очень много практики.
Итоговый вопрос: нужны ли дропы с парсинга?
Да, нужны. Но вы должны рассматривать их не как основные домены, на которых будут собираться PBN, а как дополнительные домены в добавок к аукционным. Для ряда клиентов мы собираем домены, используя и парсинг, и аукционы. Для других клиентов — только парсинг. Все зависит от бюджета проекта и тематики (ниши).
Просто оставим здесь скриншоты видимости в Google.
Все скриншоты и примеры приведены из белых тематик.
Автор: Дмитрий Федосеев (руководитель SEO-отдела в Ant-Team.ru).