Собственная Google-Bot ферма

Ничего лишнего

Активность ботов на домене под санкциями

Санкции

Пример результата сканирования

Пример результата с трафиком

Техничка: что нужно для собственной PDF (Private Doorway Farm)

Парсинг и генерация

Парсинг и генерация контента

Сниппеты, QA
Тайтлы
Релейтеды
Дубли и чистка

Скрипт для генерации
случайной страницы

Дропы

Поиск на ExpiredDomains
Используйте локальные зоны
.DE .FR .CZ .PL и другие

Анализ дропов

Проверяем имя домена без точки в выдаче гугла

Подходит

Анализ дропов

Вместо главной внутряк

Не подходит

Анализ дропов

Тоже нет главной + фильтр за бренд

Не подходит

Анализ дропов

Проверяем уникальность текста в сохраненке или через WebArchive

Рекомендации по дропам

Не используйте свежереги и дешевые доменные зоны (.site, .xyz,

Онлайн логи

Создаем стату посещения ботов для каждого домена

Как заманить ГуглБота

Используем стандартные методы, о которых говорит сам гугл:

https://www.google.com/ping?sitemap=https://www.site.com/sitemap.xml

Как заманить ГуглБота

Автоматизируем процесс

Общие рекомендации #1

В robots.txt указывайте ссылки на sitemap.xml
В sitemap.xml указывайте ссылки

Общие рекомендации #2

Добавляйте к каждому домену несколько сабдоменов. Если бот не

Общие рекомендации #3

Настройте 301 редирект со старых страниц на любую внутреннюю

Общие рекомендации #4

Создавайте разные структуры страниц, фиксируйте и анализируйте
Подбирайте мощность сервера/VPS

Область применения

При сливе ботов с фермы на новые страницы, старайтесь не

Область применения

Используйте 302-редирект, это позволит не склеить и не передать содержимое

Пример быстрого трафика

Нашумевший пример )

Разбор на инглише

Разбор на русском