9 июня прошла самая летняя конференция о бизнесе, digital и онлайн-маркетинге 8P. Мы посетили ряд лекций и теперь делимся их конспектами и инсайтам. Во вторую часть вошли доклады о SEO.
Переходите к интересующей теме:
- Владимир Лучанинов «Копирование сайтов: принцип работы и способы защиты»
- Виталий Цимбалюк, Игорь Шулежко «SEO growth hacking: поиск точек кратного роста»
Следующая конференция от организаторов 8P будет посвящена eCommerce и пройдет 11 ноября в Киеве.
Владимир Лучанинов «Копирование сайтов: принцип работы и способы защиты»
Владимир Лучанинов R&D Bananza рассказал, как недобросовестные сеошники копируют сайты, и как защитить свой сайт от копирования.
1. Актуальность проблемы: как потерять весь трафик за один день
Мы сами пострадали от копирования сайта, и наши глубокие знания основаны на том, что нам пришлось в этом разбираться, чтобы сайты восстанавливать и защищать.
Посмотрим на ситуацию с точки зрения вебмастера. Вы выбираете нишу, пишите качественный контент, пытаетесь раскрыть боль пользователя и решить его проблему. Вы каждый месяц выливаете бюджет, постоянно что-то делаете, и ждете, что вот-вот будет результат.
И наконец, вы становитесь №1 по нужным запросам — вот оно счастье! Но счастье длится недолго, потому что в какой-то момент вы видите в SERP свой заголовок, сниппет и чужой сайт, которому достаётся ваш трафик.
В нашей нише это случилось массово в прошлом году и, по нашим исследованиям, примерно половина трафика уходила на сайты, которые не принадлежали их владельцам.
В такой ситуации, логично пойти с вопросами на форум Google, но там мы получили отписки.
2. Как работает копирование сайтов
А теперь посмотрим на ситуацию с точки зрения копировальщика. Сперва дублируется контент, одним из двух способов:
- Live, в режиме реального времени. Делается свой веб-сервер, который работает как прокси — отправляет запрос на настоящий сайт и выдает в браузере человеку то, что выдавал бы оригинальный сайт. Это настраивается очень быстро, можно копировать сразу тысячи сайтов, но такую копию достаточно легко заблокировать.
- Extract, вытяжка. Копируется весь сайт и отображается скачанная версию. Тут уже клон не зависит от оригинала, но, если копируется динамический сайт с миллионами страниц, может банально не хватить места на сервере.
Чтобы заблокировать копирование в режиме реального времени, достаточно зайти на сайте-клоне на страницу, которую обычно пользователи у вас не посещают, посмотреть, откуда придет запрос и заблокировать его. С вытяжкой бороться сложнее, но дальше рассмотрим варианты.
Откуда вытягивают сайты
Есть несколько источников, в которых можно забрать копию сайта:
- непосредственно с исходного сайта через браузер;
- из вебархива;
- из amp или turbo страниц;
- из кеша поисковых систем — google, yandex, bing и т. д.;
- из транслейта поисковика — перевести с оригинального языка на него же и скачивать.
Есть и другие варианты источников копирования, но эти — самые популярные.
Как «улучшают» сайт после копирования
С сайта-копии удаляется всё, чем не может управлять новый “владелец”, а именно:
- трекеры, скрипты аналитики;
- чаты, формы;
- CDN с картинками и скриптами;
Все ссылки на оригинальный домен заменяются на внутреннюю перелинковку копии. А партнерские ссылки прошлого владельца меняются на ссылки создателя копии.
Некоторые копировальщики идут дальше, и делают техническую оптимизацию. Ставят canonical, делают sitemap, прописывают robot.txt. Мы наблюдали, как копировальщики в Hreflang прописывали себя как языковую версию, мол, сайт-копия для “ru-ru”, а оригинальный — для “ru-kz”. Исходник улетает на соответствующую локаль, хоть в мануале Google и говорится, что так не должно быть.
Пока сайт-клон растёт, злоумышленники саботируют работу оригинального сайта. Жалуются хостерам, устраивают DDOS-атаки, запускают на сайте тяжелые скрипты, если они там есть.
3. Почему не надо заниматься копированием сайтов
Во-первых, копирование сайтов вредит карме. А если вы не верите в карму, есть объективные причины, почему не стоит заниматься такими вещами.
Рано или поздно копировальщиков находят, и из-за такой репутации могут пострадать остальные, «белые» проекты. Партнёрки могут прекратить сотрудничество, если поймают вас на копировании. А также могут не выплатить отчисления за пользователей с сайта-копии.
То есть, на копирование и дооптимизацию сайта нужно потратить много сил, при этом есть шанс ничего с этого не получить. Так что не копируйте сайты.
4. Как превентивно защититься от копирования сайтов
Защита от ботов
Первый шаг — не давать лишним роботам парсить ваш контент. Самый простой способ — в robots.txt перечислить всех популярных роботов, которых могут использовать копировальщики. Можете взять за основу наш список https://bananza.net/robots.txt
После этого на сайте нужно добавить мета-теги noarchive и notranslate, чтобы закрыть возможность из SERP посмотреть кэш или сделать перевод.
Поведение роботов-копировальщиков отличается от поведения пользователей. Рассмотрим, как защититься от них, не влияя при этом на отображение у пользователей.
- Если у вас сеошный сайт, где не очень много людей проходит, то вы легко можете, особенно, если у вас много страниц, вы можете легко ограничить проходимость, сделать DDOS-фильтр. Для этого в настройках нужно вынести все картинки, скрипты CSS, на какой-то отдельный домен, и оставить на сайте только те страницы, которые вам нужны. Так при копировании бот получит странную версию сайта, без стилей, картинок и т. д.
- Большинство людей посещают 1 страницу на вашем домене, так что, если их 10, это уже подозрительно. Вы можете настроить ограничение, что, если человек 10 страниц в час посетил, значит, его нужно блокировать.
- Сделать невидимую ссылку где-нибудь в футере, а лучше — вообще невидимую, на которую обычные люди никогда не зайдут. Если кто-то начинает скачивать эти страницы, значит, по сайту ходит бот, с которым надо что-то делать.
Что делать с ботом
Очевидный вариант — заблокировать. Но в этом случае копировальщик может сменить прокси, что-то поменять в настройках и попробовать снова. Так, рано или поздно, они придумают какую-нибудь штуку, чтобы скопировать сайт.
Но есть и более изощренные варианты. Например, можно подсунуть копировальщику другой контент. Желательно, чтобы он был тематический и не вызывал подозрений. То есть, если человек скачал сайт и ничего не заподозрил.
- Скормить копировальщику контент конкурентов. Вам от этого вреда не будет, а конкуренту головная боль.
- Добавить для копировальщика контент для взрослых, чтобы сайт-копия сразу же попал в другую категорию.
- Добавить virus.exe и пожаловаться на него, мол, этот сайт небезопасный, скопировал меня и распространяет вирусы.
Другие превентивные действия для защиты
5. Как вернуть позиции в поиске, когда ваш сайт скопировали
Нужно максимально отгородиться, что ваш сайт — это не та копия, для этого нужно что-то на своем сайте поменять:
- весь контент (эффективно, но дорого);
- ключевые страницы;
- дописать больше контента на существующие страницы;
- переписать немного статей;
- просто поменять title.
Также нужно жаловаться.
- Партнёрке. Посмотрите, куда сайт ведет трафик и напишите в эту партнерку, что тут поступают нехорошо.
- На форумах. Чем больше людей узнает о проблеме, тем больше вероятность, что партнерки перестанут принимать такой трафик, а поисковики закроют дыры.
- Хостеру и DMCA. Особенно хорошо, когда у вас есть трейдмарки на сайт, тогда вам будет чуть легче доказать, что вы владелец этого контента.
Ну и, конечно, нужно проверить безопасность и сделать все превентивные действия, чтобы сайт не скопировали снова.
Виталий Цимбалюк, Игорь Шулежко «SEO growth hacking: поиск точек кратного роста»
Сооснователи агентства rankUP Игорь Шулежко и Виталий Цимбалюк рассказали о неочевидных точках роста в SEO, с которых стоит стартовать. Доклад касался улучшения ссылочной массы, линкбилдинга и улучшения структуры сайтов.
Вспомните Дарницкий вокзал. Это один из самых известных долгостроев Киева. Его готовили к Евро-2012 как изюминку города, но что-то пошло не так. Примерно так мы видим внердение SEO-аудита во многих компаниях. Бизнес что-то берет по чуть-чуть, но в итоге из того, что SEO-специалист предложил, мало что делается. Задачи по SEO складываются в общий беклог и бизнес делает те задачи, которые здесь и сейчас дают результат.
Мы считаем, что нужно отойти от SEO-аудита, глобально, и смотреть в сторону точек роста, их искать. Точки роста — это те действия, которые помогут значительно вашему сайту вырасти при минимальных затратах.
Точки роста в SEO на примере кейсов
Мы хотим поделиться некоторыми кейсами, как искать точки роста, чтобы показать первые шаги и дать идеи, с чего стартовать.
Версии для регионов
Мы заметили, что у клиента много геозапросов и предложили идею размножить сайт под регионы, под города с населением более 60 тыс. В результате мы получили прирост трафика больше чем в три раза. Таким образом клиент за 2 года стал лидером в нише.
Featured Snippet
Featured сниппеты — это классная штука, благодаря которой можно сразу попасть в ТОП-1, если вы уже находитесь на первой странице.
Чтобы попасть в расширенные сниппеты, мы пересобрали семантику и написали посадочные страницы по темам, близких клиенту и в которых Google выдавал Featured сниппеты.
Массовое создание страниц
Идея про нарезку страниц. Если у вас e-commerce проект, вы уже можете создавать страницы по информационным запросам, вроде:
- Лучшие холодильники,
- Рейтинг телевизоров 4К,
- Отзывы на смартфоны,
- Микроволновки до 5000 грн и т. д.
Эти все страницы вы можете создавать и получать трафик. Ищите максимально повторяющиеся слова и то, как вы можете их имплементировать. Для этого не надо писать страницы вручную, можно подключить базу данных, чтобы на странице собирался контент, и уже получать трафик.
Линкбилдинг и вирусный маркетинг
Клиент обратился к нам с просьбой помочь подготовить и распространить пресс-релиз по случаю открытия нового офлайн-магазина. Мы предложили добавить немного желтизны, и в результате получилась идея отдать 12 iPhone за тату. Парень реально сделал татуировку на лице, стал победителем конкурса и получил заветный телефон.
Об этом написали топовые СМИ Украины и СНГ, и мы получили более 300 ссылок с топовых доменов.
Линкбилдинг и журналисты
Журналисты часто гуглят запросы со словом «статистика». И эти запросы в общей массе сеошниками не прорабатываются, ведь запросы не конверсионные. Но это большой базис возможностей для линкбилдинга.
Например, в медицинской тематике есть 170 запросов со «статистикой» с частотностью 5000+. Если у вас есть данные, вы можете создать обновляемую статистику. Журналисты будут брать ее и ссылаться на вас.
Вы можете предоставлять статистику своей ниши. Допустим, вы занимаетесь продажей одежды, и можете представить, какая одежда пользуется спросом, какие цвета и т. д.. Соответственно, журналисты будут это гуглить, будут использовать и давать ссылки.
Виджеты
Создавайте виджеты для сайтов. Как правило, такие продукты интересны вебмастерам. Например, школа серфинга хочет разместить на сайте скорость ветра. Если у вас есть такой виджет, школа серфинга просто разместит его у себя, со ссылкой на ваш сайт. Разработчик получает виджет, вы получаете ссылку.
Проверьте запрос «Виджет», что ищут люди и что вы можете создать.
Где искать точки роста и как их внедрять
Ведите бэклог идей для вашего сайта и постоянно его пополняйте. Очень важно смотреть не только вашу нишу, но и смежные, потому что там могут быть альтернативные идеи. И обязательно запланируйте это. У нас задача поиска идей запланирована и раз в две недели мы это делаем для каждого клиента.
Но техзадание само себя не внедрит. Нужно контролировать, выполняют ли разработчики задачи по сайту. И далее — проанализировать результаты внедрения. Цикл выглядит так:
Чтобы задача прошла весь этот цикл, нужно ее правильно поставить. В описании должны быть:
- приоритет;
- цель;
- результат;
- чеклист по выполнению;
- время;
- сроки;
- метрики;
- KPI.
Таким образом задачу поймёт не только тимлид по SEO, но и обычный сотрудник, которому эту задачу делегируют.
Еще важно после выполнения задачи дать фидбек в духе: «А помнишь, ты делал такую-то задачу? Так вот, она нам дала крутой прирост!». Это здорово влияет на команду и повышает мотивацию в будущем.
Ретроспектива
В любом деле важно остановится и спросить себя: «А не фигню ли я вообще делаю?». У нас это называется ретроспективой, когда мы собираемся с командой и смотрим: получили ли результат и какая у него ценность. Таким образом мы ретроспективно оцениваем свои действия, и делаем план до следующей ретроспективы.
По сути, речь идет о SCRUM.
Выводы
- Думайте целями бизнеса. Делайте задачи не потому что так кто-то сказал, а потому что они приближают определенный бизнес-результат.
- Регулярно ищите точки роста. Невозможно всё улучшить идеально на сайте. Большие сайты требуют постоянных поддержки, доработок исправлений. Но параллельно с этими доработками нужно искать точки роста, планировать этот поиск как отдельную задачу
- Собирайте бэклог идей. Не должно быть такой ситуации, когда специалист говорит: «Ну, я всё поделал, что дальше делать — не знаю». Если собирать бэклог идей, вам всегда будет, что улучшить, и всегда будет развитие.
- Внедрите цикл: поиск, контроль внедрения, анализ эффективности.