Коротко
- Каждый клик по ссылке createlink.link проходит четыре быстрые проверки, прежде чем посетителя пустят дальше. Три из них работают на вашем собственном сервере, четвёртая — на платформе.
- Живой человек сразу попадает на вашу страницу. Бот получает нейтральную страницу, и в статистике он считается отдельно.
- Визит бота не тратит ссылку. Все три перехода персональной ссылки остаются для живых людей.
- Никому не нужно решать капчу или ставить галочку «я не робот». Фильтр решает сам, за мгновение.
Когда вы отправляете ссылку, открывают её не только люди. Её открывают почтовые сканеры безопасности, превью в мессенджерах, поисковые краулеры и всевозможные скрипты. Если бы все они считались кликами, статистика бы врала, а персональные ссылки заканчивались бы раньше, чем до них доберётся нужный человек.
Поэтому, прежде чем кто-то попадёт на вашу страницу, фильтр задаёт четыре вопроса. Представьте охранника на входе, который проверяет несколько простых вещей. Большинство посетителей проходит за секунду. Тех, кто не подходит, вежливо направляют к другой двери.
Проверка 1: представляется ли он как браузер?
Каждый раз, когда браузер открывает страницу, он незаметно сообщает сайту кое-что о себе: своё имя (например, «Chrome на Windows») и языки, которые предпочитает его владелец.
Настоящие браузеры делают это всегда. Многие боты не утруждаются. Одни не присылают имени вовсе или присылают странное короткое. Другие честно говорят, что они бот или краулер. Многие не указывают предпочитаемый язык, потому что за ними не сидит человек.
Эта проверка ничего не стоит и ловит честных и ленивых ботов. Поэтому она идёт первой.
Проверка 2: «Chrome», который на самом деле не Chrome
Скрипты похитрее притворяются браузером. Они копируют имя Chrome и надеются, что этого хватит.
Но настоящий современный Chrome присылает не только имя. Вместе с ним всегда идут несколько дополнительных деталей — как паспорт, в котором всегда есть фото и печать. Когда запрос говорит «я Chrome», а этих деталей нет, это скрипт под именем Chrome. Вашей страницы он не получит. Здесь же ловятся браузеры, которые открыто работают в «безголовом» режиме (без окна — так их используют инструменты автоматизации).
Важное исключение: на iPhone Chrome устроен иначе и этих деталей не присылает. Поэтому iPhone этим тестом никогда не судят. Живой человек с iPhone не пострадает из-за того, что пользуется Chrome.
Если интересны подробности — вот как распознают headless-браузеры.
Проверка 3: кому на самом деле принадлежит этот адрес?
Каждый посетитель приходит с какого-то интернет-адреса. У многих адресов есть ещё и имя — немного похоже на определитель номера в телефоне. Это называется обратным DNS. Имя часто подсказывает, откуда пришёл посетитель: от домашнего провайдера, из мобильной сети, от хостинг-компании или поисковой системы.
Есть подвох: кто угодно может написать на своём адресе любое имя. Поддельный бот может назваться «Googlebot». Поэтому, когда имя утверждает, что это поисковая система, фильтр проверяет и в обратную сторону: подтверждает ли сам Google, что этот адрес его? Подтвердить это может только настоящий владелец. Поддельный «Googlebot» здесь не пройдёт.
Если имя принадлежит хостинг-компании, клик пришёл с сервера в дата-центре, а не от человека дома или с телефона.
А если у адреса нет имени вообще, это не считается ботом. Многие домашние провайдеры его просто не прописывают, и мы не хотим из-за этого выбрасывать живых людей. Подробнее — как отличить настоящий Googlebot от подделки.
Проверка 4: не из дата-центра ли он?
Не у каждого серверного адреса есть говорящее имя. Поэтому платформа держит список сетей, принадлежащих хостинг-компаниям и облакам, и проверяет, к какой сети относится каждый адрес. Живые люди заходят из домашних или мобильных сетей. «Браузер», сидящий внутри дата-центра, — почти всегда программа, каким бы безупречным он ни казался.
Этот список живёт на платформе и там же обновляется. На вашем сервере ничего менять не нужно.
Есть одно сознательное исключение — сервисы приватности, например iCloud Private Relay и Cloudflare WARP. Они работают на больших сетях, но ими пользуются живые люди, которым просто важна приватность. Поэтому они проходят. Почему так — в статье пользователи сервисов приватности — люди, а не боты, а про сети — в статье дата-центр или домашняя сеть?.
Что происходит после четырёх проверок
- Прошёл все четыре. Посетитель сразу попадает на вашу страницу и ничего не замечает.
- Не прошёл любую. Посетитель видит спокойную нейтральную страницу. Ваша страница остаётся скрытой, а клик попадает в статистику как бот.
- Ссылка не тратится. Каждая персональная ссылка рассчитана на три перехода живых людей. Сканер, который её открыл, ни одного из них не тратит.
- Вы видите это в цифрах. В статистике люди и боты считаются отдельно для каждой ссылки. Защита доказывает себя цифрой, а не обещанием.
Почему сделано именно так
Работает с первого клика. Ничего настраивать не нужно. Четыре проверки включены с самого начала, и о них заботится платформа. Новые правила приходят с обновлениями агента.
Проверяет, сходится ли история. Список имён ботов ловит только тех, кто в этом признаётся. Проверки 2, 3 и 4 ловят тех, кто врёт: «Chrome», который ведёт себя не как Chrome, «Googlebot», которого Google не узнаёт, «браузер» в дата-центре.
Очень старается не потерять живых людей. Когда проверка не может дать чёткий ответ (например, поиск имени длится слишком долго), клик считается человеческим. Потерять настоящего клиента для вас дороже, чем посчитать одного лишнего бота.
Каждая ссылка — для одного человека. Раз каждый получатель получает собственную ссылку на три перехода, пересланную или скопированную ссылку не откроют тысячу раз. Подробнее — почему одна ссылка для всех — это риск.
Работает на вашем собственном сервере. Проверки происходят на вашем VPS и вашем домене. Ни один другой клиент не делит их с вами.
Чего фильтр не умеет
Честно: ни один фильтр не ловит всё. Вот наши границы:
- Ни капчи, ни проверок через JavaScript. Это сознательный выбор: вашим посетителям никогда не нужно ничего делать. Фильтр решает только по тому, что видно в момент открытия ссылки.
- Боты на домашнем интернете. Программа, которая работает через чьё-то домашнее подключение и очень тщательно настроена, может выглядеть как человек и пройти.
- VPN, работающие из дата-центров. Живого человека с таким VPN признают ботом. Это компромисс, на который мы пошли сознательно. Сервисы приватности, упомянутые выше, — исключение.
У трекеров рекламного трафика есть собственные фильтры ботов, но это другая задача. createlink.link — для персональных ссылок в письмах, личных сообщениях и SMS. Он не для пуш-, поп- или нативной рекламы и не для групп и каналов в Telegram и WhatsApp. Подробнее — для кого createlink.link.
Короткий чек-лист
- Смотрите на людей и ботов по каждой ссылке. Резкий скачок ботов обычно означает почтовый сканер или превью ссылки, а не плохую аудиторию.
- Видите «Googlebot» среди кликов? Настоящий Googlebot подтверждает сам Google. Подделки не проходят проверку 3.
- Не блокируйте сервисы приватности целиком — за ними живые люди.
- Давайте каждому получателю собственную ссылку, чтобы сканеры и пересылка не могли её исчерпать.