Чотири безкоштовні інструменти, і що кожен з них міряє

Спершу з'явилася проблема вимірювання

Двадцять років питання чи працює ця сторінка мало одну відповідь: подивись на кліки. Ця відповідь тихо добігає кінця. У перші чотири місяці 2026 року 68,01% пошуків Google у США завершилися без кліку, проти 60,45% у 2024-му — а Pew Research Center, відстеживши 68 879 реальних запитів від 900 людей, які на це погодилися, виявив: коли з'являлося AI-резюме, люди переходили на сайт у 8% пошуків проти 15%, коли його не було.

Але вдивлятися варто в менше число. У тому ж дослідженні користувачі клікали посилання на джерело всередині AI-резюме приблизно в 1% випадків. Сторінку можуть прочитати, процитувати і спертися на неї — і в аналітиці це не відобразиться ніяк.

Тож ми зробили прилади, які були нам потрібні, і лишили їх відкритими. Чотири, без облікового запису й картки.

Vectorscope: уривки, а не сторінка

Асистент не читає вашу сторінку. Він читає її шматки — пошуковий механізм ріже документ на уривки, перетворює кожен на вектор і витягує ту жменю, чиї вектори лежать найближче до питання. Те, що не пережило цього розрізу, ніколи не було в грі, хоч як добре воно написане.

Vectorscope робить цей розріз на вашому посиланні й показує уривки, які виходять, у тому порядку, в якому їх ранжував би механізм. Це різниця між моя сторінка пояснює ціни і абзац, який пояснює ціни, переживає чанкінг як самодостатній уривок і набирає бали проти питання про ціни.

Це не наша теорія пошуку. Власний опис контекстного пошуку від Anthropic починається з тієї самої поразки: уривок «дохід компанії зріс на 3% проти попереднього кварталу» марний сам по собі, бо не називає ні компанії, ні кварталу. Додавання контексту перед векторизацією зменшило їхні помилки пошуку на 49%, а з переранжуванням — на 67%. Для сторінки урок той самий: уривок має нести власний предмет.

Brandscope: що асистенти кажуть, коли вас немає в кімнаті

Brandscope питає живих асистентів про бренд і зберігає те, що приходить у відповідь, із назвою моделі й часом на кожній відповіді. Не оцінку, виведену з оцінки, — самі речення, і те, який конкурент стояв у них поруч із вами.

Причина, чому все позначається часом, у тому, що відповіді рухаються. Ми тримаємо 91 365 збережених перевірок видимості по проєктах, і той самий промпт, заданий тій самій моделі через два тижні, регулярно повертає інший набір брендів. Один вимір — це спостереження, а не місце в рейтингу. Хто продає вам одне число для вашої видимості в AI, продає середнє від рухомої речі, не кажучи, що вона рухається.

Voicescope: питання словами покупця

Формулювання, яке набрали б ви, — це не формулювання, яке вимовить ваш покупець. Voicescope бере одне питання і переписує його так, як його ставлять різні люди: обережна закупівельна версія, нетерпляча версія засновника, та, що називає конкурента замість категорії — і показує, чим відрізняються відповіді.

Це важливо, бо пошук запускається формулюванням, а не наміром за ним. Два формулювання однієї потреби дістають два різні набори уривків, і сторінка, налаштована під версію, яку набрали б ви, може бути невидимою для версії, яку вимовить ваш покупець.

Patternscope: сторінки, які надрукували, а не написали

Patternscope читає набір сторінок одного сайту й знаходить ті, що зроблені за одним шаблоном — той самий кістяк із підставленим містом, форматом файлу чи посадою. Програмні сторінки не є автоматично поганими, і інструмент цього не каже. Він дає вам кількість і форму: скільки ваших сторінок — це одна сторінка, і що між ними змінюється.

Це питання пошуку, а не смаку. Тисяча сторінок, що відрізняються одним іменником, дають тисячу майже однакових векторів, і механізму, якому поставили питання в цій темі, немає жодних підстав віддати перевагу котрійсь із них.

Спільне в них — те, чого вони відмовляються робити

Чотири інструменти, одне правило: казати лише те, що підтверджує вимір.

Це звучить як гасло, поки не побачиш, чого воно коштує. Це означає: жодної єдиної оцінки. Означає, що вимір позначено миттю, а не подано як стійкий факт. Означає, що обмежений список каже, що він відкинув, а не тихо звітує про свою межу як про свій вміст. Означає, що там, де сигнал не виміряно, інструмент пише не виміряно, а не друкує нуль — бо нуль це вимір, а відсутня інтеграція — ні.

І означає казати, коли число ввело б в оману. Лічильники запусків цих чотирьох інструментів підчищає нічний прохід retention, тож цифра в базі — це скільки зараз зберігається, а не скільки людей цим скористалося. Ми могли б її надрукувати. Вона читається як статистика відвідувань, а нею не є — тому її в цій статті немає.

Як читати результат і не обдурити себе

Робіть два виміри, а не один. Один запуск Brandscope каже, що одна модель сказала один раз. Запустіть ще раз наступного тижня, перш ніж робити висновок про напрямок.

Читайте уривки раніше за оцінку. Якщо Vectorscope повертає уривок, який не називає вашого продукту, жодна робота з ключовими словами на цій сторінці не полагодить проблему пошуку — абзац має нести власний предмет.

Вважайте відсутність відсутністю. Інструменти розрізняють ми виміряли нуль і ми не змогли виміряти. Це різні речення, і вони потребують різної роботи.

Куди це веде далі

Інструменти — це публічна половина приладу, який безперервно працює всередині продукту: той самий чанкінг, ті самі виклики живих асистентів, та сама відмова звітувати числом, яке не є виміром. Якщо вам потрібен словник, яким ці виміри користуються, глосарій визначає кожен термін раз, п'ятьма мовами, і зв'язує терміни, що залежать один від одного.

Якщо хочете побачити прилад на власній роботі, почніть із Vectorscope і сторінки, в яку ви вже вірите. Це найшвидший спосіб дізнатися, чи переживає написане вами те, що його читає машина.