Безкоштовний інструмент Без акаунта Експериментальне
Vectorscope

Семантичне розбиття наочно: подивіться, що переживе подорож у векторний простір.

Vectorscope — безкоштовний інструмент, що показує семантичне розбиття сторінки: він ріже один URL на фрагменти, які зберегла б пошукова система, групує їх за змістом і показує, скільки сторінки взагалі не доходить до індексу.

напр.

Безкоштовний ліміт на відвідувача, акаунт не потрібен.

Результат
що машина справді читаєрозріз по h2, далі вікна по 2000 символівдо 26 фрагментів / сторінкугрупування за змістомбез акаунта
  1. 1. Завантажено
  2. 2. Вилучено
  3. 3. Поділено
  4. 4. Вектори
  5. 5. Згруповано
фрагментів прочитано
місць зайнято з ліміту в 26 фрагментів
унікального тексту в уривках, символів
в уривках з перекриттям і вступом, символів
символів за лімітом
у межах лімітуза ним, не прочитано

Вставте адресу вище. Сторінку розрізають на фрагменти по заголовках h2; ті, що в межах ліміту, прочитано, а те, що ліміт відрізав, — ні.

Що це означає?

Прочитання показує, які фрагменти вашої сторінки може отримати пошукова система і як вони групуються за змістом, — питання, яке ставить семантичне розбиття, поставлене вже вирізаним фрагментам. Це попередній погляд машини, а не гарантія того, що з ним зробить будь-який асистент.

Важливий фрагмент за лімітом?

Перенесіть його вище на сторінці або розділіть сторінку, щоб цей фрагмент мав власний бюджет. Це прочитання бере зі сторінки не більше 26 фрагментів.

Моделі й ліміти пошуку різняться.

Це не доводить, що будь-який асистент проіндексував сторінку. Кожна система ріже по-своєму — фіксованими вікнами, за заголовками чи через семантичне розбиття — і по-своєму вбудовує й обмежує; тут — конвеєр, яким працює продукт. Джерела й методологія

Як читати свій результат

Чотири показники вирішують, чи є сторінка читабельною для системи пошуку. Ось що кожен із них означає, коли він поганий.

Фрагменти, які не доходять до індексу

Система пошуку читає зі сторінки фіксовану кількість фрагментів, а решту ігнорує, тож усе нижче цієї межі невидиме, яким би добрим воно не було. Vectorscope застосовує ту саму межу, що й продукт, і називає фрагменти, які за неї вийшли.

Якщо ваша відповідь, відмінність або FAQ лежать нижче межі, лікується це не додаванням слів, і семантичне розбиття тут теж не врятує: добре вирізаний фрагмент за межею однаково ніхто не читає. Підніміть цей фрагмент вище або розділіть сторінку, щоб він мав власний бюджет фрагментів.

Коефіцієнт видобутку

Коефіцієнт видобутку — це те, яка частина сторінки перетворилася на читабельний текст; низький означає, що більшість того, що ви випустили, була навігацією, шаблоном або розміткою, якої жодна модель не побачить. Довга сторінка з низьким коефіцієнтом — це коротка сторінка з погляду пошуку.

Видобуток відбувається до будь-якого розбиття, і семантичне розбиття не виняток, тож утрачений тут текст утрачено для кожної стратегії. Типові причини, у порядку частоти: текст, який малює лише JavaScript; стаття, обгорнута такою кількістю обв’язки, що тіло становить меншість документа; і зображення, які несуть слова, відсутні в HTML.

Групи, і що означає щільна група

Групи — це семантична частина прочитання, найближча до того, що робить семантичне розбиття: фрагменти, які ембединг ставить поруч за змістом, під яким би заголовком вони не стояли. Одна велика група зазвичай означає, що сторінка каже одну річ багато разів. Для пошуку це читається як тонко, навіть якщо для редактора читається як ґрунтовно.

Кілька дрібних груп по одному фрагменту — протилежна проблема: сторінка, що постійно змінює тему, не дає пошуку нічого цілісного для цитування.

Фрагмент, який справді дістає питання

Питання до сторінки повертає фрагменти, які на нього відповідають, за рангом, і лише з цієї сторінки — це найближче до того, щоб побачити, як модель вирішує, для чого ваша сторінка. Якщо повернений фрагмент не той, який ви б вибрали, сторінка організована не так, як ви думаєте.

Це ще й найшвидший спосіб перевірити переписаний заголовок: змініть заголовок, прогоніть сторінку знову, задайте те саме питання.

Що таке семантичне розбиття на фрагменти?

Семантичне розбиття — це поділ сторінки на фрагменти там, де змінюється її зміст, а не кожні N символів чи на кожному заголовку. Vectorscope ріже інакше: по кожному h2, а далі вікнами фіксованої довжини; його семантичний крок іде після розрізу, коли фрагменти групуються за змістом.

01

Розбиття фіксованої довжини

Розбиття фіксованої довжини ріже кожні N символів і є типовим у більшості конвеєрів, бо його тривіально написати. Воно ж ріже посередині речення, відділяє заголовок від відповіді під ним і робить фрагменти, які починаються з половини слова.

Vectorscope застосовує його лише всередині довгого розділу: вікно у 2000 символів із перекриттям у 200, яке закінчується на межі речення, якщо вона досить близько.

02

Розбиття з урахуванням заголовків

Розбиття з урахуванням заголовків використовує заголовки сторінки як лінії розрізу, тож фрагмент приходить разом із заголовком, який його називає. Це перший розріз Vectorscope, і робить його лише h2: h3 лишається всередині фрагмента свого h2, тож розділ із шести питань під h3 — це один фрагмент або кілька вікон одного.

Це також означає, що текст ваших заголовків працює на пошук. Розділ «Огляд» не додає фрагменту нічого; розділ «Чи можна скасувати будь-коли?» додає саме питання.

03

Семантичне розбиття і чим воно відрізняється від групування

Семантичне розбиття порівнює сусідні речення й ріже там, де зміст зсувається: фрагменти виходять самодостатніми, але спершу треба пройти ембедингом усю сторінку, ще до першого фрагмента. Vectorscope цього кроку не робить. Його семантична частина — групування: кожен фрагмент після розрізу отримує ембединг, а близькі за змістом фрагменти малюються однією групою.

Тож карта ставить те саме питання, що й семантичне розбиття, — де закінчується одна думка? — але фрагментам, які вже вирізали ваші заголовки. Група через три розділи h2 каже, що заголовки розірвали одну думку; довгий розділ, чиї вікна потрапили у дві групи, каже, що під одним заголовком їх дві.

Чи готовий мій контент до пошуку з ШІ?

Ця сторінка відповідає на це питання для одного URL за раз, чесно — а це означає називати те, чого вона не бачить, так само ясно, як те, що бачить.

Що цей інструмент може вам сказати

  • Яка частина вашої сторінки взагалі стає читабельним текстом — коефіцієнтом, а не прикметником.
  • Які саме фрагменти отримав би пошук, у порядку, з позначкою тих, що за межею.
  • Які фрагменти мають спільну тему, коли їх згрупувати за змістом, — питання, яке ставить семантичне розбиття, поставлене вашій сторінці.
  • Чи ваші фрагменти самодостатні, чи спираються на попередній, щоб мати сенс.
  • Який фрагмент дістає справжнє питання з вашої сторінки, за її власними ембедингами.
  • Чи сторінка сама просить не індексувати її — директива noindex повідомляється, а не ігнорується.

Чого він сказати не може

  • Чи має конкретний асистент вашу сторінку у своєму індексі. Цього не бачить ніхто поза тими компаніями.
  • Як модель ранжує вашу сторінку проти сторінки конкурента. Для цього потрібен корпус обох — а це продукт, не демо.
  • Чи вас цитують у відповіді сьогодні. Це вимір у часі за промтами, які ви вибрали, а не властивість однієї сторінки.

Як перевірити RAG-конвеєр за допомогою Vectorscope

Якщо ви будуєте пошук, а не контент, ця сторінка — референсна реалізація, яку можна навести на будь-який URL секунд за двадцять.

  1. 1Прогоніть сторінку, яку вже індексуєте, і порівняйте межі фрагментів зі своїм чанкером — хай то фіксовані вікна, заголовки чи семантичне розбиття.
  2. 2Подивіться на коефіцієнт видобутку: якщо ваш нижчий на тому ж URL, ваш екстрактор викидає тіло тексту, а не обв’язку.
  3. 3Задайте сторінці питання, відповідь на яке знаєте, і перевірте, чи верхній фрагмент той, що її містить.
  4. 4Прогоніть завідомо задовгу сторінку. Фрагменти за межею — це ті, до яких ваш власний top-k теж не дійде.

Чанкер (розрізи по h2, далі вікна у 2000 символів із перекриттям у 200), модель ембедингів і межа тут — ті самі, що продукт запускає у продакшені. Демо на спрощеному конвеєрі лестило б тому конвеєру, який воно існує демонструвати.

Для кого Vectorscope?

Vectorscope — для всіх, чию сторінку читатимуть фрагментами: для тих, хто її пише, і для тих, хто будує пошук, що її читає. Обидва отримують те саме прочитання: розріз, ліміт і питання, яке ставить семантичне розбиття, — які фрагменти належать одне до одного.

Контент- і SEO-команди

Щоб перевірити, що відповідь, заради якої існує сторінка, потрапляє в один фрагмент, який пошук може процитувати, — у межах ліміту й під заголовком, що її називає.

Інженери, які будують RAG

Щоб мати еталонне прочитання будь-якого URL і звірити з ним свій чанкер — хай він ріже фіксованими вікнами, за заголовками чи робить семантичне розбиття.

Редактори, які перебудовують сторінку

Щоб вирішити, де має стояти заголовок: групи показують, які розділи мають спільну тему, а який розділ насправді два.

Коли фрагменти на місці, далі — слова всередині них: PatternScope читає чернетку й показує шаблонні звороти та повторювані форми речень, на які реагує читач.

Слова, вжиті на цій сторінці

Терміни, на які спирається ця сторінка, кожен визначений один раз, бо сторінка, яка вживає їх без визначення, — це сторінка, яку асистент нікому не пояснить.

Семантичне розбиття
Поділ тексту на фрагменти там, де змінюється зміст, а не через рівну кількість символів чи на кожному заголовку. На цій сторінці крок за змістом — це групування вже вирізаних фрагментів, а не сам розріз.
Фрагмент (chunk)
Уривок сторінки, вирізаний так, щоб його можна було читати окремо. Системи пошуку зберігають і повертають фрагменти, а не цілі сторінки — тому структура сторінки важливіша за її довжину.
Ембединг
Список чисел, який стоїть за змістом уривка, так що два уривки про одне й те саме опиняються поруч. Порівняння ембедингів — це те, як пошук знаходить уривок без збігу слів.
Косинусна близькість
Міра того, наскільки два ембединги дивляться в один бік: 1 — тотожні, 0 — не пов’язані. Це число за кожним твердженням, що два уривки про одне й те саме.
RAG (пошук плюс генерація)
Відповідь на питання спершу пошуком уривків у джерелі, а вже потім написанням із них, а не з пам’яті моделі. Кожна відповідь ШІ, що цитує сторінку, зробила це — і сторінкою, яку вона процитувала, був фрагмент.
Видобуток (extraction)
Перетворення завантаженого HTML на читабельний текст, який отримує модель, з відкиданням навігації, скриптів і шаблону. Того, що видобуток викинув, жодна модель не побачить.

Читати далі

Довші відповіді на питання, які ця сторінка може лише підсумувати.

Питання, які про це ставлять

Як AI Mode вибирає, які джерела цитувати?
Ніхто поза Google не може назвати механізм, і ця сторінка не вдаватиме, що може. Спостережуване таке: цитовані сторінки зазвичай містять уривок, який відповідає на запит повністю й самотужки, а сторінки, чия відповідь розтягнута на кілька розділів, цитуються рідше, ніж заслуговує їхній зміст. Vectorscope показує, чи є такий уривок у вас.
Як потрапити в цитування AI Overviews?
Дайте відповіді власний уривок, під заголовком, який називає питання, достатньо високо на сторінці, щоб він пережив межу вибірки. Це не трюк — це форма, яку пошук винагороджує, і чи має її ваша сторінка, можна перевірити тут.
Це інструмент візуалізації ембедингів?
Так, для однієї сторінки за раз. Він ембедить кожен уривок URL і групує їх за змістом, тож видно, які частини сторінки поруч, а які стоять окремо. Він не малює корпус із тисяч документів.
Чим розбиття за заголовками відрізняється від семантичного?
Розбиття за заголовками ріже по власних заголовках сторінки; семантичне ріже там, де змінюється зміст, є там заголовок чи ні. Перше дешеве й іде за автором; друге вимагає ембедингу речень ще до першого розрізу.
Чи використовує Vectorscope семантичне розбиття?
Не для того, щоб різати сторінку. Vectorscope ріже по кожному h2 — h3 нового фрагмента не починає — і ділить довгий розділ на вікна у 2000 символів із перекриттям у 200. Семантичний крок іде після: кожен фрагмент отримує ембединг, близькі за змістом фрагменти групуються, і видно, де семантичне розбиття не погодилося б із вашими заголовками.
Ви зберігаєте сторінку, яку я перевіряю?
Прочитане тримається недовго, щоб ним можна було поділитися посиланням, а сама завантажена сторінка після формування звіту не зберігається. Акаунт не потрібен, тож і прив’язати це ні до чого.
Це справді безкоштовно?
Так, з обмеженням частоти, а не з платною стіною. Обмеження існує, бо кожне читання витрачає виклик ембедингів, і воно скидається у фіксованому вікні, про яке сторінка попереджає до того, як ви в нього впиретеся.

На цю тему

Чи готова моя сторінка до пошуку зі ШІ?

Щодня Краулінг із прочитанням Vectorscope біля кожної сторінки і повторна перевірка після кожного виправлення. Як працює продукт

Інші безкоштовні AI SEO інструменти

Чого це показати не може

Одна сторінка сама по собі. Чи відповідає вона на питання, які люди справді ставлять асистентам, як вона стоїть проти сторінки конкурента на ту саму тему, і для яких тем у вас сторінки немає взагалі — для цього потрібен корпус усього сайту, зміряний у часі.

Попросити запрошення