Що показує симулятор пошукового робота
- Мета-теги — title, description, robots, canonical, мову, viewport, hreflang і Open Graph.
- Структуру заголовків — H1–H6 у порядку появи, щоб побачити, чи логічна ієрархія.
- Видимий текст — те, що залишається на сторінці без скриптів і стилів, з кількістю слів.
- Посилання — внутрішні й зовнішні, з анкорами та позначками nofollow.
- Картинки — адреси та alt, а також скільки картинок без опису.
- Структуровані дані й скрипти — типи schema.org у JSON-LD, кількість скриптів і фреймів.
Чим бачить сторінку пошуковий робот
Робот спершу завантажує HTML-код, і лише потім (інколи із запізненням) виконує JavaScript. Тому все, що з’являється на сторінці тільки після скриптів, у першому проході може бути невидимим. Якщо в симуляторі тексту набагато менше, ніж у браузері, вміст формується JavaScript-ом, і краще віддавати його одразу в HTML (серверний рендеринг).
Для чого це потрібно
Чим це відрізняється від Googlebot Checker
Симулятор показує вміст сторінки: що саме читає робот. Googlebot Checker відповідає на інше питання: чи пускають бота на сторінку (robots.txt, код відповіді, блокування) і чи отримує він те саме, що й браузер. Разом вони дають повну картину. Для масової перевірки адрес використовуйте перевірку індексації.
Обмеження перевірки
Ми не виконуємо JavaScript, не завантажуємо картинки й стилі та аналізуємо лише одну сторінку. Приховані стилями елементи ми відокремити від видимих не можемо, а справжній Googlebot визначають за IP, тому захисти від ботів (WAF) можуть відповісти нам інакше, ніж Google. Це наближена модель, а не точна копія роботи пошуковика.
Що ще вміє StayIndexed
Ця сторінка — безкоштовний інструмент від сервісу StayIndexed. У кабінеті можна зберегти список адрес, перевіряти їх одним кліком і бачити, коли в них змінилися title, H1, canonical чи noindex (це теж безкоштовно), а основна справа сервісу — стежити, як ваші сторінки почуваються в Google.
Скільки це коштує
Перевірка безкоштовна: і на цій сторінці, і в кабінеті. Токенами оплачуються інші послуги: індексація, швидкість і беклінки — по 3 токени за перевірку. При реєстрації нараховується 30 токенів, без картки.
Поширені запитання
Як побачити сайт очима пошукового робота?
Введіть адресу сторінки у форму вище: ми відкриємо її як Googlebot без виконання JavaScript і покажемо мета-теги, заголовки, текст, посилання й картинки.
Що таке Spider Simulator?
Це інструмент, який показує сторінку так, як її читає пошуковий робот: без стилів і скриптів, лише код, текст, заголовки та посилання.
Чому тексту в симуляторі менше, ніж у браузері?
Найімовірніше, частина вмісту з’являється через JavaScript. Робот може побачити його із запізненням або не побачити зовсім, тому важливий текст краще віддавати одразу в HTML.
Чи бачить Google вміст, створений JavaScript-ом?
Google виконує JavaScript, але в окремій черзі та з обмеженнями, а інші пошукові системи роблять це гірше. Надійніше віддавати головний вміст у вихідному HTML.
Чи можна перевірити сторінку, закриту в robots.txt?
Ми завантажуємо сторінку незалежно від robots.txt, щоб показати її вміст, але справжній бот на неї б не пішов. Чи закрито адресу від бота, перевірте в Googlebot Checker або Robots.txt Checker.
Скільки коштує симулятор пошукового робота?
Нічого: перевірка безкоштовна і на цій сторінці, і в кабінеті StayIndexed. У кабінеті можна зберегти список адрес, оновлювати перевірку одним кліком і бачити історію змін.