Технический аудит доступа
Могут ли ИИ-краулеры читать ваш сайт? Заблокированный сайт не выиграет ни от какой работы над контентом.
Открыть страницу →Могут ли ИИ-краулеры читать ваш сайт? Заблокированный сайт не выиграет ни от какой работы над контентом.
✓ Запустить аудит| Статус | Проверка | Находка | Завести задачу |
|---|---|---|---|
| блокирует | llms.txt | No llms.txt. Not required, but a cheap way to describe the site's structure to AI crawlers. | Завести задачу |
| исправьте | Sitemap | The sitemap has not been updated for 47 days. Freshness matters especially to Perplexity. | Завести задачу |
| исправьте | Response speed (TTFB) | Time to first byte 840 ms. Slow responses burn crawl budget. | Завести задачу |
| пройдено | robots.txt — AI crawlers | Every AI crawler can read the site. | — |
| пройдено | Content without JavaScript | The content is present in the raw HTML. | — |
| пройдено | Structured data (JSON-LD) | Schemas found: Organization, Product, FAQPage. | — |
| пройдено | Bot protection (CDN/WAF) | Bot protection is not blocking AI crawlers. | — |