LLM Site Visibility — AI crawler analitiği

AI crawler'ların sitenizi nasıl keşfedip okuduğunu görün — istekler, sayfalar, hatalar — ve Cloudflare, Vercel veya log akışı bağlayın.

Güncelleme: 2026-10-12

Bir AI asistan sizi anmadan ya da göstermeden önce, crawler'ları sayfalarınızı getirmek zorundadır. LLM Site Visibility o görünmez trafiğin analitik katmanıdır: hangi AI bot'ları geliyor, ne okuyor, nerede takılıyor. Bağlı bir trafik kaynağı gerektirir (Pro ve üstü).

Panel

  • KPI kartları: Total Requests, Pages Crawled, Error Rate, Active Bots — her biri trend çipiyle.
  • Sekmeler: Overview, Report, AI Crawlers, Pages, Errors & Blocks, Config.
    • AI Crawlers — bot bazında kırılım (GPTBot, ClaudeBot, PerplexityBot, Google-Extended, Bingbot ve şirkete göre gruplu diğerleri).
    • Pages — bot'ların fiilen okuduğu URL'ler. Okumasını istediğiniz sayfalarla karşılaştırın; crawl bütçesinin ürün sayfası yerine etiket sayfalarına gitmesi bir bulgudur.
    • Errors & Blocks — AI bot'larına dönen 4xx/5xx'ler ve engellenen istekler. GPTBot'a 403, kendi elinizle görünmezliktir; bot-koruması yanlış ayarları burada yüzeye çıkar.
  • Sync Now yeniler; bir kaynak veri getirene kadar "No AI bot traffic found" görünür.

Trafik kaynağı bağlamak (Config sekmesi)

Herhangi biri aynı hattı besler:

  • Cloudflare — API Token + Zone ID yapıştırın, Test Connection.
  • Vercel — Vercel projenizden Log Drain bağlayın.
  • Log akışı — logs.withmaya.ai kimlik bilgileri: bir log shipper (Vector, Fluent Bit) veya CDN push'u yönlendirin. AWS CloudFront standart logları (v2) Firehose üzerinden bu yolu kullanır.

Stack başına kurulum rehberleri (Nginx, Apache, IIS, özel BFF) developer docs'ta.

İlgili sayfalar

  • Crawler Logs (Monitoring) — tek tek istekleri incelemek gerektiğinde, bot ve şirkete göre gruplu ham istek günlüğü.
  • Agent Behavior — yolculuk düzeyi görünüm: AI ajanları sitede nasıl geziniyor ve bu okuma AI-kaynaklı ziyarete dönüşüyor mu (Agentic Rate metriği).
  • Visitor Analytics — insan tarafı: AI asistanlardan gelen, GA4 ile ölçülen trafik.

İyi görünüm neye benzer

  1. Önemsediğiniz AI bot'ları Active Bots'ta, Errors & Blocks sıfıra yakın.
  2. Pages sekmesinin tepesinde para kazandıran sayfalarınız var — sayfalama ve parametre gürültüsü değil.
  3. Bir sayfanın crawl edilmesi, gösterilmesinden önce gelir — ittirdiğiniz bir sayfa hiç crawl edilmiyorsa, içeriği yeniden yazmadan önce keşfedilebilirliği düzeltin.

İlgili makaleler