LensBot

LensBot, Korvenium Lens'in sitenizi taramak için kullandığı bottur. Sitenizin günlüklerinde bu adı gördüyseniz, birisi Lens'te sitenizin adresini taratmıştır.

Ne yapar

LensBot yalnız bir kişi Lens'te sitenizi taratınca çalışır; sürekli ya da kendiliğinden tarama yapmaz. Sitenizin yapay zekâ botlarına ne kadar açık olduğunu, içeriğinin ne kadar alıntılanabilir olduğunu ve bir yapay zekâ ajanıyla ne kadar uyumlu olduğunu ölçer.

Kendini şu User-Agent ile tanıtır:

LensBot/1.0 (+https://lens.korvenium.com/bot)

Ne okur

• Taratılan sayfa.
• Sitenizin kökündeki robots.txt, sitemap.xml ve llms.txt.
• /.well-known/ altındaki ajan dosyalarından birkaçı (ör. mcp.json, ai-plugin.json).

Taranan sayfanın ham HTML'i ve gövde metni saklanmaz; rapor (puan ve bulgular) 90 gün saklanır. Sayfa metninin bir bölümü, yapay zekâ özeti için Google Gemini API'ye gönderilir; ayrıntı Gizlilik politikası sayfasındadır.

Ne yapmaz

• Özel ağ adreslerine gitmez.
• Giriş gerektiren sayfalara girmez.
• Form göndermez.
• Zaman aşımı ve boyut sınırı vardır; çok büyük ya da yanıt vermeyen sayfaları okumayı bırakır.

LensBot'u nasıl engellersiniz

LensBot taramaya başlamadan önce sitenizin robots.txt dosyasını okur. Sitenizin tamamını LensBot'a kapatmak için dosyaya şunu ekleyin:

User-agent: LensBot
Disallow: /

Taratılan sayfa LensBot'a kapalıysa sayfa hiç getirilmez ve tarama "site sahibi robots.txt ile LensBot'u engellemiş" hatasıyla biter. Bu durumda yalnız robots.txt okunur; sayfa, sitemap.xml, llms.txt ve /.well-known/ dosyaları istenmez. robots.txt okunamazsa (dosya yoksa ya da hata dönerse) tarama sürer.

Sorun bildirimi

LensBot'la ilgili bir sorun yaşadıysanız ya da sitenizden taramanın durdurulmasını istiyorsanız destek@korvenium.com adresine yazın.