Web Sitesi Tarama

Genel Bakış

Web sitesi tarayıcısı, web sitenizdeki birden fazla sayfadan içeriği otomatik olarak keşfeder ve çıkarır. Sayfaları tek tek eklemek yerine, tüm sitenizi (veya belirli bölümlerini) tarayabilir ve tüm içeriğin AI'nizin bilgi tabanına otomatik olarak eklenmesini sağlayabilirsiniz.

Tarayıcı, sayfaları keşfetmek için bağlantıları takip eder, metin içeriğini çıkarır ve AI'nizin web siteniz hakkındaki soruları yanıtlayabilmesi için her şeyi işler.

Tarama Modları

İhtiyaçlarınıza göre iki tarama modu arasından seçim yapabilirsiniz:

Plana Göre Tarama Limitleri

Tarayabileceğiniz maksimum sayfa sayısı planınıza bağlıdır:

Şifre Korumalı Sayfalar Starter+

Giriş gerektiren sayfaları taramanız mı gerekiyor? Yalnızca üyelere özel içerikleri, dashboard'ları veya web sitenizin şifre korumalı alanlarını taramak için "Şifre Korumalı Sayfalar" seçeneğini etkinleştirin.

Nasıl Kullanılır

1. Tarama sayfasındaki "Şifre Korumalı Sayfalar" geçiş düğmesini etkinleştirin
2. Giriş Sayfası URL'nizi girin (ör. yoursite.com/login)
3. Kullanıcı Adı/E-posta ve Şifrenizi girin
4. Taramayı Başlat'a tıklayın - sistem önce giriş yapacak, ardından korumalı sayfaları tarayacaktır

Nasıl Çalışır

Şifre korumasını etkinleştirdiğinizde tarayıcı:

1. Visits your login page and detects the form fields automatically
2. Kimlik bilgilerinizi gönderir (CSRF token'ları dahil)
3. Tarama sırasında kimlik doğrulanmış oturumu sürdürür
4. Starts from where you're redirected after login (e.g., your dashboard)
5. Bulabildiği tüm korumalı sayfaları keşfeder ve tarar

Gelişmiş: Özel Alan Adları

Giriş formunuz standart dışı alan adları kullanıyorsa, "Gelişmiş" bölümünü genişletin ve belirtin:

• Kullanıcı adı alan adı - Kullanıcı adı/e-posta için form alan adı (ör. user_email)
• Şifre alan adı - Şifre için form alan adı (ör. user_pass)

En İyi Uygulamalar

Taramadan Önce

• Make sure your website is accessible and pages load correctly
• Check that important pages are linked from your homepage or sitemap
• For password-protected crawls, verify your credentials work

Sayfa Seçimi

• En önemli sayfalarınızla başlayın - ürün sayfaları, SSS'ler, hizmetler
• Yalnızca belirli sayfalara ihtiyacınız varsa Manuel modu kullanın
• Avoid crawling pages with outdated or inaccurate information

Taramadan Sonra

• Bilgi tabanınızdaki taranan içeriği inceleyin
• Yakalanan ilgisiz sayfaları kaldırın
• Taranan içerik hakkında sorularla AI'nizi test edin
• İçeriği güncel tutmak için periyodik olarak yeniden tarayın

Taranan Sayfaları Yönetme

Tarama tamamlandıktan sonra, Kontrol Panelinizdeki Bilgi Tabanı bölümünden sayfaları önizleyebilir ve yönetebilirsiniz.

Sayfa İçeriğini Önizleme

1. Kontrol Panelinize gidin ve Bilgi Tabanı bölümünü açın
2. Açmak için bir tarama öğesine tıklayın — taranan tüm sayfaların listesini göreceksiniz
3. Çıkarılan içeriği önizlemek için herhangi bir sayfa başlığına tıklayın
4. Sayfa listesine dönmek için Sayfalara geri dön düğmesini kullanın

Sayfaları Tek Tek Düzenleme Starter+

Taranan herhangi bir sayfanın çıkarılan içeriğini düzenleyebilirsiniz. Bu, biçimlendirme sorunlarını düzeltmek, alakasız bölümleri kaldırmak veya eksik bilgileri eklemek için kullanışlıdır.

1. Open the crawl item and click a page title to view its content
2. Önizlemenin üst kısmındaki Düzenle düğmesine tıklayın
3. Başlığı veya içeriği gerektiği gibi değiştirin
4. Kaydet ve Yeniden Göm'e tıklayın — sayfanın yapay zeka gömmeleri güncellenmiş içerikle yeniden oluşturulacaktır

Tek tek sayfaları yeniden tarama Starter+

Web sitenizde bir sayfa güncellendiyse, tüm web sitenizi yeniden taramadan yalnızca o sayfayı yeniden tarayabilirsiniz.

1. Bilgi Tabanınızdan tarama öğesini açın
2. Click the re-crawl button next to the page you want to update
3. Onayla — sayfa yeniden getirilecek ve gömülüleri en son içerikle güncellenecek

Sayfaları Tek Tek Silme

Tüm taramayı silmeden belirli sayfaları kaldırabilirsiniz. Bu, alakasız, yinelenen veya yanlış taranan sayfaları kaldırmak için kullanışlıdır.

1. Bilgi Tabanınızdan tarama öğesini açın
2. Kaldırmak istediğiniz sayfanın yanındaki sil düğmesine tıklayın
3. Silme işlemini onaylayın — sayfa ve gömmeleri kalıcı olarak kaldırılacaktır

Sorun Giderme

Tarama beklenenden daha az sayfa döndürüyor

• Sayfalar keşfedilebilir sayfalardan bağlantılı olmayabilir
• Bazı sayfalar robots.txt tarafından engellenmiş olabilir
• Cloudflare or other security services might block the crawler
• Solution: Use Manual mode to specify exact URLs

Parola korumalı tarama başarısız oluyor

• Kimlik bilgilerinizin doğru olduğunu kontrol edin
• Girişinizde CAPTCHA veya 2FA kullanılıp kullanılmadığını kontrol edin
• Gelişmiş ayarlarda özel alan adları belirtmeyi deneyin
• Your site might use JavaScript-based authentication (not supported)

Tarama çalışmazsa alternatifler:

• Sayfaları geçici olarak herkese açık yapın, tarayın, ardından korumayı yeniden etkinleştirin
• Sayfaları HTML dosyası olarak kaydedin ve Toplu Yükleme ile yükleyin

İçerik eksik görünüyor

• Bazı içerikler JavaScript ile yüklenmiş olabilir (çıkarılmaz)
• İçerik görsellerde olabilir (metin olarak çıkarılmaz)
• Çözüm: Eksik içeriği Metin veya PDF yükleme ile manuel olarak ekleyin