Knowledge Base

Domain Knowledge Base

Crawl seluruh website secara otomatis untuk knowledge base yang komprehensif

Apa itu Domain KB?

Domain Knowledge Base adalah cara paling powerful untuk menambahkan knowledge base. Sistem akan otomatis crawl seluruh website dari domain yang Anda berikan, menemukan semua halaman internal, dan mengindeksnya. Cocok untuk website dengan banyak konten yang terstruktur.

Paling Powerful

Crawl seluruh website otomatis

Auto Discovery

Temukan halaman otomatis

Dapat Difilter

Include/exclude patterns

Kapan Menggunakan Domain KB?

Website Dokumentasi

Dokumentasi lengkap dengan banyak halaman

E-commerce

Website toko dengan banyak produk

Help Center

Knowledge base atau support website

Company Website

Corporate website dengan banyak halaman

Cara Membuat Domain KB

  1. 1
    Buka Resources → Create Resource
    Resources Page

    Halaman Resources Agent

    Pilih Knowledge → Domain

  2. 2
    Masukkan Domain URL
    Domain Form

    Form Input Domain dengan Filter

    URL homepage domain:

    https://example.com
  3. 3
    Tambahkan Filter (Opsional)

    Batasi halaman yang di-crawl dengan pattern

  4. 4
    Klik "Discover URLs"
    Domain URL Discovery

    Daftar URL dari Domain Crawl

    Sistem crawl dan tampilkan daftar URL

  5. 5
    Pilih URLs yang Diinginkan
    Select URLs from Domain

    Pilih URL yang Diinginkan

    Centang URL yang ingin diindeks dari daftar yang muncul

  6. 6
    Review & Create
    Domain KB Created

    Domain KB Berhasil Dibuat

    Periksa URL yang dipilih, beri nama, lalu klik "Create"

    Knowledge base akan diproses dan siap digunakan dalam beberapa saat

Catatan Penting

Hanya SSR, Tidak Mendukung SPA

Kami hanya dapat membaca website SSR (Server-Side Rendered). Website SPA (Single Page Application) berbasis JavaScript seperti React, Vue, atau Angular tanpa SSR tidak dapat dibaca.

Proses Memakan Waktu

Crawling besar membutuhkan waktu, tergantung ukuran website

Hanya Internal Links

Hanya link dalam domain yang sama

Beberapa Site Mem-block

Website dengan anti-bot mungkin gagal di-crawl

Tips & Best Practices

Gunakan Filter untuk Efisiensi

Filter hanya crawl section yang relevan

Test dengan Sitemap Dulu

Jika ada sitemap, test dengan Sitemap KB dulu

Monitor Credit Usage

Domain crawl bisa menggunakan banyak credits