Docs/Bantuan/Web Scraping Layar Web Scraping (berjudul Web Scraping Settings di CMS) memungkinkan agent Anda membaca isi halaman web dan mengubahnya menjadi Markdown, serta mengatur gambar dan path mana yang disertakan. Terdapat di sidebar agent pada Tools → Web Scraping.
Web Scraping Configuration
| |
|---|
| Enable Web Scraping | Mengizinkan agent mengekstrak dan menganalisis isi halaman web secara real time. Field lainnya nonaktif selama setelan ini mati. |
| Include Images | Mempertahankan gambar di output Markdown. Jika mati, semua gambar dihapus dari konten hasil scraping. |
| Timeout (seconds) | Berapa lama menunggu halaman dimuat, dari 5 hingga 60 detik. Default: 30. |
Image Size Filters
Gambar di luar rentang ukuran ini disaring.
| |
|---|
| Min Image Size (KB) | Gambar yang lebih kecil, seperti ikon dan dekorasi, dihapus. Dari 1 KB hingga 10240 KB. Default: 5 KB. |
| Max Image Size (MB) | Gambar yang lebih besar dihapus untuk menghindari unduhan yang berat. Dari 1 MB hingga 50 MB. Default: 10 MB. |
Ignored Paths
| |
|---|
| Path Patterns to Ignore | Path yang dilewati saat scraping. Mendukung path absolut (/icons), wildcard (*.svg), dan nama file (logo.png). Biarkan kosong untuk menyertakan semua path. Maksimal 50 pola, masing-masing 200 karakter. |
| Add New Path Pattern | Menambahkan entri ke daftar. Setiap entri memiliki tombol hapus. |
Menyimpan
| |
|---|
| Save | Memeriksa field, meminta konfirmasi, lalu menyimpan pengaturan. |
Panduan terkait: Mencari dan Membaca Web