Merancang Skenario
Buka di CMSSimulasi yang kuat dimulai dari rancangan skenario yang kuat. Tujuan Anda adalah mewakili percakapan user yang nyata dan menetapkan ekspektasi yang jelas untuk setiap langkah.
Isi Sebuah Skenario
Sebuah skenario conversation simulation berisi:
- Scenario Name
- Category
- Satu atau lebih Conversation Steps
- Untuk setiap langkah:
- User Message
- Expected Response
- Evaluation Criteria
Semakin realistis dan terukur skenario Anda, semakin berguna hasilnya.
Langkah demi Langkah: Membangun Skenario
1) Buka Conversation Simulation
- Buka Simulation → Scenarios (judul halamannya Conversation Simulation).
- Klik New Conversation.
2) Tambahkan langkah percakapan
- Di Conversation Steps, tentukan pesan user untuk Step 1.
- Isi respons AI yang diharapkan untuk Step 1.
- Tambahkan langkah lain dengan Add Message untuk menyimulasikan percakapan multi-giliran yang nyata.
3) Buat dan sempurnakan kriteria
- Untuk setiap langkah, klik Suggest/Rewrite Criteria.
- Tinjau kriteria yang dihasilkan dengan cermat.
- Tambahkan kriteria manual jika diperlukan.
- Tulis ulang kriteria yang kurang jelas hingga menjadi spesifik.
4) Lengkapi info percakapan
- Klik Save dalam mode pembuatan.
- Sistem bisa menyarankan nama skenario secara otomatis.
- Konfirmasi atau edit nama tersebut.
- Pilih kategori.
- Konfirmasi untuk membuat skenario.
Aturan Menulis Kriteria
Kriteria yang baik dapat diuji. Hindari kata-kata yang samar.
| Kriteria lemah | Kriteria kuat |
|---|---|
| "Jawaban harus bagus" | "Harus menyebutkan bahwa masa refund adalah 14 hari" |
| "Harus sopan" | "Harus menyertakan permintaan maaf ketika kegagalan layanan disebutkan" |
| "Jelaskan dengan jelas" | "Harus memberikan 3 langkah wajib secara berurutan" |
Gunakan pola ini:
- Sertakan fakta yang wajib ada
- Sertakan batasan kebijakan yang wajib dipatuhi
- Sertakan perilaku yang dilarang
Gunakan Mock untuk Pemanggilan Tool
Jika agent Anda memanggil tool (Custom API, MCP server, agent lain, atau plugin), pasang sebuah mock set di kartu Tool mocks pada skenario. Tool tersebut kemudian mendapat jawaban terskrip alih-alih memanggil sistem sungguhan, sehingga skenario memberi hasil yang sama di setiap run dan Anda bisa menguji jalur error dengan sengaja. Lihat Menguji Tool dengan Aman Memakai Mock.
Praktik Terbaik Merancang Skenario
- Mulailah dari log percakapan nyata dan FAQ support.
- Tetapkan satu tujuan utama per skenario.
- Pisahkan skenario happy path dan skenario edge case.
- Sertakan minimal satu skenario pemicu eskalasi jika alur kerja Anda memerlukan handoff.
- Tambahkan skenario yang sensitif terhadap model (penalaran panjang, nuansa kebijakan, permintaan multibahasa) untuk pengujian penggantian model.
Langkah berikutnya
Setelah skenario Anda siap, jalankan dan ikuti progresnya:
- Menjalankan dan Memantau: mulai simulasi dan pantau statusnya.
- Menyiapkan Kategori: jaga pustaka skenario yang terus bertambah tetap teratur.