History CS AI — Audit Kualitas Balasan AI

Apa itu History CS AI?

Tab History menampilkan 500 percakapan AI terakhir untuk satu template. Fitur ini dipakai untuk audit kualitas balasan AI — kamu bisa review jawaban yang salah, lalu perbaiki knowledge, behavior, atau dokumen training.

Kolom yang Ditampilkan

Kenapa Audit History Penting?

AI bukan sistem yang sempurna sejak hari pertama. Kualitas balasan AI sangat tergantung pada isi Knowledge, Behavior, dan dokumen training yang kamu berikan. Audit history membantumu:

• Menemukan jawaban yang salah — customer tanya A, AI jawab B
• Menemukan pertanyaan yang belum terjawab — AI bilang "saya tidak tahu" padahal info-nya ada
• Mengidentifikasi pola pertanyaan — topik yang sering muncul tapi belum dimasukkan ke knowledge
• Mengukur response time — jika terlalu lambat, pertimbangkan ganti model
• Mengontrol biaya token — percakapan mana yang paling banyak menghabiskan saldo

Cara Audit Mingguan yang Efektif

1. Buka tab History di template AI
2. Review 20–30 percakapan acak — tidak perlu semua, sampel saja
3. Untuk setiap percakapan, tanyakan:
   • Apakah jawaban AI sudah benar?
   • Apakah gaya bahasa sudah sesuai?
   • Apakah informasi yang dibutuhkan sudah lengkap?
4. Catat temuan — jawaban salah apa, informasi apa yang kurang
5. Perbaiki sumber:
   • Informasi kurang/salah → update Knowledge
   • Gaya bahasa kurang tepat → update Behavior
   • Pertanyaan detail teknis → tambah dokumen training
6. Test ulang — chat dari nomor testing untuk memverifikasi perbaikan

Membaca Status Balasan

Membaca Response Time

• < 2000 ms — sangat cepat, ideal
• 2000–5000 ms — normal untuk model standar
• > 5000 ms — terlalu lambat. Pertimbangkan ganti ke model yang lebih ringan atau kurangi ukuran dokumen training

Tips Audit

1. Jadwalkan audit rutin — minimal seminggu sekali, bukan hanya saat ada masalah
2. Fokus ke percakapan penting — prioritaskan customer dengan nilai transaksi besar atau komplain berulang
3. Catat pola masalah — jika topik yang sama berulang kali salah dijawab, update knowledge sekaligus
4. Bandingkan sebelum & sesudah — setelah update knowledge, audit lagi setelah 2–3 hari untuk cek perbaikan
5. Libatkan tim CS manusia — minta feedback dari CS tentang jawaban AI yang sering mereka koreksi

Selanjutnya

• AI Training — perbaiki Knowledge & Behavior berdasarkan temuan audit
• AI Model — ganti model jika response time terlalu lambat
• Top Up Saldo CS AI — pantau konsumsi saldo dari history