QA Evaluation

Penilaian kualitas layanan yang diberikan oleh Agent dalam menangani interaksi dengan pelanggan.

Contoh evaluasi dengan status yang telah berubah dapat ditemukan pada fitur QA (Quality Assessment) Evaluation, yang tersedia bagi pengguna dengan peran Supervisor dan Admin. Fitur ini digunakan untuk memberikan penilaian terhadap performa Agent berdasarkan kriteria yang telah ditetapkan dalam template evaluasi.

Tujuan dari QA Evaluation adalah memastikan standar layanan tetap terjaga, mengidentifikasi area yang perlu diperbaiki, serta memberikan masukan agar Agent dapat meningkatkan kualitas pelayanan mereka.

Sebelum melakukan QA (Quality Assessment), langkah pertama yang harus dilakukan adalah membuat Template Criteria sebagai dasar penilaian.

Untuk membuat Template Criteria, Anda dapat membuka halaman berikut :

Template Criteria

Panduan Membuat QA Evaluation untuk Manajemen Evaluasi

Setelah berhasil membuat Template Criteria, langkah selanjutnya adalah masuk ke menu QA Evaluation untuk mengatur Manajemen Evaluasi.

Di sini, Anda dapat menentukan pengaturan evaluasi, seperti memilih channel yang ingin dinilai, menetapkan jumlah maksimum sampel, memilih template criteria yang akan digunakan, serta menentukan kriteria tematik dalam evaluasi. Selain itu, Anda juga dapat memilih Agent yang akan dievaluasi agar proses penilaian lebih terarah dan sesuai dengan kebutuhan.

Untuk memulai proses QA (Quality Assessment) Evaluation, pilih tombol "Create QC" yang terletak di pojok kanan atas.

Letak tombol Create QC

Setelah mengklik "Create QC", Anda akan diarahkan ke form Evaluation Rules yang perlu diisi. Form ini akan terbuka pada menu pertama, yaitu Basic Information.

Tampilan form evaluation rules

Pada tahap ini, Anda perlu mengisi informasi dasar mengenai evaluasi yang akan dilakukan, yaitu :

  1. Title, berisikan judul tema dari evaluasi yang akan di nilai

  2. Interaction Type, memilih jenis interaksi yang akan di lakukan evaluasi

Isi dropdown tipe interaksi yang harus di pilih
  1. Channel, memilih jenis channel yang akan di lakukan evaluasi

Contoh isi jenis channel jika tipe interaksi yang dipilih adalah RTC
Contoh isi jenis channel jika tipe interaksi yang dipilih adalah NRTC
Contoh isi jenis channel jika tipe interaksi yang dipilih adalah Social Media & Email
  1. Maximum Sampling, menentukan jumlah data yang akan di lakukan sampling evaluasi

Setelah semuanya telah di isi, pilih tombol "Next" untuk melanjutkan ke langkah berikutnya.

Memilih tombol "Next" untuk ke step selanjutnya

Setelah mengklik tombol "Next", Anda akan masuk ke menu Evaluation Form. Pada tahap ini, Anda perlu memilih form evaluasi yang telah dibuat sebelumnya di menu Template Criteria. Form ini berisi kriteria penilaian yang sudah ditentukan untuk mengevaluasi performa Agent.

Tampilan template criteria yang telah di buat sebelumnya

Setiap kali Anda memilih template pada menu Evaluation Form, akan muncul preview dari template tersebut. Fitur ini memudahkan Anda untuk melihat isi dan struktur template sebelum digunakan dalam evaluasi, sehingga Anda dapat memastikan bahwa template yang dipilih sudah sesuai dengan kebutuhan penilaian.

Tampilan review template yang dipilih

Setelah memilih template yang sesuai dengan kebutuhan penilaian, klik tombol "Next" untuk melanjutkan ke langkah berikutnya.

Setelah mengklik tombol "Next", Anda akan masuk ke menu Data Sample Rules.

Memilih tombol "Next" untuk ke step selanjutnya

Pada menu Data Sample Rules, Anda dapat mengatur jenis data yang ingin digunakan dalam evaluasi. Di dalamnya, terdapat beberapa form yang harus diisi, yaitu:

  1. Choose Field: Memilih bidang data yang akan digunakan sebagai dasar evaluasi.

  2. Criteria: Menentukan aturan atau kondisi yang harus dipenuhi dalam pemilihan data.

  3. Value: Mengisi nilai spesifik yang sesuai dengan kriteria yang telah ditentukan.

Fom yang harus di isi untuk jenis data yang ingin di dapatkan

Jika Anda membutuhkan lebih dari satu Data Sample Rule, Anda dapat mengklik tombol "Add Rules".

Tombol untuk menambahkan rules

Setelah itu, form aturan baru akan muncul, dan Anda dapat mengisinya sesuai kebutuhan.

Contoh tampilan jika menambahkan lebih dari 1 rules

Dengan menambahkan lebih banyak aturan, Anda dapat memperinci jenis data yang akan digunakan dalam evaluasi agar lebih sesuai dengan standar penilaian yang diinginkan.

Setelah selesai mengisi form untuk menentukan jenis data yang ingin digunakan, klik tombol "Next" untuk melanjutkan ke langkah berikutnya.

Dengan mengatur Data Sample Rules dengan benar, Anda dapat memastikan bahwa data yang digunakan dalam evaluasi sesuai dengan kebutuhan dan standar yang telah ditetapkan.

Memilih tombol "Next" untuk ke step selanjutnya

Setelah mengklik tombol "Next", Anda akan masuk ke menu Mapping Agent.

Pada menu Mapping Agent, Anda dapat mengatur dan memilih Agent yang akan direview dalam proses evaluasi.

Tampilan list agent yang akan di review

Fitur ini memungkinkan Anda menentukan Agent yang akan dinilai berdasarkan kriteria yang telah ditetapkan.

Setelah selesai memilih Agent yang akan direview, klik tombol "Next" untuk melanjutkan ke langkah berikutnya dalam proses evaluasi.

Klik "Next" untuk ke step selanjutnya

Setelah mengklik tombol "Next", Anda akan masuk ke menu Overview.

Tampilan menu overview untuk meninjau semua data

Pada menu Overview, Anda dapat meninjau kembali semua data yang telah diisi sebelum melakukan Submit.

Menu ini memungkinkan Anda memastikan bahwa semua informasi, mulai dari Basic Information (Evaluation Rules), Evaluation Form, Data Sample Rules, dan Mapping Agent, sudah benar dan sesuai dengan kebutuhan evaluasi.

Pastikan semua data telah diperiksa dengan teliti sebelum melanjutkan ke langkah terakhir.

Jika semua data sudah sesuai, klik tombol "Submit" untuk menyelesaikan proses evaluasi.

Tombol submit untuk menyelesaikan proses

Proses Assessment Setelah Pembuatan Evaluation

Proses assessment hanya dapat dilakukan untuk Agent dan channel yang telah dipilih saat pembuatan Evaluation.

Pastikan Anda telah menentukan Agent dan channel yang sesuai agar evaluasi dapat berjalan dengan benar dan sesuai dengan kebutuhan penilaian.

Tampilan list evaluation yang telah di buat

Pilih "View" untuk melihat evaluasi yang telah dibuat, mengatur jenis penilaian evaluasi, dan melaksanakan proses assessment sesuai dengan pengaturan yang telah ditetapkan.

Tombol view untuk melihat evaluasi yang telah di buat

Setelah memilih evaluasi, Anda dapat mengatur jenis penilaian evaluasi dan melaksanakan proses assessment sesuai dengan pengaturan yang telah ditetapkan.

Pilihan metode evaluasi

Pada field QC Action, terdapat dua jenis metode evaluasi yang dapat dipilih:

  1. Evaluate Manual – Penilaian dilakukan secara manual dengan memasukkan jumlah nilai dalam rentang <100.

  2. Evaluate AI – Penilaian dilakukan dengan bantuan AI, yang secara otomatis menganalisis dan memberikan skor berdasarkan data yang tersedia.

Pilih metode yang sesuai dengan kebutuhan untuk memastikan evaluasi berjalan dengan optimal.

Melakukan Penilaian dengan Evaluate Manual

Evaluasi Manual adalah metode penilaian di mana proses penilaian dilakukan secara langsung oleh Supervisor atau Admin tanpa bantuan otomatisasi AI. Dalam metode ini, setiap aspek kinerja agen dinilai secara manual berdasarkan kriteria yang telah ditetapkan dalam Template Criteria.

Memilih evaluasi manual

Saat memilih Evaluate Manual, sistem akan membuka Interaction Handling dari Agent yang akan dinilai.

Table Interaction History

Pada tabel Interaction History, Anda dapat melihat performa Agent berdasarkan riwayat interaksi mereka dengan pelanggan.

Tabel Interaction History menampilkan data evaluasi yang mencakup berbagai aspek penting dalam performa Agent, seperti:

  • Interaction Date – Tanggal dan waktu interaksi antara agen dan pelanggan.

  • Waiting Time – Waktu tunggu pelanggan sebelum mendapatkan respons dari agen.

  • Handling Time – Durasi yang dibutuhkan agen untuk menangani dan menyelesaikan interaksi.

  • Response Time – Waktu yang dibutuhkan agen untuk merespons pelanggan setelah menerima permintaan.

Dengan melihat data ini, Supervisor atau Admin dapat mengevaluasi efisiensi dan kualitas pelayanan Agent secara lebih mendalam.

Pilih salah satu opsi "Evaluate" pada setiap performa Agent yang muncul dalam Interaction History untuk memulai proses penilaian.

Table Interaction History

Setelah memilih, Anda dapat melakukan evaluasi berdasarkan kriteria yang telah ditetapkan.

Isi QA Form pada setiap section dengan skor yang sesuai berdasarkan penilaian terhadap Agent.

QA Form untuk penilaian terhadap Agent

Dengan mengisi QA Form secara teliti, hasil evaluasi akan lebih akurat dan dapat digunakan untuk meningkatkan performa Agent di masa mendatang.

Pada Interaction Sampling, ditampilkan contoh interaksi yang dinilai dalam proses Quality Assessment.

Contoh interaction sampling antara Agent dan pelanggan

Bagian ini berisi rekaman atau ringkasan percakapan antara agen dan pelanggan, yang digunakan sebagai dasar untuk memberikan penilaian objektif.

Dalam setiap penilaian, Anda perlu menentukan Level Urgency, yang menggambarkan tingkat kepentingan atau urgensi dari interaksi yang dievaluasi.

Tombol untuk menentukan urgency

Terdapat tiga level urgency yang dapat dipilih. Pilih level urgency yang sesuai dengan tingkat kepentingan setiap layanan agar evaluasi dapat lebih terstruktur dan akurat.

Memilih level urgency

Setelah selesai mengisi QA Form dan menentukan Tiket Urgency, klik tombol "Submit" untuk menyimpan hasil penilaian.

Tombol submit untuk menyimpan penilaian

Pastikan semua data sudah diperiksa dengan teliti sebelum mengirimkan evaluasi agar hasilnya akurat dan sesuai dengan standar yang telah ditetapkan.

Contoh hasil review sampling

Setelah mengklik "Submit" untuk menyimpan hasil penilaian, Anda dapat melihat hasil penilaian tersebut pada tab menu Review Sampling.

Contoh hasil review sampling yang telah selesai di nilai
Tombol untuk melihat hasil semua sampling

Pada menu ini, seluruh evaluasi yang telah dilakukan akan ditampilkan, memungkinkan Supervisor atau Admin untuk meninjau kembali hasil penilaian, memastikan keakuratan data, dan melakukan analisis lebih lanjut jika diperlukan.

Berikan remark atau catatan kepada Agent sebagai umpan balik dari hasil evaluasi. Catatan ini dapat berisi masukan, saran perbaikan, atau apresiasi terhadap kinerja agen berdasarkan penilaian yang telah dilakukan.

Memberikan catatan kepada Agent

Dengan memberikan remark yang jelas dan konstruktif, agen dapat memahami area yang perlu ditingkatkan serta mempertahankan aspek yang sudah baik dalam performa mereka.

Setelah memberikan remark kepada agen dan memastikan bahwa nilai yang diberikan sudah sesuai dengan kualitas layanan, klik tombol "Submit" untuk menyimpan hasil evaluasi.

Tombol submit untuk menyimpan penilaian evaluasi

Langkah ini akan menyelesaikan proses penilaian dan memastikan bahwa hasilnya terdokumentasi dengan baik untuk referensi dan tindak lanjut ke depannya.

Melakukan Penilaian dengan Evaluate AI

Evaluasi AI adalah metode penilaian otomatis yang menggunakan kecerdasan buatan untuk menganalisis performa Agent berdasarkan data interaksi mereka dengan pelanggan sesuai dengan kriteria yang telah ditetapkan dalam Template Criteria.

Memilih evaluasi AI

Saat memilih Evaluate AI, sistem akan membuka Interaction Handling dari Agent yang akan dinilai.

Pada tabel Interaction History, Anda dapat melihat performa Agent berdasarkan riwayat interaksi mereka dengan pelanggan.

Tombol preview untuk melihat interaction history antara Agent dan pelanggan

Tabel Interaction History menampilkan data evaluasi yang mencakup berbagai aspek penting dalam performa Agent, seperti:

  • Interaction Date – Tanggal dan waktu interaksi antara agen dan pelanggan.

  • Waiting Time – Waktu tunggu pelanggan sebelum mendapatkan respons dari agen.

  • Handling Time – Durasi yang dibutuhkan agen untuk menangani dan menyelesaikan interaksi.

  • Response Time – Waktu yang dibutuhkan agen untuk merespons pelanggan setelah menerima permintaan.

Dengan melihat data ini, Supervisor atau Admin dapat mengevaluasi efisiensi dan kualitas pelayanan Agent secara lebih mendalam.

Pilih Data Sample yang akan dievaluasi sesuai dengan kriteria yang telah ditetapkan.

Memilih data sample yang akan di evaluasi

Pilih salah satu opsi "Preview" pada setiap performa Agent yang muncul dalam Interaction History untuk melihat interaction history antara Agent dengan pelanggan.

Contoh interaction sampling yang dapat di nilai

Setelah memilih Data Sample yang akan dievaluasi, klik tombol "Running AI" untuk memulai penilaian menggunakan Evaluasi AI.

Tombol untuk memulai evaluasi dengan AI

Sistem AI akan secara otomatis menganalisis interaksi Agent dengan bantuan AI, yang secara otomatis menganalisis dan memberikan skor berdasarkan data yang tersedia.

Mengajukan Request ke TL QC Setelah Evaluasi Selesai

Setelah semua section telah selesai dievaluasi, klik tombol "Request to TL QC" untuk mengajukan tinjauan terhadap hasil penilaian.

Mengirimkan evaluasi penilaian ke TL QC untuk dilakukan peninjauan

Pada tahap ini, TL QC akan melakukan preview terhadap kualitas performa Agent berdasarkan evaluasi yang telah dilakukan.

Proses ini memastikan bahwa penilaian telah sesuai dengan standar dan memberikan umpan balik yang akurat untuk peningkatan kualitas layanan.

Memilih user yang akan melakukan preview terhadap kualitas penilaian

Setelah memilih TL QC yang akan melakukan peninjauan terhadap hasil penilaian, klik tombol "Submit" untuk mengirimkan request.

Tombol submit untuk mengirimkan request

Setelah mengklik "Submit", status evaluasi akan berubah dari "To Do" menjadi "Request to TL QC".

Contoh evaluasi yang statusnya telah berubah

Perubahan status ini menandakan bahwa hasil penilaian telah dikirim untuk ditinjau oleh TL QC sebelum finalisasi.

Pilih tombol "View" untuk melihat secara detail penilaian yang telah diberikan sebelumnya.

Melihat hasil penilaian yang telah di berikan

Pilih tombol "Preview" untuk meninjau hasil penilaian secara detail. Pada tahap ini, TL QC dapat mengganti status penilaian menjadi "Approve" jika hasilnya sudah sesuai dengan standar, atau "Reject" jika diperlukan revisi atau di tolak

Tombol preview untuk mengganti status dan memberikan catatan
Mengubah status evaluasi

TL QC juga dapat memberikan catatan atau feedback terkait penilaian yang telah diberikan kepada Agent, sehingga evaluasi dapat lebih transparan dan membantu agen dalam meningkatkan kualitas layanan mereka.

Memberikan catatan terhadap evaluasi penilaian yang diberikan

Setelah selesai mengubah status (Approve atau Reject) dan memberikan catatan atau remark, klik tombol "Submit" untuk menyimpan perubahan.

Tombol submit untuk menyimpan

Setelah berhasil disimpan, status evaluasi akan berubah dari "Request to TL QC" menjadi "Complete".

Contoh evaluasi yang statusnya telah berubah

Perubahan status ini menandakan bahwa proses peninjauan telah selesai dan hasil evaluasi telah final serta terdokumentasi dengan baik.

Jika Anda ingin melihat history perubahan status pada evaluasi yang telah dibuat, pilih tombol "View" lalu klik tombol "History".

Melihat hasil penilaian dan history status yang telah di lakukan
Contoh evaluasi yang statusnya telah berubah dan ingin melihat history statusnya

Setelah itu, sistem akan menampilkan riwayat perubahan status evaluasi, mulai dari tahap awal hingga finalisasi. Fitur ini memungkinkan Supervisor atau TL QC untuk melacak perkembangan evaluasi dan memastikan setiap perubahan terdokumentasi dengan baik.

Tampilan history status dari salah satu evaluasi

Pastikan semua data yang dimasukkan sesuai dengan kebutuhan agar proses evaluasi dapat berjalan dengan lancar dan sesuai dengan standar yang telah ditetapkan.

Last updated