DSCOPE

בדיקת תוצאות במוקד

איך יודעים שסוכן AI באמת פתר את פניית השירות?

כדי לבדוק אם סוכן שירות פתר בעיה, בוחרים סוג פנייה אחד ועוקבים אחריה גם אחרי סגירת השיחה. בדקו בכמה מהמקרים הלקוח אישר שהבעיה נפתרה בעזרת הסוכן בלבד. אם אותו לקוח חזר בגלל אותה בעיה בתוך תקופת המעקב, עדכנו את התוצאה. זמן תגובה מהיר יכול לשפר את החוויה, אך בפני עצמו הוא לא מעיד שהלקוח קיבל פתרון.

לפני שסופרים, בוחרים איזו בעיה מודדים

נניח שאתם בודקים פיילוט לשחזור גישה לחשבון. הגדירו מה ייחשב לפתרון: הלקוח אישר שהצליח להיכנס. שליחת קישור לאיפוס מציינת שבוצע צעד בתהליך. בחרו גם תקופת מעקב, למשל שבעה ימים מהמענה הראשון. אם הלקוח פנה שוב בעניין הגישה באותו פרק זמן, משייכים את הפנייה הנוספת למקרה המקורי, גם כשהיא מגיעה בערוץ אחר. פנייה חדשה שלו על חיוב שגוי היא מקרה אחר.

מתוך 100 פניות, בכמה טיפל הסוכן עד הסוף?

המספרים הבאים הם דוגמה לחישוב. נכללו 100 פניות חדשות על שחזור גישה, כולן מתאימות לפיילוט, ותקופת המעקב כבר הסתיימה לכולן. סופרים כל מקרה פעם אחת. כך נראית החלוקה בתום השבוע:

  • 42 לקוחות אישרו שהגישה חזרה, ללא עזרת נציג וללא פנייה חוזרת על התקלה.
  • 8 לקוחות אישרו בתחילה שהבעיה נפתרה, אבל חזרו בתוך שבוע בגלל אותה תקלה. הם נספרים בקבוצת הפניות החוזרות, גם אם נציג עזר להם אחר כך.
  • 25 מקרים עברו לטיפול אנושי במהלך השיחה הראשונית. אפשר לבדוק בנפרד כמה מהם נפתרו בעזרת הנציג.
  • 15 לקוחות עזבו בלי לאשר שהצליחו להיכנס, ו-10 מקרים נשארו פתוחים. בשתי הקבוצות חסרה הוכחה לפתרון.

למה אותו דוח מציג גם 42% וגם 16%?

מתוך 100 המקרים שנכללו, 42 עומדים בהגדרת הפתרון שקבענו. לכן שיעור הפתרון המאושר לאחר שבוע הוא 42%. כדי לבדוק כמה מהפתרונות הראשוניים לא החזיקו מעמד, מתחילים בקבוצה אחרת: 50 לקוחות אישרו תחילה שהבעיה נפתרה, ו-8 מהם חזרו. שיעור החזרה בקבוצה הזאת הוא 8 מתוך 50, כלומר 16%. אם מוצג אחוז בלי כותרת שמציינת מי נספר במכנה, בקשו לראות את שתי הספירות שמאחוריו.

מה מלמדת העברה לנציג?

נניח שהלקוח איבד גישה גם לכתובת הדוא״ל המשמשת לשחזור. לפי נוהל המוקד נדרשת בדיקת זהות בידי נציג. העברה נכונה יכולה להיות תוצאה טובה ללקוח, והיא נרשמת כטיפול אנושי. פתחו כמה מהמקרים שהועברו ובדקו אם הנציג קיבל את סיבת הפנייה ואת הפעולות שכבר נוסו. כך אפשר להבחין בין העברה שהייתה נחוצה לבין העברה שנגרמה כי קישור האיפוס לא הגיע.

הגדרות Intercom לפתרון מאושר, לפתרון משוער ולהעברה לנציג

מה לבדוק לפני שמרחיבים את הפיילוט

בדוח השבועי הציגו לצד כל שיעור את מספר המקרים, את סוג הפנייה ואת טווח התאריכים. אם בשבוע אחד נבדקו רק עשרה מקרים, מקרה יחיד משנה את התוצאה בעשר נקודות אחוז. השוו תקופות שבהן טיפלתם בבעיות דומות, והמתינו לסיום חלון המעקב גם בשבוע השני. כשאין דרך לזהות שלקוח שפנה בטלפון הוא גם מי שכתב בצ׳אט, ציינו כמה מקרים לא היה אפשר לקשר. ירידה במספר הפניות החוזרות המזוהות יכולה לנבוע גם מהחסר הזה.

♿
אפשרויות נגישות הצהרת נגישות