מי אחראי על המערכת שלך בעוד חצי שנה? השאלות שכדאי לשאול ספק AI לפני שחותמים

ההצעה נחתה במייל ביום רביעי. שלושה עמודים, תרשים זרימה נקי, מחיר שנראה הגיוני ולוח זמנים של שלושה שבועות עד עלייה לאוויר. קראת אותה פעמיים וחיפשת איפה הקאץ'. הקאץ' הוא לא במה שכתוב שם, אלא בזה שכל ההצעה מתארת את שלושת השבועות הראשונים, בזמן שכל מה שיקבע אם תהיה מרוצה קורה בחודש השישי.

חמש שאלות מפרידות בין ספק שתסתדר איתו לספק שתתחרט עליו. כולן נוגעות באותו דבר: מה קורה אחרי שהמערכת עלתה לאוויר וכולם חזרו לעבודה השוטפת.

המספרים מסבירים למה זה קורה כל כך הרבה

מחקר של יוזמת NANDA ב-MIT Media Lab, שבחן שלוש מאות מקרי הטמעה ציבוריים לצד ראיונות עם עשרות מנהלים וסקרים בקרב מאות עובדים, מצא ש-95% מהפיילוטים של בינה מלאכותית יוצרת לא הניבו שום השפעה מדידה על השורה התחתונה. סקר של S&P Global בקרב יותר מאלף ארגונים מצא ש-42% מהחברות זנחו את רוב יוזמות ה-AI שלהן ב-2025, לעומת 17% שנה קודם לכן. גרטנר צופה שיותר מ-40% מפרויקטי הסוכנים החכמים ייגנזו עד סוף 2027, בגלל עלויות שמתנפחות, ערך עסקי לא ברור ובקרות סיכון חסרות.

אלה מספרים של ארגונים גדולים עם תקציבים גדולים, ואפשר לפטור אותם בהינף יד. אבל הפירוט של מחקר MIT הוא שמעניין: מערכות שנרכשו מספק מתמחה הצליחו בכשני שלישים מהמקרים, בזמן שפיתוחים פנימיים הגיעו לכשליש מזה בלבד. הכשל, כשהוא קורה, הוא כמעט אף פעם לא כשל של הטכנולוגיה עצמה. הוא כשל של מה שסוכם על מה שקורה אחרי ההקמה, ורוב הזמן פשוט לא סוכם כלום.

מי מסתכל על השיחות בשבוע השלישי?

בשבוע הראשון כולם מסתכלים. אתה נכנס לראות מה המערכת עונה, הספק שולח צילומי מסך, כולם מרוצים. בשבוע השלישי אתה כבר עסוק במשהו אחר, והספק כבר בפרויקט של לקוח אחר.

השאלה הראשונה היא לכן פשוטה ומעשית: מי קורא את השיחות מכאן והלאה, כמה פעמים, ומה הוא מחפש בהן. תשובה טובה נשמעת כמו נוהל, לא כמו הצהרת כוונות. מישהו עובר על מדגם שיחות בתדירות קבועה, מסמן איפה המערכת לא הבינה, איפה אדם ביקש מחיר ולא קיבל, ואיפה שיחה נגמרה באמצע בלי שאף אחד חזר לאותו אדם. תשובה חלשה נשמעת כמו "אם תהיה בעיה, תגיד לנו". הבעיות שעולות מהשיחות הן בדיוק אלה שאתה לא רואה, כי מי שנטש לא כותב לך להתלונן.

מה קורה כשהמערכת טועה?

היא תטעה. לא בגלל שהיא גרועה, אלא כי אנשים אמיתיים שואלים דברים שאיש לא צפה. מישהי תשאל אם הקורס מוכר לגמול השתלמות, מישהו ישאל אם אפשר להיכנס באמצע המחזור, ומישהו יכתוב שלוש מילים בשגיאות כתיב ויצפה שיבינו אותו.

שאל את הספק מה קורה ברגע כזה. יש שאלות שהמערכת אמורה לזהות שהיא לא יודעת ולהעביר לבן אדם, ויש נושאים שכדאי שלא תיגע בהם מלכתחילה. במיוחד בעסק טיפולי או במוסד לימודים, ההבדל בין מערכת שאומרת "אני אעביר את זה לרפאל והוא יחזור אליך בבוקר" לבין מערכת שממציאה תשובה בטוחה בעצמה הוא ההבדל בין לקוח מרוצה לתלונה שתגיע אליך אחרי שהנזק כבר נעשה. שאל גם מה זמן התיקון: מי מקבל התראה, תוך כמה זמן זה מטופל, ומי מוודא שהתיקון עבד.

מי מעדכן אותה כשהעסק שלך זז?

זו השאלה שהכי הרבה אנשים שוכחים, והיא זאת שהורגת מערכות בשקט. פתחת מסלול חדש, שינית מחיר, עברת מקבוצות של עשרים לקבוצות של שתים עשרה, החלטת שאתם כבר לא עושים מפגשים פרונטליים בחיפה. כל שינוי כזה הופך משפט אחד במערכת למידע שגוי, ומידע שגוי גרוע יותר מאין מידע.

עסק חי משתנה כל כמה שבועות. אם כל עדכון קטן דורש פנייה, המתנה ותשלום נפרד, בפועל לא תעדכן. תדחה, ובתוך ארבעה חודשים המערכת תספר ללקוחות שלך דברים שכבר לא נכונים. לכן שווה לברר בדיוק איך נראה עדכון: מי מבצע אותו, תוך כמה זמן, האם הוא כלול, והאם אתה יכול לשנות בעצמך דברים פשוטים כמו מחיר או תאריך פתיחה. ספק שמתייחס לעדכונים כאל תחזוקה שוטפת בנה מודל שמתאים לעסק חי. ספק שמתייחס לכל שינוי כאל פרויקט קטן מכר לך תמונת מצב של יום שלישי מסוים.

איך אדע בעוד רבעון שזה עובד?

מערכת מענה היא אחת ההשקעות הקלות ביותר להסתיר. היא עובדת ברקע, בשעות שאתה לא נמצא, מול אנשים שלא תפגוש. אם אף אחד לא מודד אותה, כולם ימשיכו להניח שהיא בסדר, עד היום שבו מישהו יבדוק ויגלה שלא.

לכן שווה לסכם מראש מה אתה מקבל, בכתב, בקצב קבוע. לא רשימת פיצ'רים שהותקנו, אלא מספרים שמעניינים אותך: כמה פניות נכנסו, כמה מהן קיבלו מענה תוך דקות, כמה נענו מחוץ לשעות הפעילות, כמה הבשילו לשיחה או לפגישה, ואיפה אנשים נטשו באמצע. אצל מכללה שאני עובד איתה, כ-55% מהלידים נכנסים מחוץ לשעות הפעילות, וזה מספר שאיש לא ידע לפני שהתחילו לספור.

יש כאן גם בדיקה נסתרת של הספק. מי שמסכים מראש למסור לך מספרים חודשיים מסכים שיהיה אפשר לשפוט אותו לפיהם, ומי שמסתפק ב"תרגיש חופשי לפנות בכל שאלה" בחר במודל שבו אין רגע שבו הוא נמדד. גרטנר, בהסבר על גניזת פרויקטים, מונה ערך עסקי לא ברור כאחת הסיבות המרכזיות. ערך לא נהיה ברור מעצמו. מישהו צריך לספור.

למי שייך מה, ביום שתרצה להיפרד?

לא נעים לשאול את זה בפגישת מכירה, ובדיוק בגלל זה כמעט אף אחד לא שואל. חשוב לשאול בכל זאת. למי שייכות השיחות שהצטברו, ואיך אתה מוציא אותן. לאיזה מספר וואטסאפ עסקי המערכת מחוברת, ועל שם מי הוא רשום. אם תחליט להחליף ספק בעוד שנה, מה בדיוק עובר איתך.

הבדיקה הזאת שווה גם כשאתה מתכוון להישאר. ספק שיש לו תשובה מסודרת לשאלה הזאת הוא בדרך כלל ספק שגם שאר הדברים אצלו מסודרים. ספק שנעשה לא נוח כשמעלים אותה אמר לך משהו על ההתקשרות שלא כתוב בשום מקום בהצעה.

מה לעשות עם זה מחר

קח את ההצעה האחרונה שקיבלת, פתח אותה, וסמן בצבע כל משפט שמתאר משהו שקורה אחרי העלייה לאוויר. ניטור, טעויות, עדכונים, דיווח, בעלות. אצל רוב ההצעות שאני רואה בשוק תישאר עם עמוד כמעט לבן, ולפעמים עם שורה אחת שכתוב בה "כולל חודש תמיכה". זה לא אומר שהספק לא רציני. זה אומר שאתם עומדים לחתום על שני הסכמים שונים בלי שאף אחד מכם שם לב: אחד על ההקמה, ואחד מדומיין על מה שקורה אחריה. את השני עדיף לכתוב מראש, לפני שהמערכת כבר מדברת עם הלקוחות שלך.

זה בדיוק סוג הפער שאנחנו עוברים עליו בשיחת אבחון, לפני שמישהו חותם על משהו.