איך Carvana החליפה שני בוטים שבנתה בעצמה ב-Claude Tag: מקרה בוחן

מי זו Carvana ולמה הסיפור הזה שונה

Carvana מוכרת מכוניות משומשות באינטרנט בארצות הברית. זו לא חברת כלי פיתוח, ולא סטארטאפ AI — זו חברת מסחר עם מערכות פרודקשן שנשברות בשלוש לפנות בוקר, בדיוק כמו של כולם.

מה שהופך את הפרסום של Anthropic לשווה קריאה הוא לא המספרים, אלא מה שקדם להם: Carvana כבר בנתה את הדבר הזה בעצמה. פעמיים. ושתי הפעמים עבדו. ובכל זאת היא החליפה אותן.

זו השאלה שכל ארגון ישראלי שבונה עכשיו בוט פנימי לסלאק צריך לשאול, ורוב מקרי הבוחן לא עונים עליה.

שתי הגרסאות שנזרקו

הגרסה הראשונה הייתה לולאת סוכן ביתית: קריאת API מחווטת לכמה כלים, שלפעמים חוזרת לסיבוב שני. לפני כשנה הגיעה השנייה, מבוססת על Claude Agent SDK עטוף באפליקציית סלאק.

שתיהן עלו לאוויר. שתיהן עשו את העבודה. וזה בדיוק מה שהופך את ההחלטה למעניינת.

אלכס דבקאר, סמנכ״ל ההנדסה והאנליטיקה בחברה, מנסח את זה בלי לייפות:

הכלים הפנימיים שלנו הדגימו מה אפשרי, אבל התחזוקה שלהם דרשה זמן ומשאבים שהיו שווים יותר בניהול העסק.

צוות קטן היה צריך לשמור על הבוטים בנוסף לעבודה האמיתית שלו. זו העלות שכמעט אף אחד לא מתמחר מראש כשהוא בונה כלי פנימי, והיא זו שמצטברת.

מה באמת הכריע, וזה לא היכולת

החלק המעניין יותר הוא בקרת הגישה. הבוטים הביתיים היו מוגבלים, בעיקר משום שחיבור שלהם לשירותים נוספים תוך שמירה על הרשאות נפרדות לכל צוות היה דורש עבודה משמעותית נוספת.

והמחיר של זה היה קונקרטי: צוות פלטפורמת הסיטונאות בחר לא לאמץ את הכלים הפנימיים בכלל. הסיבה שמצוינת בפרסום היא לא איכות התשובות, אלא חוסר ודאות — כמה זמן הם ייתמכו, ואם עוד מיגרציה מחכה מעבר לפינה.

אותו צוות בדיוק הוא זה שהלך על Claude Tag בכל הכוח. זה המבחן האמיתי של הסיפור הזה: הצוות הסקפטי ביותר בארגון היה זה שהשתכנע, ומה ששכנע אותו היה שכבת ההרשאות, לא חוכמת המודל.

החבילות, והזהויות המתוחמות

מה שדבקאר מצביע עליו כתכונה שהכריעה נקרא bundle: אריזה אחת של הוראות, כלים והרשאות, מכוילת למקרה שימוש של צוות אחד, שמושלכת לתוך ערוץ סלאק בודד.

החבילות הן אחת היכולות בעלות הערך הגבוה ביותר של Claude Tag. הן מאפשרות לנו להתאים את ההוראות, הכלים והגישה לאופן שבו כל צוות עובד.

על גבי זה יושבת שכבה שנייה: Claude Tag רץ תחת זהויות מתוחמות משלו. Carvana הגדירה חיבור אחד למחסן הנתונים בענן, ומעליו זהויות נפרדות שנותנות לכל צוות את הפרוסה שלו בלבד. בפועל זה נראה כך: כשצריך לאתר סטטוס של רכב, Claude Tag מריץ את מספר השלדה דרך מחסן הנתונים ומחזיר איפה הוא נמצא בתהליך.

דבקאר אומר את המשפט שמסכם את כל ההבדל בין לבנות לבין לקנות כאן:

קודם היינו צריכים לבנות ולתחזק את ההגנות האלה בעצמנו.

הרקע המלא על מה קלוד רואה בסלאק ומה חסום בפניו נמצא במדריך Claude Tag המלא.

מהתראה בסלאק עד פול ריקווסט

שלושת הצוותים בסיפור מקבלים את ההתראה הראשונית באותו מקום: סלאק. Claude Tag מנטר את הערוצים האלה ומתחיל לתחקר מעצמו.

אצל צוות retail science הזרימה רצה על פרומפט קבוע ועל פורמט אחיד לכתיבת ניתוח שורש. ההתראות מגיעות כשהן כבר מתוחקרות: קלוד מברר מי מחזיק בקוד שנשבר, מתייג אותו, ופורש את הניתוח בדיוק במבנה שהצוות ביקש. הוא קלט את הפורמט הזה פעם אחת, מפרומפט יחיד, ומאז דבק בו.

משם מהנדסים מבקשים ממנו לפתוח את הפול ריקווסט ישירות מתוך הניתוח, כך שתיקון באג הופך להודעה נוספת באותו שרשור.

הידע שעבר מהראש של שניים ל-repo

הפרט ששווה להעתיק יותר מכולם נמצא דווקא אצל צוות אימות הלקוחות, והוא לא מספר.

הצוות חיבר את Claude Tag לערוץ שאליו ממילא מגיעים שחרורי גרסאות ושגיאות. כל שחרור נבדק אוטומטית מול בסיס השוואה מהשעה שקדמה לו — שגיאות, אזהרות ונפח לוגים — בלי שאף אחד מבקש.

ולוגיקת ההשוואה עצמה יושבת כמיומנות בתוך ה-repo של הצוות, לצד ה-runbooks וההערות לכל התראה. המשמעות: ידע שישב קודם אצל שני מהנדסים ותיקים נמצא עכשיו בבקרת גרסאות, ומופעל אותו דבר בשלוש לפנות בוקר ובאמצע היום.

זו בדיוק הצורה שבה מיומנויות אמורות לעבוד, וזה המקום שבו מקרה הבוחן הזה שימושי יותר מכל מספר שיש בו.

באחד הסופ״שים הגיע שחרור מוזר שהלוגים הקיימים לא הצליחו להסביר. במקום להרים ידיים, Claude Tag פתח פול ריקווסט שמוסיף לוגים טובים יותר. כלומר שיפר את המערכת שהוא עצמו מנטר.

שבועיים, חמישה מקרים, וגישת קריאה בלבד

צוות פלטפורמת הסיטונאות נתן את המבחן הקשה ביותר: שבועיים בערוצי הקליטה וההתראות, עם גישת קריאה בלבד לאותם מקורות שמהנדס תורן היה ניגש אליהם — טיקטים, היסטוריית בנייה וקוד.

בחמישה מקרים Claude Tag הגיע מהדיווח הראשוני לשורש, וזיהה את הקוד הרלוונטי במקום לחזור על הסימפטום. באחד מהם הוא בדק פער דיווח לא עקבי וקבע שהמקור הוא בשירות במורד הזרם, ולא במערכת שנחשדה בהתחלה.

אבל מה שהופך את הרשימה הזאת לאמינה הוא דווקא המקרים שבהם הוא לא התעקש:

• הוא חזר בו: בתחקור כשל בנייה הוא הגיע למסקנה ראשונה, ואז ניסיון חוזר הוכיח שהיא שגויה — והוא תיקן את עצמו
• הוא נעצר: כשנאמר לו שתקלת תשתית היא כנראה הסיבה להתראה, הוא ירד מהעניין, בדק שכלום רע לא חמק, וסימן את המשך הטיפול לכשתסתיים
• הוא תפס מלכודת תכנון שמי שביקש את הפיצ’ר פספס, בזמן שצמצם בקשת פיצ’ר לסט מדויק של שינויים

הניסוח בפרסום מדויק: כל מקרה נגמר כמו שמהנדס זהיר היה מסיים אותו — טיקט שנפתח, פול ריקווסט שהוצע, או תיקון שבמכוון לא בוצע.

זו הסיבה שהעיקרון של לתת לקלוד בדיקה שהוא יכול להריץ חשוב כאן פי כמה: סוכן שיודע לחזור בו שווה יותר מסוכן שתמיד מחזיר תשובה.

המספרים, ומה שהם לא אומרים

	לפני	אחרי
התראות בערוץ retail science	הבסיס להשוואה	‎56%‎ פחות
זמן עד תשובה, פלטפורמת סיטונאות	הבסיס להשוואה	‎65%‎ מהיר יותר
בוטים פנימיים בתחזוקה	שניים	אפס

שווה לקרוא את ה-56% נכון. ההתראות לא ירדו כי מישהו הנמיך ספים או סינן רעש, אלא כי הצוות טיפל בשורשים החוזרים במקום לנקות שוב ושוב את אותה התראה. זה מספר של פחות עבודה, לא של פחות נראות.

ומה שהפרסום עצמו מודה שקשה למדוד מעניין לא פחות: אנשים פותחים עכשיו הרבה יותר תקלות מבעבר, כי הם יודעים שמישהו ירים כל אחת מהן ויקדם אותה לכיוון תיקון. זו לא שורה בטבלה, וייתכן שזו ההשפעה הגדולה ביותר.

מה שהפרסום לא אומר: כמה זה עולה, כמה מהפול ריקווסטים נדחו בביקורת, וכמה מהחמישה מקרים היו נפתרים ממילא בעשר דקות. זהו פרסום שיווקי משותף, ויש לקרוא אותו ככזה.

מה לוקח מכאן צוות ישראלי

שלושה דברים ניתנים להעתקה בלי מחסן נתונים בענן ובלי חצי תריסר צוותים:

• גישת קריאה בלבד קודם: שבועיים שבהם הסוכן רק קורא טיקטים, לוגים וקוד ומציע מסקנות. זול, בטוח, ומספר לכם אם הוא בכלל מבין את המערכת שלכם לפני שנותנים לו לגעת בה
• להוציא את לוגיקת האבחון מהראש: ההשוואה מול בסיס משעה קודמת, הרנבוקים, ההערות לכל התראה. אצל Carvana זה יושב ב-repo כמיומנות. אצלכם זה כנראה יושב אצל הוותיק ביותר בצוות, וזה בדיוק הסיכון
• למדוד ירידה בהתראות, לא מהירות תגובה: קל למדוד כמה מהר עונים. מה ששווה באמת הוא כמה התראות הפסיקו להגיע

ואם אתם באמצע בניית בוט פנימי משלכם עכשיו — השאלה שכדאי לשאול היא לא אם הוא יעבוד, אלא מי יתחזק אותו בעוד שנה, ומה יקרה כשצוות שני יבקש גישה אחרת משלכם. זו השאלה שהכריעה כאן, ולא איכות הפלט.

שורה תחתונה

מקרה הבוחן הזה מוכר בעיקר מוצר, וצריך לומר את זה בפה מלא. אבל שתי העובדות שנשארות אחרי שמנקים את השיווק אמיתיות ושתיהן לא טריוויאליות: חברה שבנתה בעצמה פעמיים החליפה את התוצר בגלל תחזוקה והרשאות, והצוות שסירב לגרסאות הפנימיות הוא זה שאימץ את החלופה.

ואם יש כאן משפט אחד ששווה לקחת, הוא לא על התראות: סוכן שנעצר, חוזר בו, ולפעמים בוחר במכוון לא לתקן — הוא זה שאפשר לתת לו לגעת בפרודקשן.

רוצים להבין מה קלוד רואה בערוצי הסלאק שלכם ומה חסום בפניו לפני שמחברים אותו? המדריך המלא ל-Claude Tag עונה על זה לפרטים.