פרודקטיבי 52: איך בונים אייג׳נטים אפקטיביים באמת? (שחר עזריאל, Baz)
30m 40s
הפרק השבוע נפתח בסיפור על כישלון מפואר: שחר עזריאל, VP Product ב-Baz, הגיע ל-POC עם מוצר שדייק פי שניים מהבנצ'מרק של GitHub, ובכל זאת, הלקוח בחר לנתק את המערכת אחרי חודש. שחר מסביר דרך הסיפור הזה את התובנה הכי חשובה למי שבונה ב-AI היום: להיות "צודק" טכנית זה פשוט לא מספיק. אם ה-Agent לא מבין את ההקשר הארגוני ולא מדבר בשפה של הצוות, המשתמשים יתעלמו ממנו. בשיחה עם רן ארז, שחר מפרק את המעבר שעשו ב-Bazz מ-40% ל-70% באחוזי קבלת ההצעות. הוא מסביר איך הם רתמו את ה-"Tribal Knowledge" (התורה שבעל פה) של הארגון לתוך הזיכרון של הבוט, ולמה דווקא המעבר למודל שבו המשתמש בוחר מה להפעיל (Opt-in) יצר את תחושת הבעלות והמחויבות של המפתחים למוצר. See omnystudio.com/listener for privacy information.
Transcription
4224 Words, 22543 Characters
פרודק טיבי, פרודקסטה מוצר של סטארטה פרור סטארטה. שלום לכולם, אני רנרז ואתם מגתן לפרודקס שבוע אנחנו מדברים מנהלי ומנהלות מוצר מחברות שונות, על ביות מוצריות שהם נתקלו בין, איך הם נקשו לפתורתנו מה שירום שאנדו בדרך. והם יש לנו בעיה מעניין במיוחד. איך אנחנו בונים AI agents שהם אפקטיבים באמת? ומי שאולך הספרון לא להתגר הזה הוא שחר אזריאל ויפרודק בבז. אי שחר? אי רן, מה קורה? מעולה כפשטה פה? תודה, כפשטה מהרחים אותי. אז הוא לא יצא פרון הוא כזה קצת הלכה וקצת על בז? מגלב. אז לי קוראים שחר אזריאל, אני בין 30 ושבע. אוהם אני מביא פרודקט בבז. לפני זה הייתי, לפי פרודק בחורה שנקיית אבסטרמפסקיורתי ולפני זה הייתי 3-4 שנים ב-18 שנים. קצת ספר על בז, ועל הבאה שאנחנו עשים נפטור כדי להגשת בעצם לנושא שיח שלנו. אנחנו מנסים לבנות פלטפורמה, פלטפורמה TI-i לעשות קוד רביו. מתוך הבנה שאת בעיה שתוקעת ארגוני הארנדי. ומתוך הבנה שבעולם AI שאנחנו מגנרטים. פי חמש קוד במוצר הנמפתח. הדבר הזה תוקיע הארגוני פיתוח. המטר שלנו בעצם זה לייצר אריאנט שעובר על הקוד בצורה מאוד רובסטית. בודק דברים שקשום לנכונות של הקוד, לסקיורתי, לקונוון זאת של הארגון. ובצמביא את הקוד, רגע לפני שורד לפרודק שלנו, להיות ברמה החיגבורה שיש. שבנדם בעצם יכול לומר של השורות או בקליק, זה האחזון. אנחנו כאמים שענה וחצי. ולעת לה את מתקדמים ובונים דומוצה. מדי, מזמן, מה בעמוצרית שאנחנו יכולים לדבר על היום? אז בעצם בעיה שאותי עסיקה כזה בשנה האחרונה. ואנחנו כזה מתקטבים עליה 3 חודשים ואני גם רואה ארבע מאוד מנהלם מוצר. קוטבים עליה בעולם גם בישראל. כשכולנו בונים ארגינטים או שאנחנו בונים AI features. בעצם המטרה שלנו זה לייצר אותם להיות כמה שאתה רפקטיבים. וכשאני מדבר עלפקטיבים, אני מסתכל על שני מדדים. מדעד אחד זה האימה הצעות שלי מתקבלות. ואימה הצעות שלי הם משמעותיות. הם ימפקט פול כלומרים, יוזר באמת מחליט לקבל את מה שאני נותן לו. זה באמת מוביל לשינוי משמעותי בעבודה שלו. ואנחנו בעצם התמודדנו עם בי הגדולה שאני רואה שמנהלם מוצר הנוספים מתמדים איתה. לאח לגרום לארגינטים הללו להביא למשתמש לקבל כמה שיותר הצעות כלל. וההתגר הנוסף הוא אכ לגרום למשתמשים לא להתלם מהצעות הללו. שזה בעצם תמיד המדורון החלקלק הזה שבסוף מביטה את העיר גון להתנתק נמחה. בדיוק אנשים, בוא נצלו רגע לסיפור שלכם. תן לי רגע את הקונטקסטרק על הסיפור איפה אנחנו מתחילים. אז אני ככה את זה קצת אחורה לקזו שנה אחורה. אנחנו בעידן שבו הכלי היה מרכזי שקולה משתמשים בואו נקרא גיטה פקופאילות. מטורף לחשוב שבשנה הקולה מברו ממנו לידיים אחרים וממירות הזת של השוק. ובעצם אנחנו מבינים שאנחנו יכולים משתמש במודלים הנוכחיים שיש כדי לעשות קודריפי ולמשתמשים. אנחנו באותו זמן מסתכלים על החוז עדיוק שיש בגיטה פקופאילות ורואים שהוא מגיע על החוז עדיוק שיש. מגיע על החוז עדיוק של ישראל מחוז. מה זה החוז עדיוק? זה אומר שהיא משה צעה שלו. אחת מחמש הצעות מתקבלות על ידי המפתח. וואו, זאת אומרת, ארבע מחמש הצעות, גנק נכון. ובזמן הזה הגע, ואנחנו בסנט פנציסקו. בכלל הספר קזי של גיטה וגיטבי אוניברס ומנקל גיטה בומדה לבמה ומתגעי בזה. אומר כאילו ישרים החוז איזו סגמטורף זה כאילו התקדמות. הגענו להידע נאייי. ואנחנו באותו זמן נובדים לממודלים פנימית אצלנו. אנחנו גם משתמשים במוצר. יש איזה חווה המוצרית מדהימה בלי קשה. אולי לפרק אחרת לגמרי על מקומות עורדה שצח לבו בהם כמיני המוצר. ואנחנו מגיעים לעזור האחבאים אחוז. וואו, זאת פי שתיים בעצם בקוד ריביזו שימו שרים. ככה, ככה, אמר לצאת שימו השעות. אמר, אנחנו מסתכלים על הקלי המוביל בשוק באותו זמן שחו ב-20 פנציסקו. יש לנו ארג'ן שבודק לנו תקוד פנימית. לנו ולדיזיינט פרטנרס מסוימים קטנים שהם כזה חברותים. ואנחנו רואים שהשפיד בקו הוא חיובי מאוד. ושעצאות שאנחנו נותנים על שלושי אזורים מסוימים שאנחנו מגדירים אותם ככה שובים לבדיקה בקוד. שמבחינתנו עם קוד או מדבסטנדרטים הללו הוא מרדגבול. כלומר יכול לי כנס לפרודקשן, שם קשורם לקוד קורקנס, כלומר שאין בגים לוגים משמעותים שיכולים להפיל את פרודקשן, שאין שמה סוגיות שסכירתי שמשמעותיות כדי חס וחלילה להוריד להביא להכנסה של איזושהי חולשה בתוכה הקוד או לחסוף נתונים של המשתמשים שלנו. ושלישי שהוא חשוב מאוד לרגולה פתוח כדולים קשור לקונוונציות, בעצם לראות שהקוד החדש נכנס משקף את הקונוונציות של הארגון. ובעצם אנחנו רואים שהעצאות שלנו מתקבלות מובילות לשינוי קוד משמעותים אצל המפתחים שלנו, ועצם ארגונים כתהים שהחודם את השם חמישה עשרה המפתחים. ואנחנו מחליטים ללכת לרגונים נוספים גדולים יותר, קצת כזה לפתוח את זה לפיוסים בישראל ובכול. זאת אומרת, אנחנו רגע בנקודה דודר הכלום מתחילים הצלחה. אנחנו בעצם פי שתיים הבן שמרקה מוביל בטעשי, אתם ביתך כתה שמרושה רם. יאללה, בוא נפתח אנחנו כאילו הרבה יותר פשלים עם מה שחשב לגמרי. ואנחנו אומרות בתוכים בעצמנו. אנחנו מתכים את שהוא פיוסי גדול, ודי מער מקבלים סיגנלים שזה לא שם. למרות שהדיו קופי שתיים נכון, עדיו קופי שתיים לקופה אלות, אבל מה שאחר רואים זה שהצעות שלנו הם נכונות, הם מתקבלות. אבל באמת, באמת להמפתחים ולמנהלפיתוח לא כזה אכפת. אוקיי, זאת אומרת כאילו אתה אתה צודק אבל המחפת שאתה צודק נכון כאילו תודה, אבל אנחנו להתלת מתכים לראות את התגובות האדישות הללו ופחות היותר אחרי זה חודש של פיוסי כזה גדול. כזה מנתקים אותנו באגרסיביות. וואו כאילו, אבל זה פיוסי שכאילו אם לקוח משמעותי שאתם אומרים, עדיו ק שלנו הרבה הרבה אותו טוב. האצעות, הם אומרים מה שהם כאילו, כן, צדק אתה ואז ברגע אחד החודשתק. נכון. חברה של השרה אנשים, שיחסיד, יש אנשים שמונה מיליון אנחנו מכו בתוכים. אבל באותו זמן אנחנו ממש מרגישים שזה הפיוסי שכזה יעשה לנו תבוע לידעציה שהכלי מוכן כדי לפתוח אותו לקולם ולצאתים. אז קייסט הדיגדול שכזה אנחנו יכולים עליו כמנהליהם מוצר, אנחנו לא מציכים. ואחרו באותו זמן, אופססים עם על זה. כאילו אני אגיד משהו שהוא מדהים בסטרטה פיונקטנים ו66 זה אגב התפקיד שלנו כזה כאילו מנהליהם מוצר. זה כאילו להסתכל להקישלונה זה כזה בעיניים. כאילו זה מאוד קשה לקחת את הרגע הזה של הקישלון הצורה ולהגיד, אוקיי, אין לי פה נסיבות מכלות על אוקיי. זה לא מבין אוקיי, המוצר אולי לא היה בשל, אלא לקנסת כל החבר ונסות להבין מה לא היה, מה לא היה שם נכון. אוקיי, זאת אומרת, אנחנו אין פיוסים לקוח שהוא בין נקרא לו על הכוח האידיאליה ווראינו, אנחנו מנהלנו מצליחים, לקוח החלומות. אצלחנו, אז זהו, אנחנו בדרך כל כדי מה. ואתה אומר, לא רק שאני מבין מוצר שהוא פשטים את אותו מה בין שמרק. ולא רק שגם בפיוסייה זה מרמוח האחי, את הצודק. ובלסות שכה, נכונות, אתה ככה חודש מנתקים ואתה אומרת, אני מסתכל הכישלון בעיניים ומה אתה לא מדמי זה. אז אנחנו לוקחים בעצם שלו אחד היתרונות הכי גדולים שיש לנו, ישכנו מאוד וזה טיב ראשון שאני חודטת למנהלם מוצר. בזורה AI, להביא כמה שהוא תרדת המנתרנזקסות שיש לכם עם משתמשים. במקרה שלי אני עושה פוסטים של קומנטים בגיטב ומשתמש שחוסות לזהימודג'י, כן לא טיל אש או ככי יצוב, לבין דגובות שוקותב טקסטואליות. אני ממש יכול להשתמש במקדל נתחות המלמה מיוזר חשב על מה שאני אצא. ואנחנו ממש לוקחים את כל הטקסט הזה ומנתחים אותו. נסים כועזמן להבין רגע למה משתמש הזה ולמה משתמש הזה ולמה ארגנט הספציפי הזה שמעיר על סקירטי, קיבל דגובות מאוד לא תובות ביירגון. אבל זה ממש ניתוח שהוא כואלת. ממש כאילו מסתכלים על מה קרה מקרה, מקרה, מקרה, לא גרגטיבים לא. בידיים, ברמה הכי, הכי שחורה שיש וסוד. אני עושה את זה היום שעה ביום על כל הכוחות שלנו. אני ומנקל החברה ואחרו כזה שתי וערב ומוצאים את המקומות שחוף הספסים בהם ופונים לרמת המפתח ואום לו בסיכה בסלק הרבה פעמים, היה פה אולי זה מקום שפיספסנו. בואו, אנחנו חשב נוזע את הליכה שבע שיית ג'ינטסה, זה אגב אני. אני רואה את האפקט של כמה חולמדים מזה וגם מה זה נותן להמשתמשים שלנו שהם פתאום רואים תביא פרודק שלך להם עודה. בסן פרנציסקו, אי ראיתי את כתבות שחיימא איגנטי להיתה מוצלחת. זאת אומרת אותו מרגע מתוך הקישלונה, זה אני רגע נכנס עכשיו, לבר זה למשל כל תגובה ותגובה וכל תפיד בכל האיגן שבניתי, כדי לא להשיר את זה בעצם קופסה שחורה. ואז מה אתה לא מדברים? אני תגיד הדבר הראשון המרכזי שאפשר לקחת מזה, זה בעצם לחשוב מה ביזנסלוגיק של האיגן שחם. אוקיי, תרחיב. אז אנחנו קוד ריביו איגן. עכשיו בואו נחשוב שנייה מה זה הבן אדם שושה קוד ריביו בארגון. אמלם שושה קוד ריביו בארגון הוא האחיתקט, הוא הראש צוות, הוא הבן אדם, הכי תותח בחברה שמקיר תקוד ובנה אותו ומקיר מתאי הם כמו באמצע הלילה בין חמישי לשישי כדי לפתור אז שהיא בעיה ולדבג אותה. ולא יכול להיות שהאיגן שלנו לא מקיר את הארגון. אוקיי, מה זאת אומר, מקיר את הארגון? אז פה יש לנו כוכר בידתה שאנחנו יכולים לברדג כדי לגרום לארגן לדבר כמו ארגון. אני טען דוגמה, הוא מחובר להתיקטים. אז הוא מבין את הקונטקס של איזה מסימות הנכנוסים ולמה החושים אותם. הוא מחובר לנולדג בישראל החברה, אם אם מנועלת במנדא או מנועת בקונפלונץ או בקום מקום אחר, אז הוא מבין מתאי דברים כאילו מה הסור לעשות ומה מותר לעשות. והוא מבין דרך הדגובות פגיטה בשנשים נותנים אחד לשני, מה חשוב לאנשים? מה לי איזה פלטעסימון ואותו רגע? אמרתי, אנחנו הלכנו וניסנו לפתור בהיות שחשבנו שמאו חשובות לבז. חשבנו אם ארגון הפתוח של בז, מה חשוב לבז לפתור? אבל לאותו פיוסי הדברים האלה קנייה לא חשובים או חשובים, אבל הם בפריפריה, אבל יש לו דברים אחרים קונוונציות. פעם שהוא שבאה בסטקה טכנולוגי שלו שזה לא דברים שוברים בריביו. ואני חייב לגום לארגן שלי לדבר בספה הזאתי. אז אני אומר זה לא רק לקוד, אני תנדוגמה עם התחשב בו נארגן שעוזר לעשות שירות לקוחות. אז התחשב מוטקן בז שהיא חברה והחברה הזאת עובדת בז שהוא אופן. ויש לה מטירי על זה מסוים, ויש לה אופן שבו עם הדברת עם המשתמשים. אז פתאום יהיה מוזר שתדבר כמו חברה ישראלית לדוגמה, פתאום היא תדבר כמו ארגן את המריקאי. אוקיי, אתה אומר בעצם מה תובנה המרכזית פה. אני עד עכשיו עשיתי סימולציה של איך בארכיטקט גנרי, אבל מושלם, פרוטר את הבעיה, ומה הוא היה ממליץ בתור הארכיטקט העל הזה. אתם ארכיטק מה שמעניין, זה לא לסמלצת ההתנהגות המושלמת של איזשהו פיוריסט קוד, אלא של האותו ארכיטקט באותו ירגון. ואז הדבר אז איך אנחנו עושים, אז אתה אומר, הקונטקסט שאפרחנו לעידן, דולור הקונטקסט של מה זה קודוב אלא, מה זה קודוב אצלנו. וזה, וזה האינצא את המשתמש קודריביו. מה זה קודריביו, איפקטיבי אצלנו. אני איתן דוגמה, אני וזה אחד הדברים הכי משמעותיים שהיו לנו בתוך התהליך הזה, אנחנו באנו סופר סטריקט, אמרנו, אנחנו עושים קודריביו, הגישה שלנו שבאות שנתיים אין יותר קודריביו, כי אנחנו הולכים למצוא את כל הבאות שיש. אנחנו לא ניתן למנהלפיתוח לחבות דברים מסלמים בקודריביו. ועלה. כי הדבר אנחנו ככה זה קודריביו. כאילו ממש, אנחנו עמון פעמים את הסיכה הזאת שבאה, אנחנו וענו תקשיבו, אני לא רוצה את הסקירותי. אני אסטרטה פקטן, אני רצמאר, סבבה בהיש לי, זה משהו בקצה שעושה את זה, אל תסולי את זה בקודריביו. ואבא אנחנו מנהלים בין אותה סיכותה, ואנחנו לא מוכניםותר על זה, ואנחנו מאחנו מגלים שזה שאנחנו מאוד מאוד מוקפדים. וזה שאנחנו מתקשים על הדברים האלה, זה גם הם בדיוק להפך. עדיף שלא, לא תעיר לי על הדברים, שאני לא מתכוון לעשות ותייצר הציינטגוניזם, תעיר על פחות דברים, כדי שהריביו שחייה יותר אפקטיביים. ובעצם, אנחנו ויצרנו משהו שהוא לומד את כל הסיכות שיש בין האנשים, ומאצר בנוסף ל-Agent אם שלנו שמעות עובדה בוקס, קופוצה של ארגנטים שמכסטומייסט ומותמים להרגון. אוקיי, זאת אומרת שאני עכשיו בתור לקוח, מה אתה הליך שאני עושה מה קורה לי? אתה עושה אונבורדינג, אתה רואה את האלה שהם גנריים, אתה אומרו, אוקיי, מגניב סיכיורתי זה, ואז אתה עובר כזה נקסת הבא ואתם כבל חוויית UX כבודד, שהאמרלך ארגנטים לפי קטגורת מסוימות, אם הבאיה שהם נוגאים בה, ומאבר לזה שיהיה כי ישם את הבאיה שהם מסבירה, נגיד, תן דוגמה, אתה משלמש בפייטרון מגרסה מסוימת, כזה זה הדבר המשוים שאתה צריך לקפיד עליו, אבל לא רק זה, אלא מראה לך את הריזנינג, שלא מייכלתנו להם לצליח על זה. אוקיי, זאת אומרת שאני עכשיו רגע, אני מצטרף, אז מלבדה ארגנטים שהם הלפו בופן גנרי, אני מזה עוד ארגנטים שהם רלווונטים שהלווונטים להספה ארגונית שלך ולא רק זה, אני גם מזביר לך, למה הם רלוונטים להיכון? וזאת אומרת שזה נקודת מפתח. נכון. תהילו בסוף, לבוא ולהגיד להמשתמש, בעיחוד הקל שהחובדים אתו שזה כזה מפתחים, וממאוד, מאוד דעתנים, ומצליחים שהסבירו להם למה, ואני חושב שזה נכון. אנחנו באים ואומרים, אוקיי, חלטנו להמיד צריכה למשל על לעשות רביו, סקיורתי, רביור כזה וכזה. למה כי הנה החיתק, תומנה לפיתוח, עיר על זה עשר פעמים בשנה האחרונה. כי הנה זה מחובר למשמך שלכם, שמראה שלפני חצי שנה הייתה איזושהי בעיה שגרמה להותפיק שרצאתם כי הייתה את הבעיה הזאתי. ואנחנו מגלים שמשתמשים שם רואים את זה, אני רואה את זה בדם רואים, הם הרגע זה שהם עושים טעון בורדינג ומרואים את זה, זה וואו. מה זה וואו את הטרחיב? כי וואו זה, אוקיי, זה העולם אפילו רחבתר, יש מלא ידע שובר בסיכות בין אנשים, בגיטה בסלק שהוא לא מתורד בשום מקום. ואנחנו קוראים לזה בנגלית trybel knowledge, משהו בעברית יכולה לזה תושבה, ובסוף יש שם את האמת המזוקקת של הערגון. וכשאתה משתמש ב AI כדי להתופד זה, זה כזה קסם, כי אתפיתום אומר, בוא נעני אפילו, אני כל הזמן עושה את הדבר הזה, ולא הבנתי שאני מעיר על זה. אה, הבנתי. אני רוצה לקחת את זה רגע להנולוגיה מלצת מהוקוד ריבי ולקחת את זה להנולוגיה של רופא. בסדר? אז אתכנו מה עולם האנגנטים ואנחנו תרופא המושלם, היית הנכנס לה, והוא אמרכה, כך תקדור הזה. וואו בפשתי הם אפילו יותר צודק מהדברים האלה, אנשים לא רצו ללכת לרופא זה, כי הם לא לא הבינו. אחר כך תאומר, אוקיי, אני נותל לכם, אתה נכנס לרופא, והוא מזבירך איך נכון נכיות בריא, משלבים, הנכון נכון נכיות בריא באופן כללי. ואנחנו נמצא את הספורט, אותי כך תקדור הזה, אוקיי, עדיין אומרים נכמד את הצודק רופא, וזה לא רלוונטי אליי למקרה. וחשבת אומר בעצם הרופא הזה, דיברית חלפני, יקרה את כל המסמכים, מבין רגע את כל הרקה רפורישכה. וואומר, אתה ספציפית, הנה הסיבות, שאני ממליצך לעשות עכשיו עם מונגופני, כי אתה הולך ראשון מוחר, וכי אתה הוכל כך, וכי אתה הוכל כך. והוא נותי לחמד שהוא מבוסס הלכה, ועכשיו אתה הרבה יותר לייק לי לקחת אתם לצעז אותי. -אז אני חבר לזה. בידיוק, אני נסוי לרופא, זה מה ששניני עלנו את הסיכז אותי, זה דתמיין שבכל ביקור שהוא מקבל, הוא מריץ בדיקה, שהיא מותמת הלכה ולא בדיקה גנר את שעושה. אז אם אני נכנס אליו, אז הוא מכיר את ההיסטור הארפואית שליבה של איזה שהיא בדיקה ספציפית שהוא הולך לעשות והוא גם אסביר לי למה הוא שעותה, כי הוא קרה וכו וכו. ושאח נכנס לבמיש הוא אחר ועושה לו בדיקה אחת ולא תפדיקות הגנר את המצבנו, שמרות רגע, למה אני צריך למדוד לי לחצדה, אני בין שלושי. ואולי אז באמת, ברגע הזה שלא און בורדינג בקודפיות אומר לו, אין להם לצע הרפואית, בית בססה להתנגות השלחה, כרנו את כל הכוד בי שלך, כרנו את כל הערות, זה מה שנראה לנו שחשוב לך. ואת אומרת, הרגע הזה, מה הוא מייצר עבור המשתמשים מבחמתך? אז אני לא ידעתי את זה, עד שראיתי את זה, אבל זה התחיל יצר או נרשיפ. אז אני מסתכל בסוף על זה שכשאנחנו הולכים וכמנהליה מוצר, מוכרים את המוצר שלנו, חיים אותו איך או זה מה שמצופה מאיתנו לעשות. ויש מישהו שייכליט להתמיע את המוצר שלנו בערגון, ואני רוצה שהוא ירגיש בהלות עליו. אז כשיש, ארגינטים שאני אמרתי לו, כדי על חלפיל אותם, וכדי על חלפיל אותם, כי הם יבוססים על הערות שלך, והוא הלך והוא בחלפיל אותם בכליק, הם לא מופלימו תומטית, פתאום כשהיו זה אומר לקומנט ליגנט הזה סבבה בעבל או לא מעניין אותי או עושה לו טאמץ דיון. הבן אדם שיפיל את היגנט זה כואב לו, כמו שלי זה כעב, בפי עושים כשהסתכלתי על העד גוברות מאחו הכליים. אז גם במחיר הזה של לא להדליק את הכל בבטחת אלה לתת לא לבחור, זה בעצם העביר את האחריות אליו לצלחה של המוצר בגמר. וגם כאילו אומר הבעיות שבחרתי להפיל להם בעיות שאני בחרתי, שמובוססות על הדברים שמפרים לי ואני מרגיש. התהליך שעשית הייתי, יהיו איקסית, מראה לי להם מהם חשובות ואני יודע ללכת ולהזביר למפתחים. אגב, אחד הבעיות הכי גדולות שיש לבוטים של AI וזה ציטות שאני אומר אותו הרבה וזה בעיה שאנחנו מתמודים איתה. זה שמוד קל לתחות הצעה של בוט. אבל אם הצעה זאת הייתה באמי בן אדם יכול להיות שעותו בן אדם אחרי שהם קבל אותה. כי תודה איזה שקוף. לא אכפת לי עליו רחום. לא אכפת לי עליו אותו הוא לא חלק מפרפורמנס של ברבות כמה חודשים. לגמרי ואני חושב שזה קצת האדגר הזה שאנחנו מנסים לפצח אותו. איך לגרום למשתמשים שמפידלים את האיג'ינטים, שיהיה להם איך פת שהדגובות עליו שלא מתקבלות, להם הם לא מתקבלות. וגילינו שזה שנתנו לא את היכולת, למשתמש או למשתמשת, להחליט מה להדליק, פשוט גרם לזה שהם אגבי דליקו ארבע אותה מה שאנחנו ידלקנו במקור. שאתה מעובדה שאנתה אותי להם את האונר שהיא גרם להם להיות יותר כאילו אוקיי. אז אני דיברנו באמת המאות של הפרק אז הרגע אנחנו הופכים ארג'ינטים לפקטיבים באמת אז אני חושב שאני רגע מסכם עד עכשיו את מה שדיברנו אמרנו קודם כל. אך תחום שיהיה נכון שהוא יצודק אוקיי זה בזיס אתם במקרה שלכם קור פי לא תלום אתכם אתם ראיתם שבאה בין שמרק אתם פשתי מטור טובה יופי יש לנו שקמר כאן נכון אבל זה לא מספיק. עליו עליו על הבא זה קונטקסטואל להסתם את זה צריך להיות Helpful לך במקרה שלך ופה תאומר עוסףנו רגע את העדויות על מה באמת חשוב להרגון לא בנו מבחות זה לבנו רגע מאוד מאוד פרסונה על הקונטקסט שלך. והדבר השלישי שאני חושב שהוא נקודיה שאנחנו רוב בפספסים זה האונרשים לא רק שאיבטי מה ששהוא פרסונל עליו בוחה אתה צריך לבוא ולהחליט שהתמשת המשתמש בוק את די להיות יותר אונר של הדבר הזה אז כאילו אז אנחנו רואים שוב נכון מבוסס קונטקסט פרסונלי ושיש האונרשים על המשתמש כי אמרת היותר כאלה דברים כאלה. ואז אנחנו מספים על זה בעצם את שני הדברים שמאה בין היה רגע למה מסיימת של הדבר הזה שמגיע אותנו למקום שאנחנו נמצאים בעיום. אז בעצם כל מה שתיארתה הדחשב הוא מדויק וזה בעצם נקודת התחלה שבה יוזר עוסרון בורדינג לבז. אבל מה הרגע זה עכשיו הארג'נט מתחיל את את הערות. ופה יש קונספט שהוא שאני ממליצ לכל מנהל מוצר להמיק בוקי יש לבספרות והוא נקרא הממורי. מה זה ממורי? למי שמקם שמשתמש באופן אי או באנטרופיק, אמר לו תזכור לדוגמה אני רוצה לך טוב באנגלית בלי הקה מקווהרוך. כאילו אני לא רוצה שתעשה לי את זה בטקסטים שלי. ואז מאותו רגע אומר לך שבאה אני לא נותן לך טקסטים במקווהרוך. עכשיו בקוד ריביו אנחנו יכולים מאוד כל כך הרבה מהדיאלוגים שיש בין אנשים. ובעצם מה שיצלנו זה של בז יש ממורי. ובעז בעצם הולך והוא סממורי לכל הארגון על פסיס אפיית בקים של האנשים. וזה איזושהי נקודה שהיא איביותנו מארבעים אחוז לכלו לזור לגרד את השבעים אחוז. מה ארבעים אחוז בנטרופק, לשלוקים את שבעים אחוז. כמעב הפועל זה היה, כמעש קרה זה שבנקודת הכלו יוזרים מקבלים דגווהות. ומאורצים על דברים עושה ממשי יחזרו ומורים אוקי זה מצליעה. אני רוצה רוצה עוד כאלה ויש דברים שאומרים על תעיר לי על זה יותר. כלומר, אני טנטה דוגמה הבאה, אני עושה דברים שכשום לסקיורתי, והאיטל ייזושהי הנכת יסוד בתור ארג'ן שאני רוצה להירחל על משהו מסוים. את אומר לי, זה נכון, אבל אני האופן שבו החברה עובדת זה לא ככה. זה ככה. כאילו אני עידה לפעם הבאה להיר על זה בקונטקסניסייה. ואז אתה לא פספס בפעם עם הבאות. וגם להיו זה לדמיין את המצב שאתה צריך להיר להיג'ן עוד פעם ועוד פעם ועוד פעם, זה מהצבנ. וכן. אז ארג'ה הזה, זה הפריצר הנק שכנסנו בתוך הארג'ן, שנותנו לכל אחד מהסב הארג'ן צהלו שטיארטי בצמם אורי יהודי שלו, ונותן גם פה, שזה כזה אופטין אופטארט, נותן להביא פי הארנדי או להרחיטקט, ארשאות למי יכול לנהל אותה מהם אורי? סתברת שגם זה איזשהו השפע מאוד משמעותית, גם על האונר שיפה, גם על האונר. אז באמת דיברנו רגע על המאבר הזה ועל ההתקדמות של איך הוא בונים ארג'ן טפקטיבי שהזרחם להגיע מ-40 אחוז לשבעים אחוז שזה מטורף. ספרה לקצת על תרי דופי, מול דברים שכזה עדיין לא עובדים, דברים שראיתם. אז אני חושב שאני מסתכל על הבעיה שנוצר עלנו, בעקבות זה שיצרנו הרבה מאוד איג'נטים למשלמשים. זה שהם על חוב ההתלבו מזה שיש מלא איג'נטים ופילו מלא. ובצע מה שכרה, זה אנחנו קווים אחרי הגרפים ועגב הגרפים האלה מונגשים גם למשלמשים, כי אנחנו רוצים, ככה לקמי האונר שיפיזה כזה, לתת להם, את כל הנתונים שיש לנו על 1 גוברות מתקבלות, מה הדיוק של האיג'נטים, שממש יכולים לראות את זה בדשבור נימולם. גרם לזה שבעצם עלינו מ-40 להתלת לשבעים אחוז. ואז הם מתלהבים ומאמא, המגנים אני יכול לפתור עוד מלא ביות ומאודדים אנשים להצרו דיג'נטים ושנו אופן סורס של פרומטים כאלה, אז הם הולכים ומאתיקים שם אוד פרומטים לוקום אינטכנוגת שם רוצים לבדוק. ואז מה שקורה זה שזה מתחיל לרדת, היה יושד כאילו האפקטיביות. העובדה שאתה רואה שיותר ויותר קומנטים לא מתקבלים, קיבלת זה מה קורה, אתה במקום עשרה אנשים, עשרה ארג'נטים שבו תכים חתקוד, עלית ה-5 אז עלית ה-3. ופיתום אנחנו דברים על ירגונה פיתוח עם 300 מפתחים. המפתח שיושב במזרח אירופה לא יודע שהרחייטקט בישראל הלך ושפי לא דתקוד בהימל, ופיתום ממגיע על הריביו הבאה שלו והוא מקבל שאתם עשרה ארות מבאה. אז הוא מתחיל איתה למ? ואז היינו צריכים לעשות את זה שהוא תיקון, אני גם מגיד דוד משהו שהוא מאחרו הכליים של זה שלא מדברים מהספיק בתעשיה, שזה גם מה עלויות של הדבר הזה, כי הוא כולם מדברים על כזה בועת AI ופוגם, יש לזה, יש לזה מחייג הדול שאתה הולך ומפעיל מלא ארג'נטים על כל קוד ריביו כזה, ומפעילים כל מינטולים זה, יש לזה מחייג גבוה וגם אותו את הכזה מנסה, לצמצם כמה שאפשר כדי לגרום לזה שהמודל הכלגלי שחי יפקטיב. אני חושב שבדיוק ההב חנז את שרגע עכשיו את הטעים להפיל מלם על הדברים, זה כמו עכשיו נגע, או שלושה ציבתי, כי הוא היה למוצר, הם ימצאו בהגים. זה לא בהכמדנת חלפת אותה. בדיוק ויהיה כאילו לא באמת, זה לא באמת בקור, כאילו את הכור כבר תפסטו, ואז זה כזה להתפחת להיג'קייסס שלא מספיקה הם עלינים. עד שמעת, אם אבר אתם תליך די די מתורף מוטו, כן, הסטנטפונסיסקו, אבל מלנות היא ככה, אז זה תובנות או למדות מלנות היא שחלה מנהלם מוצר שעכשיו בונים ארג'נטים ומה אתה אולי איתו סקסט אחרת? אז אני בדיוק, השבועה התחלטי לחפוף מנהד מוצר חדשה, וזה כזה עידן של חשבון איפה. כאילו אוקיי, זה משכחה בשנה האחרונה. הראשון שאני חושב עליו, זה אופזר ובליטי from day one. וזה קצת קשור להסיכה שלנו על הדת הזה. חושב, שעובד אתם אם כן מנהלם מוצר, פשאכו בונים פיצר, אנחנו אומרים, נווית הדת המפיצר. אבל זה מופיעה בקיועה אין פלוס אחד. קיועה, אתה לא מגיע אליו. והיה תרגע הזה שאיבנו את זה, ופיתום, זה מהעולם שאני בא ממנו, מהעולם המודיני, זה פיתום, איבטה, זה מקו, שאתה שאתה חוני מלב. צריך להגיד משהו, באזור שאנחנו נמצאים ב-בדומיין של AI, אנשים מדברים עם agent, חופשי. ומיולם שבו פעם, היינו יושבים כמנהלים מוצר וכזה מנתחים הקלטות מסך ואומרי געלם, למה הוא הלך ולחץ, עכשיו, על הדבר הזה. למה הוא לא איבין, שכה אונדבורדינג, אני אסלו ריביו, פה, הוא כותב, הוא כותב הוא מרגיש, שבתו וכזה, אם ה-agent אפשר אגיד הכל. ואני חושב שערבם מאוד מנהלם מוצר, לא קושרים את הפיץר הזה להיות ב-MVP. במקה הזאת, כאילו, אתה הולך להוציא את הפיץר, אתה רוצה להבין איך הוא מתקבל, יש לך כלוקום אינמטריקות שאתה מאצר, תביא את הדת המעטיקשור את עם agent. תביא את הדת המעטשת הזה. זה משהו שומעMVP, כי הוא קריט יחר כך לך. זה חלק מהמלבדה שהוא באמת שיש לנו, זה היא פותזם מרקל. כל מה שאמרת על הפקטיביות של AI, זה זה. נכון. עכשיו זה אחד, שתיים, אני חושב ש. ברמה אני עולית שלי למו להרגון פיתוח, לא הייתי אגרסיבי מספיק, על דברים שידתי שאחר שאלי התחושת ביתן אליהם, שמשנה עם מוצר ושמיוכרים שנות אותנו בשוק, ולא אדתי להשית הכל ולהגיד אנחנו רואה קוסים את זה. עכשיו, שעשרה אנשים, אני בטוח שבאירגונים גדולים יותר, ששתירות ניעול והחלטות דברים כאלה, אבל אנחנו בסיבים על מתחרים שלנו, ואני הייתי רואה לפעמים דברים שמתחרים עושים, וכאילו אחרי כמה מי הולדתי להגיד, כי זה עובד, ואחרו צריכם לדעת לעשות את זה, ותודה, כי זה. אוקיי, בתי, וכתפי הזה בסלק, ואחרי שבועה זה בפריפלנינג, ואז אחרי שבועה אם יראו לי MVP, וזה איך שהוא הגיע ללכוח באחר חודשיים. ואני הרבה פעמים אומר להצמיק הזה, זה התפקיד שלי. התפקיד שלי זה להיות המצפון של החברה, ולגרום לצבת פיטוח ולגרום למרקטינג להבין, כאילו מה אני קודאה הכי קריטית שצריך לעשות עכשיו ולהביא את החברה להתכנס עליו. ועכשיו כזה, אני בדיוק יש לי את זה, פיץר שאני אופססיבי עליו, ואנחנו כזה כוח חברה עליו. מדברים, התאובןות שאני רגע לא כך מפריקה, אז זה קודם כל בבנייה של Agentim, זה שאחרוצים קודם כל, שיהיה נכון. אבל נכון זה לא מספיק, אנחנו רוצים להביא אותו, אם אנחנו נותנים אותו לירגונים, שהוא יהיה פרסונלי בקונטקסטמטים, ולהראות את ההוכחות מתוך הסיפור הפרסונלי, בדיוק מה שדיברנו על הדיקות המיוחדות של הרופה, הדבר הנוסף זה האונרשיב, איך אנחנו מייצרים האונרשיב לטא ל-Agent, בין אם זה דרך אוהי אופטינים ולא אופטאוות, בין אם זה יכולת להשתפר לו הרחזמן, אבל אני חושב שאני קודם ברכזית פה איך אנחנו מייצרים עם המשתמשים, פתבקלו פשאם רואים את השיפור של ה-Agent, ואז יש להם אינטרס לא רחזמן, ושהוא באמת משתפר לו הרחזמן, דבר שאני שאני לוקח את זה באמת שק, שאנחנו בונים עכשיו מוצרים אינסופים, מוצרי AI, ארצרים לחשוב לא רק בעדוב שן ואינפקט שזה כולנו מתורגלים אלא גם בקוולתי, כמה מהממלצות האלה באמת מתקבלות ממש AI, כמה אנחנו באמת המשתמשים שאני לא לוקחים את זה, ולא רק עדוב שן כמה היא משתמשו בפיצר, או אינפקט כמה זה אזר להם לבנות קוד יותר בתוח, ואנושב שאני קודש על האופזר ובזבילתי גם השפטיטי, אבל להבין שבתור מנהל המוצר חכנס, נצריך לי כנס לעומק, ולהבין את הBuildingBlock שמרכיבים את מה שעתוצר שעמוצר של המונותן. אז אם זה אני סעם, ורגע לפני שייקח האחרנסם, אני אגיד שהם אתם רוצים לדת בכל פעם שיוצא פרק חדש בתוכנית שלנו, אתם מוזמנים לקוב אחרנו בכל אחת מהפליקציות. אם האבטם את הפרק דרגו בחמישה כוכבים, ושוב, אמרנו תודה שרנו. תודה רבה שזנתם. בואו, בואו, בואו, בואו, בואו, בואו.
Podcast Summary
Key Points:
Summary:
Chat with AI
Loading...
Pro features
Go deeper with this episode
Unlock creator-grade tools that turn any transcript into show notes and subtitle files.