איך אני בודק לבד מה AI אומר על העסק שלי

פותחים חלון גלישה נקי, מתנתקים מהחשבון, שואלים שש עד עשר שאלות שלקוח היה שואל, וחוזרים על כל שאלה שלוש פעמים. רושמים בגיליון אם הופעתם, מי כן הופיע במקומכם, ומאילו מקורות התשובה נשלפה. זה הכל. ההרצה הראשונה לוקחת בערך שעה ונותנת לכם בסיס, לא ממצא.

הטעות שהורסת את הבדיקה עוד לפני השאלה הראשונה

רוב האנשים שבודקים לבד עושים את זה מהחשבון שבו הם עובדים כל היום, באותו דפדפן, אחרי שיחה שבה כבר הזכירו את שם העסק. המודל זוכר, מתאים את עצמו, ומחזיר תשובה שנראית מצוינת ולא אומרת דבר על מה שלקוח זר יקבל.

לפני השאלה הראשונה: חלון פרטי או דפדפן שאתם לא משתמשים בו, יציאה מהחשבון או לפחות ניקוי הזיכרון וההתאמה האישית בהגדרות, ובלי היסטוריית שיחה. שיחה חדשה לכל שאלה, לא שאלה שנייה באותה שיחה, כי כל תשובה קודמת מכתיבה את הבאה. אם אתם בודקים גם מה שרואים לקוחות בישראל, המיקום שממנו אתם גולשים משנה, ולכן לא בודקים דרך VPN לחו"ל. הפירוט המלא של תנאי ההרצה נמצא במדריך המדידה, וכאן אנחנו מניחים אותו כברירת מחדל.

אילו שאלות לשאול, וכמה?

לא שואלים "מה אתם יודעים על העסק שלי". זו שאלה שאף לקוח לא שואל, והתשובה עליה לא מעידה על כלום. שואלים את מה שאדם שמחפש פתרון היה מקליד, בעברית, בניסוח של אדם ולא של איש שיווק.

שלוש קטגוריות, ולפחות שתי שאלות בכל אחת: שאלת בחירה (מי נותן את השירות הזה באזור שלכם), שאלת ידע (איך עובד הדבר שאתם מוכרים, מה עולה, על מה להסתכל), ושאלת שם (שאלה שמזכירה את שם העסק במפורש). השלישית היא היחידה שבודקת מה המודל יודע עליכם. השתיים הראשונות בודקות משהו אחר לגמרי, והוא מה שבאמת חשוב: האם אתם עולים כשלא שואלים עליכם. איך בונים סט שאלות שמייצג את מה שקורה בשוק, ולא את מה שאתם מקווים שקורה, מוסבר בעמוד השאלות.

שש שאלות זה מינימום סביר לבדיקה עצמית. מעל ארבע עשרה כבר אין סיכוי שתחזרו על זה בחודש הבא, וסט שלא חוזר על עצמו לא שווה כלום, כי ההשוואה בין חודשים היא כל התוצר.

הרצה, מנוע אחרי מנוע

לא כל מנוע נבדק אותו דבר, ולא בכל מנוע יש מה לבדוק.

התנהגות כל מנוע ומה בדיוק נחשב שם הופעה מפורטים בעמודי הפלטפורמות, ובעיקר בעמוד של ChatGPT. לבדיקה ראשונה מספיקים שניים או שלושה מנועים, ועדיף שיהיו אלה שהקהל שלכם באמת משתמש בהם.

מה רושמים, ובאיזה מבנה?

גיליון פשוט, שורה לכל הרצה: תאריך, מנוע, נוסח השאלה מילה במילה, האם הופעתם, באיזה מקום בתשובה, אילו שמות אחרים הופיעו, ואילו כתובות מצוטטות. שדה אחרון לציטוט קצר מהתשובה עצמה, כי בעוד חודשיים לא תזכרו איך היא נוסחה.

שתי עמודות עושות את רוב העבודה. הראשונה היא רשימת המקורות, שהיא בעצם רשימת האתרים שכדאי שיכתבו עליכם, ומשם נגזרת עבודת האזכורים. השנייה היא שמות המתחרים שחוזרים שוב ושוב, שהיא הדבר היחיד שהופך תוצאה בודדת להקשר. מה עושים עם השם שחוזר בכל תשובה מוסבר בעמוד המתחרים, ולמה זה קורה דווקא להם כאן.

הבדיקה האחת שאינה מדגמית

כל מה שתיארנו הוא דגימה, כלומר הערכה. יש בדיקה אחת שהיא מדידה ממש: תנועה שמגיעה לאתר מציטוט ב-ChatGPT מסומנת בפרמטר מקור ייעודי, ואפשר לראות אותה במערכת הנתונים של האתר בלי לנחש. פותחים את דוח התנועה, מסננים לפי המקור, וסופרים. זה לא מחליף את הדגימה, כי מרבית האנשים קוראים את התשובה ולא לוחצים, אבל זו הנקודה היחידה שבה מספר מגיע מהמערכת ולא מכם. הפירוט בעמוד התנועה.

הבדיקה בת הדקה שמסבירה חצי מהתוצאות

לפני שמסיקים משהו על התוכן, בודקים שהדלת פתוחה. אם קובץ ההוראות של האתר חוסם את סורקי החיפוש של המנועים, אתם לא יכולים להופיע גם אם הדף מושלם. הסורקים שקובעים הופעה הם OAI-SearchBot, Claude-SearchBot, PerplexityBot, Googlebot ו-Bingbot, והם נפרדים מסורקי האימון. אפשר לבדוק את זה בבודק החסימות, וההסבר מה חוסם מה נמצא בעמוד הטכני. זו הבדיקה הראשונה שהייתי עושה, לפני השאלה הראשונה, כי היא הופכת תוצאה של אפס הופעות ממסתורין לעובדה.

חמש מסקנות שאסור להסיק אחרי הרצה אחת

לא הופעתם בשאלה אחת, ולכן אתם לא קיימים. תשובה אחת היא דגימה אחת, ולפעמים גם השנייה. הופעתם בשלוש שאלות, ולכן אתם חזקים. באותה מידה ייתכן שהשאלות היו צרות מדי ומכוונות אליכם מלכתחילה. המתחרה מופיע כי הוא משלם. מודעה בתוך ChatGPT מסומנת ככזו ויושבת בתחתית התשובה, כך שאזכור בגוף התשובה הוא תוצאה אורגנית גם היום. השתפרנו החודש, על סמך שתי הרצות במרווח של שבוע, בעוד שהרעש בין הרצה להרצה גדול מכל שיפור אמיתי בטווח כזה. וההפוך: ירדנו, ולכן משהו נשבר. הסיבות האפשריות לירידה, וההבדל בין ירידה אמיתית לתנודה, כאן.

הטעויות שחוזרות אצל מי שמודד לבד מרוכזות בעמוד הטעויות, ושווה לקרוא אותן לפני ההרצה השנייה ולא אחריה.

מתי בדיקה עצמית מספיקה, ומתי לא?

לעסק קטן, בשוק צר, שרוצה לדעת אם הוא בתמונה, בדיקה ידנית פעם בחודש היא כלי סביר לגמרי ולעיתים מדויקת יותר מכלי, כי אתם מכירים את הניסוח שלקוחות באמת משתמשים בו. היא מפסיקה להספיק כשיש עשרות שאלות, כמה שווקים או כמה שפות, או כשמישהו אחר צריך לקרוא את התוצאה ולא רק אתם. מהנקודה הזו זו כבר עבודה שוטפת עם סט קבוע, תיעוד וחזרה חודשית, והיא מה שנכנס לעבודת ה-GEO המנוהלת. מה הכלים האלה בפועל מודדים, ומתי הם מחזירים את עלותם, מוסבר בעמוד כלי הניטור. אם ההרצה הראשונה חזרה ריקה לגמרי, סדר הפעולות הנכון מתחיל בעמוד הזה, ולא בכתיבת עוד תוכן.

מה עדיין לא ידוע

אין דרך לדעת כמה אנשים בישראל באמת שאלו את השאלות שאתם בודקים. הדגימה מודדת מה המנוע עונה, לא כמה ביקוש עומד מאחורי השאלה, ואין נתון ציבורי שסוגר את הפער הזה.

אין גם ידיעה כמה זמן תשובה נשארת יציבה. מנוע יכול לשנות התנהגות בין הרצה להרצה בלי הודעה, ומה שנמדד היום לא מובטח כבסיס להשוואה בעוד חצי שנה.

לא ידוע כמה מהאנשים שקוראים תשובה שמזכירה אתכם פונים אחר כך ישירות, בלי לחיצה ובלי מקור מזוהה. הפער הזה קיים בכל מדידה של נראות ב-AI, וכרגע אין דרך לכמת אותו. ומה שבטוח נכון להיום: מודעה ב-ChatGPT מסומנת ככזו ויושבת מתחת לתשובה, ולכן אזכור שראיתם בתוך גוף התשובה אינו תוצאה של תשלום. המצב המעודכן נמצא בעמוד המצב בישראל.