דגימה
מדידה של תופעה גדולה דרך חזרה מבוקרת על סט קטן ומייצג.
Baseline
המדידה הראשונה, זו שכל מדידה עתידית מושווית אליה. בלי לקבוע אותה לפני שמתחילים לעבוד, אי אפשר לדעת אם משהו זז או שרק ההתרשמות השתנתה.
עודכן:
נקודת ייחוס היא המספר שנרשם לפני שהתחלתם לעבוד, וכל מדידה שתבוא אחריו תושווה אליו. זה הכל. אין בזה שום תחכום, וזה בדיוק מה שמסתיר כמה זה קריטי.
ברוב הערוצים אפשר לשחזר אותה בדיעבד. סרץ' קונסול שומר היסטוריה, מערכת פרסום שומרת היסטוריה, כלי הניתוח שומר כל ביקור. גם אם לא חשבתם על מדידה ביום הראשון, הנתון יושב שם וממתין. בנראות בתוך מנועי AI זה לא המצב. אף מנוע לא מחזיק ארכיון של מי הוזכר בתשובות שלו בחודש שעבר, ואין למי לפנות. אם לא מדדתם לפני שהתחלתם, המידע הזה לא קיים בשום מקום.
מכאן שזה גם השלב הכי מדולג בתחום וגם היקר מכולם. מדלגים עליו כי הוא לא מייצר שום תוצאה נראית לעין, והוא דוחה בשבועות את תחילת העבודה שבשבילה הגעתם. ובכל זאת הוא הצעד הראשון בעבודה על הופעה בתשובות, לפני שנוגעים באתר.
היחס הוא רק שורה אחת. נקודת ייחוס ראויה לשמה מתעדת גם את מי שהופיע במקומכם, אילו מקורות המנוע בחר לצטט, כמה תנועת הפניה הגיעה בחודש שקדם, ומה בדיוק היה באתר באותו יום.
השורה האחרונה היא זו שאנשים מגלים שחסרה להם חצי שנה מאוחר יותר. כשמספר זז, השאלה הראשונה היא מה השתנה, והתשובה דורשת לדעת מה היה קודם. עמוד שנכתב מחדש בלי שנשמר העתק שלו הפך את השינוי לבלתי ניתן להערכה.
שווה גם לצלם את התשובות עצמן ולא רק לרשום כן או לא. הניסוח שבו המנוע תיאר את הקטגוריה, ואיך הוא תיאר את מי שכן הופיע, הוא מידע שלא מיוצג בשום מספר.
בערוץ שבו אותה שאלה מחזירה תשובות שונות בזמנים שונים, מדידה יחידה נושאת בתוכה את כל התנודה של הערוץ. אם ההרצה הראשונה במקרה יצאה גבוהה, כל שיפור אמיתי שתעשו ייראה כמו נסיגה. אם היא במקרה יצאה נמוכה, תחגגו על כלום.
הפתרון פשוט ולא נעים: שתיים או שלוש הרצות לפני שנוגעים באתר, במרווח של שבוע או שבועיים, והממוצע ביניהן הוא נקודת הייחוס. זה דוחה את תחילת העבודה, וזה באמת עולה זמן. התחליף הוא לעבוד חודשים ולגלות בסוף שאין מול מה להעמיד את התוצאה.
לצד הדגימה שווה לרשום גם את המספרים שנספרים בפועל ולא נדגמים, למשל תנועת הפניה מהמנועים. אלה נתונים שאפשר להשלים אחורה מהכלי, והם מייצבים את התמונה.
ניסוח שאלה ששונה. מנוע שהוחלף. מעבר מסט בעברית לסט מעורב. החלפת הכלי שמריץ את המדידה. שינוי הגדרת הערוץ בכלי הניתוח באמצע התקופה. כל אחד מאלה מפצל את הסדרה לשתי סדרות שהודבקו זו לזו, והגרף שנראה רציף כבר לא אומר מה שחשבתם.
יש גם שוברים שלא תלויים בכם. מיתוג מחדש, שינוי שם חברה או מעבר לדומיין אחר מאפסים בפועל את מה שהמנוע מכיר. במקרה כזה עדיף להכריז על נקודת ייחוס חדשה מאשר להמשיך סדרה שכבר לא מודדת את אותו דבר.
הכלל הפשוט הוא לכתוב את ההגדרה במקום אחד, ולהתייחס לשינוי בה כמו לשינוי במוצר: מתעדים, מתארכים, ומסמנים בגרף איפה זה קרה.
שלושת המושגים מתבלבלים כל הזמן. נקודת ייחוס אומרת מאיפה יצאתם. אמת מידה אומרת מה קורה אצל אחרים. יעד אומר לאן אתם רוצים להגיע. רק הראשון מבוסס על נתון שיש לכם.
בקטגוריה הזו זה חשוב במיוחד, כי אמות מידה חיצוניות פשוט לא קיימות. אין ממוצע שוק לנראות בתשובות, אין חציון לענף, ואין מספר שאפשר לומר עליו שהוא טוב. מה שיש זה אתם מול עצמכם לאורך זמן, וזו הסיבה שהנקודה הראשונה נושאת כל כך הרבה משקל.
תרחיש מומצא: מכללה שמוכרת קורסים מקצועיים למבוגרים מחליטה להשקיע בנראות בתוך מנועי AI. היא מתחילה מיד: כותבת עמודי תוכן, מסדרת את עמודי הקורסים, מבקשת אזכורים באתרי תוכן בתחום.
ארבעה חודשים אחר כך מנהלת השיווק מריצה סט שאלות ומגלה שהמכללה מופיעה בשבע מתוך עשרים ושתיים. השאלה הראשונה בישיבה היא כמה זה היה קודם, ולאף אחד אין תשובה. אולי שבע. אולי שתיים. אולי תשע, והעבודה דווקא הזיקה.
אין דרך לברר. אין ארכיון של תשובות, אין דוח רטרואקטיבי, ואי אפשר לשאול את המנוע מה הוא ענה במאי. ארבעה חודשי עבודה קיימים, והתוצאה שלהם לא ניתנת להערכה.
מה שנעשה משם: המספר של אותו יום הוכרז כנקודת ייחוס, עם תיעוד מלא של מי עוד הופיע ואילו עמודים צוטטו. ההשוואה אחורה אבדה לתמיד. ההשוואה קדימה נבנתה ביום אחד.
כאן נקודת הייחוס החשובה אינה בכלל במנוע. היא בשאלה כמה פניות הגיעו בחודש שקדם, ומאיזה מקור. בלי המספר העסקי הזה, כל שיפור בנראות יישאר טענה שאי אפשר לחבר לשום דבר שמעניין את הבעלים.
שווה לקבע נקודת ייחוס גם לקטגוריות המוצר ולא רק לעסק בכללותו. קטגוריה אחת שנכנסת לתשובות וקטגוריה אחת שיוצאת מהן מתקזזות למספר כולל שלא זז, ואז הדוח מראה יציבות במקום שבו קרו שני דברים.
נקודת הייחוס חייבת לכלול את מצב הצנרת ביום הראשון, ולא רק תנועה. עסקה שנסגרת שמונה חודשים אחרי המגע הראשון תיזקף לתקופה הלא נכונה אם לא תיעדתם מה כבר היה בתהליך כשהתחלתם. ראו מחזור מכירה.
לפני שאתם נוגעים בעמוד אחד, הקדישו יומיים למדידה. סט שאלות שהורץ פעמיים, צילום של התשובות, מספר תנועת ההפניה של החודש שעבר, ורשימה של העמודים שאתם עומדים לשנות עם העתק של המצב הנוכחי שלהם. זה נראה כמו בזבוז ביום שעושים אותו, וזה הדבר היחיד שיאפשר לכם בעוד חצי שנה לענות על השאלה אם זה עבד.
המלכודת השכיחה היא להתחיל לעבוד קודם ולמדוד אחר כך, מתוך הנחה שתמיד אפשר יהיה לשחזר. בכל ערוץ אחר ההנחה הזו נכונה. כאן היא פשוט לא. התוצאה היא שעסקים משקיעים חודשים בעבודה אמיתית ומגיעים לישיבה עם מספר שאין לו מול מה לעמוד, ואז הדיון מתגלגל לתחושות: נשמע לי שיותר אנשים מזכירים אותנו. מלכודת קטנה יותר היא לקבע נקודת ייחוס מהרצה יחידה ולהתייחס אליה כאילו היא מדויקת, כשבפועל היא נושאת את כל הרעש של הערוץ בתוכה.
אם אתם לא מתכוונים לעשות שום פעולה בעקבות המדידה, אין סיבה לקבע נקודת ייחוס. עסק שכל התנועה שלו מגיעה מהפניות אישיות, ושלא מתכנן לשנות דבר באתר, יקבל מהתרגיל הזה מספר יפה בלי שום שימוש. הזמן הנכון לקבע נקודת ייחוס הוא ברגע שהוחלט על עבודה, ולא לפני ולא אחרי.
לא. אין ארכיון ואין דוח רטרואקטיבי. מה שאפשר לשחזר הוא רק נתונים שנספרו בפועל, כמו תנועת הפניה בכלי הניתוח.
שתיים או שלוש, במרווח של שבוע עד שבועיים. הרצה אחת נושאת את כל התנודה של הערוץ ויכולה להטעות לשני הכיוונים.
אפשר להוסיף שאלות עם תאריך הצטרפות. לשנות ניסוח של שאלה קיימת פירושו להתחיל סדרה חדשה, ולרוב לא שווה את זה.
אין. אין ממוצע שוק ואין חציון ענפי בקטגוריה הזו. המספר שלכם משמעותי רק מול המספר שלכם בפעם הבאה.
מכריזים על נקודת ייחוס חדשה ומסמנים בגרף איפה זה קרה. להמשיך את הסדרה הישנה פירושו להשוות שני דברים שאינם אותו דבר.
מדידה של תופעה גדולה דרך חזרה מבוקרת על סט קטן ומייצג.
סט שאלות או עמודים שבמכוון לא נוגעים בהם, כדי לראות מה קורה גם בלי התערבות.
ערך השוואה חיצוני שאליו מודדים ביצועים.
השוואה של תקופה לאותה תקופה בשנה שעברה, במקום לחודש הקודם.
תנודה חוזרת ומוכרת בביקוש לפי תקופה: חגים, סוף שנה, חופשות, תחילת רבעון.
הערך נבדק מול המקורות הרשמיים של הפלטפורמות. כשמשהו אינו ידוע, כתוב כאן שהוא אינו ידוע. שינויים מתועדים בארכיון העדכונים.
בלי מצגת, בלי התחייבות ובלי שיחת מכירה. עשרים דקות שבסופן תדעו אם יש כאן משהו בשבילכם.
לא בקטע של טפסים? [email protected]