מהו יומן שרת (Server Log) ומה הוא חושף שכלי אנליטיקס לא מראים?
יומן שרת (Server Log) הוא קובץ טקסט שנוצר אוטומטית על ידי שרת האתר ומתעד כל בקשה שמגיעה אליו: מי ביקש אותה (כתובת IP וסוכן משתמש), איזה קובץ או כתובת נתבקשו, מתי, ומה הייתה תגובת השרת (קוד סטטוס כמו 200, 301 או 404). בניגוד לכלי אנליטיקס מבוססי JavaScript, יומן השרת מתעד כל בקשה שמגיעה לשרת עצמו,
יומן שרת (Server Log) הוא קובץ טקסט שנוצר אוטומטית על ידי שרת האתר ומתעד כל בקשה שמגיעה אליו: מי ביקש אותה (כתובת IP וסוכן משתמש), איזה קובץ או כתובת נתבקשו, מתי, ומה הייתה תגובת השרת (קוד סטטוס כמו 200, 301 או 404). בניגוד לכלי אנליטיקס מבוססי JavaScript, יומן השרת מתעד כל בקשה שמגיעה לשרת עצמו, כולל בקשות של רובוטים וסורקים, גם אם הם אינם מריצים קוד JavaScript בדף.
מה מכיל רשומת יומן שרת אחת
רשומה טיפוסית ביומן שרת, בפורמט הנפוץ Common Log Format או Combined Log Format, כוללת בדרך כלל כתובת IP של המבקש, חותמת זמן מדויקת, שיטת הבקשה (GET או POST), הנתיב שנתבקש, קוד הסטטוס שהוחזר, גודל התגובה בבייטים, וכן את שדה ה-User-Agent שמזהה את הדפדפן או הרובוט ששלח את הבקשה. בדיקת שדה ה-User-Agent וכתובת ה-IP יחד היא הדרך המהימנה ביותר לאמת שסורק המזדהה כגוגל בוטהזחלן הרשמי של גוגל, האחראי לסריקת דפי אינטרנט ואיסוף המידע הדרוש כדי לשמור אותם באינדקס ולהציג אותם בתוצאות החיפוש הוא אכן רובוט אמיתי של גוגל ולא מתחזה.
| טווח קוד סטטוס | משמעות | למה חשוב לשים לב |
|---|---|---|
| 2xx | הבקשה הצליחה | המצב הרצוי לרוב הבקשות |
| 3xx | הפניה | לוודא שאין שרשראות הפניות ארוכות מדי |
| 4xx | שגיאת לקוח, למשל 404 | עשוי להצביע על קישורים שבורים או תוכן שהוסר |
| 5xx | שגיאת שרת | דחוף לתקן, פוגע גם במשתמשים וגם בסריקה |
איך משתמשים בניתוח יומני שרת בקידום אתרים טכני
ניתוח יומני שרת (Log File Analysis) מאפשר לראות בדיוק אילו עמודים סורקי החיפוש בפועל מבקרים בהם, באיזו תדירות, ואילו עמודים הם מתעלמים מהם לחלוטין, בניגוד להנחות המבוססות רק על מבנה האתר. הממצאים משמשים לרוב לצורך אופטימיזציית זחילההפעולה של כיוון בוטים של מנועי חיפוש לדפים החשובים באתר, כדי שהזחילה תהיה יעילה והדפים הנכונים יגיעו לאינדקס מהר יותר: זיהוי עמודים חשובים שנסרקים לעיתים רחוקות מדי, איתור בזבוז תקציב זחילה על עמודים לא רלוונטיים כמו פרמטרים כפולים או עמודי סינון, וגילוי שגיאות שרת שכלי דיווח סטנדרטיים לא תמיד חושפים.
מגבלות וגישה לניתוח יומני שרת
בניגוד לכלי אנליטיקס שמותקנים בקוד הדף ונגישים לכל בעל אתר דרך פאנל ניהול, יומני שרת נשמרים ברמת השרת עצמו, ולעיתים דורשים גישה לחשבון האחסון או לפאנל ניהול השרת כדי להוריד אותם. עם זאת, זהו המקור המהימן ביותר לדעת מה סורקים באמת עשו באתר, בלי תלות בהרצת JavaScript בדפדפן ובלי הטיה שנובעת מחסימת עוגיות או תוספי פרטיות אצל המשתמש, מה שהופך אותו לכלי חשוב במיוחד באבחון בעיות טכניות שקשה לאתר בדרכים אחרות.
שאלות נפוצות על מהו יומן שרת (Server Log) ומה הוא חושף שכלי אנליטיקס לא מראים?
כלי אנליטיקס מבוססי JavaScript מתעדים רק ביקורים שבהם הדפדפן הריץ בפועל את קוד המעקב, ולכן הם מפספסים רובוטים, סורקים ומשתמשים שחוסמים סקריפטים. יומן שרת מתעד כל בקשה שמגיעה לשרת, כולל של רובוטי חיפוש, ולכן משלים תמונה שאנליטיקס לא יכול לספק.
הגישה תלויה בסוג האחסון: בחלק מהשירותים ניתן להוריד את הקבצים דרך פאנל הניהול או FTP, ובאחרים נדרשת פנייה לתמיכה הטכנית של חברת האחסון. חלק מהכלים לניתוח לוגים מתחברים ישירות למקור ומעבדים את הנתונים אוטומטית.
ניתוח יומן שרת חושף כיצד רובוטים אמיתיים של מנועי חיפוש נעים בפועל באתר, כולל בזבוז זחילה על עמודים לא חשובים, שגיאות שרת שלא תמיד מדווחות בכלים אחרים, והבדלים בין תדירות הסריקה לבין קצב הפרסום או העדכון של תוכן חדש.
