דף הבית / מילון מונחים / Crawl Budget

מה זה Crawl Budget

Crawl Budget, תקציב סריקה, הוא הכמות המצטברת של עמודים שגוגל וסורקים נוספים מוכנים לסרוק באתר נתון בפרק זמן מסוים. התקציב נקבע משילוב של שני גורמים: כמה השרת שלכם יכול לשאת, וכמה גוגל בכלל רוצה לסרוק אתכם.

שני המרכיבים של תקציב הסריקה

• קיבולת סריקה (crawl capacity): התקרה שגוגל שמה על עומס השרת, כדי לא להאט אתכם
• ביקוש סריקה (crawl demand): כמה גוגל בכלל רוצה לסרוק אתכם, על סמך חשיבות ותדירות עדכון

למה זה חשוב גם לנוכחות ב-AI

אתר עם בעיות טכניות שמבזבזות תקציב סריקה על עמודים לא חשובים, עלול לגרום לכך שעמודים מרכזיים לא נסרקים מספיק תדיר, גם על ידי בוטים של מנועי AI כמו GPTBot או PerplexityBot. אתר מהיר, נקי, ומאורגן היטב מקבל יחס טוב יותר מכל הסורקים.