תקציב זחילה

תקציב זחילה Crawl Budget
תקציב זחילה Crawl Budget

מה זה תקציב זחילה? כיצד הוא תורם לקידום האורגני של האתר? ואיך בעצם אפשר לשפר אותו?
בזמן האחרון אני מקבל הרבה אתרים שתקציב הזחילה שלהם לא מנוצל נכון, מה שפוגע להם בקידום האתר.

מה זה בעצם תקציב זחילה?

האלגוריתמים של גוגל עובדים עם זחלן.
זחלן זה סוג של רובוט שמדמה פעולות אנושיות הוא סורק אתרים ודפים ברשת, כך שתוצאות החיפוש שלנו תמיד איכותיות.
המטרה הכללית היא לגרום לגוגל לסרוק דפים איכותיים יותר ולא סתם דפי ארכיון או, חס וחלילה, דפי 404.
לכל אתר באינטרנט יש תקציב זחילה שונה.
אתרי תדמית מקבלים תקציב יותר נמוך מאשר אתרי חנות, לדוגמה.
עכשיו, זה לא רק זחלן אחד מן הסתם.
אלו משאבים גדולים שסורקים את האינטרנט.
יש מיליוני, אם לא מיליארדי, אתרים ברשת.
יש דפים ואתרים איכותיים יותר ויש פחות.
בוא נגיד שגם הזחלן צריך להיות יעיל, בגלל שזה עולה הרבה כסף ודורש הרבה משאבים.
לכן, לכל אתר תקציב זחילה שונה.

איך אתרים מקבלים תקציב זחילה טוב יותר?

אז ככה, לכל אתר תקציב זחילה שונה.

  • אתרים סמכותיים בעלי ותק מקבלים תקציב גדול יותר.
  • אתרי חדשות מקבלים תקציב גדול יותר.
  • אתרי איקומרס מקבלים תקציב גדול יותר.

ואיך זה פוגש אותנו?
מה לעשות, לא כולנו נולדנו עם אתר מקודם.
רוב האנשים שיקראו את המדריך הזה כנראה בעלי אתר חדש או כזה שפחות סמכותי מבחינת גוגל, לכן תקציב הזחילה שלהם נמוך יותר.
בכללי, כמה שאתר תדמית הוא סמכותי זה לא משנה את זה שהוא מקבל תקציב זחילה נמוך יותר.
במקרה כזה, נרצה לשפר את תקציב הזחילה בשביל לגרום לגוגל להבין איזה דפים חשובים יותר ועדיף לסרוק אותם על בסיס קבוע יותר.

כדי לשפר תקציב זחילה של אתר, נבצע את הפעולות הבאות:

לפני שאני נכנס לפרקטיקה, אני מזהיר – בצעו את הפעולות האלה רק אם אתם מרגישים בטוחים ברמת הקידום שלכם.
טוב, אז יאללה, בואו נתחיל.

הסרת דפים מיותרים

לרוב, בכל אתר יש דפים מיותרים. זה יכול להיות מחירון ישן, דף גלריה בלי תמונות, מאמרים דלי תוכן ועוד.
במצבים כאלה, מה שאנחנו נרצה לעשות בשביל לשפר את התקציב זה להוריד את אותם הדפים.
בד״כ, זה מה שאני עושה עם אתרים חדשים שאני מקבל – סורק, בודק איזה דפים פחות איכותיים, מוחק ועושה הפניה אם צריך.

סימון דפים כנו אינדקס

ישנם דפים שאסור לנו למחוק, כמו בלוג, ארכיונים שעוזרים לגוגל להבין את ההיררכיה של האתר, מפת אתר, מדיניות, צור קשר ועוד, שאותם נעדיף לסמן בנו אינדקס.
הדפים האלה בד״כ פחות חשובים לקידום, אבל כן חייבים להיות בתוך האתר.
בקיצור, גם אני לא מסמן כל דף כזה כנו אינדקס, אבל לדעתי כל אתר צריך לסמן את דפי הארכיון והמחבר כנו אינדקס.

איחוד דפים

איחוד דפים זו הפעולה הכי מסוכנת שאני אוהב לעשות. ברוב המקרים רואים עליה בדירוג בצורה מהירה, כמו הסרה של דפים לא חשובים.
לפעמים יש דפים חשובים, אבל יש כמה דפים חשובים מה שיוצר קניבליזציה של מילות מפתח ותחרות פנימית.
במצבים כאלה אני בודק איזה דף חזק יותר בדירוג, ואז אני פשוט לוקח את התוכן שיש בדפים הפחות חשובים ושם אותם בחשוב.
לאחר מכן, אני פשוט מוחק את הדפים הפחות חשובים ויוצר הפניה לדף החשוב.

תיקון שגיאות 404

תיקון שגיאות כאלה הוא קריטי לשיפור היעילות של תקציב הזחילה.

הפעולות מאוד פשוטות, הכינו דף מיוחד לדפי 404, צרו הפניה במידה וצריך.

מדריך שיכול לסייע לכם עבודה מול סקרימינג פרוג

שיפור קישורים פנימיים לדפים חשובים

יש להבטיח שהקישורים הפנימיים מובילים לדפים שחשוב שיגיעו לסריקה תכופה יותר.

זא העלתם מאמר חדש מעולה! קשרו לדפים שהכי חשוב לכם שהוא יתקדם.

שימוש בקובץ robots.txt לחסימת דפים לא נחוצים

פחות רלוונטי היום מאז, אך עדיין שימושי כדי לוודא שהזחלן לא מבזבז זמן על דפים לא נחוצים.

מדריך של גוגל על robots.txt

שיפור מהירות האתר

אז זחלן בעצם מדמה פעולות אנושיות של גולש, וכאשר הוא מתקשה לנווט באתר, הוא יוצא מהאתר.
כן, אין מה לעשות, גוגל וגם אנחנו מעדיפים אתר שרץ מהר.
בקיצור, יש לי מדריך מעולה על שיפור מהירות אתר. לחצו פה למדריך.

מהירות אתר
שיפור מהירות אתר לפני ואחרי

לסיום

חברים, כמו בכל פעם אני נהנה לתת לכם תוכן מכל הלב בחינם.
שיפור תקציב הוא נושא חשוב, אבל הכי חשוב בתכלס זה לייצר תוכן טוב, כזה שבאמת מייצר ערך.
יד לוחצת יד – אתם נותנים, אתם מקבלים.
ואם אתם רוצים ללמוד עוד טיפה על קידום אורגני, לחצו פה!
המדריך שכתבתי הוא אחד המקיפים ברשת ומאגד בתוכו 90% ממה שאני יודע.
בהצלחה!

תמונה של צחי ששון
צחי ששון
מומחה לקידום אתרים אורגני ובינה מלאכותית Aio. מייסד ובעלים של חברת קידום האתרים המצליחה ביותר בישראל לשנת 2025! ניסיון רב של למעלה מ8 שנים בשיווק דיגיטלי.