הגדרה קצרה
noindex הוא מטא-תג שמורה למנועי חיפוש לא לכלול את הדף באינדקס, גם אם הם זחלו עליו.
הרחבה
שימושים לגיטימיים: דפי תודה, דפי חיפוש פנימי, דפים כפולים שלא הוחלט עליהם canonical, סביבות staging, ודפי הרשמה טכניים. חשוב לא לחסום דף עם noindex גם ב-robots.txt — אם גוגל לא יזחל את הדף, הוא לא יראה את ההוראה.
למה noindex חשוב לקידום ולשיווק?
לא כל דף באתר צריך להופיע בגוגל. דף תודה אחרי שליחת טופס, תוצאות חיפוש פנימי, גרסאות סינון של קטגוריות בחנות, דפי תגיות עם פוסט אחד, אזור אישי של לקוחות. כשדפים כאלה נכנסים לאינדקס הם מתחרים בדפים החשובים שלכם, מדללים את התמונה הכוללת של האתר בעיני גוגל, ולפעמים מופיעים בתוצאות במקום הדף שבאמת רציתם. noindex הוא הכלי שמאפשר לשלוט במה שגוגל מראה.
הכיוון ההפוך חשוב לא פחות: noindex שנשאר בטעות על דף חשוב הוא אחת התקלות היקרות ביותר בקידום אתרים. זה קורה אחרי העלאת אתר חדש מסביבת פיתוח, אחרי החלפת תבנית, או כשתוסף SEO מוגדר לא נכון. הדף נעלם מגוגל בשקט, בלי הודעת שגיאה, והטראפיק יורד עד שמישהו שם לב. הבנה של המונח מאפשרת לזהות את זה בדקות ולא בחודשים.
איך מודדים ומיישמים את זה בפועל?
noindex מוגדר באחת משתי דרכים: תג meta בשם robots בתוך ה-head של הדף, או כותרת HTTP בשם X-Robots-Tag, שמתאימה גם לקבצי PDF ותמונות. בוורדפרס מגדירים זאת בתוסף ה-SEO ברמת הדף או ברמת סוג התוכן, למשל noindex לכל דפי התגיות. חשוב שהדף יישאר נגיש לזחילה ולא חסום ב-robots.txt, אחרת גוגל לא יראה את ההוראה.
לבדיקה הדביקו כתובת ב-URL Inspection של Google Search Console: אם הדף מסומן noindex תראו שהוא לא באינדקס עם סיבה מפורשת. בדוח Pages תמצאו רשימה של כל הדפים שהוחרגו בגלל noindex, וכדאי לעבור עליה אחרי כל שינוי גדול באתר. לסריקה מלאה השתמשו ב-Screaming Frog, לשונית Directives, שמציגה את כל הדפים עם noindex בבת אחת. אם גיליתם noindex על דף חשוב, הסירו אותו ובקשו אינדוקס מחדש.
טעויות נפוצות
- חסימת דף ב-robots.txt וגם סימון noindex, כך שגוגל לא זוחל את הדף ולא רואה את ההוראה.
- העלאת אתר מסביבת פיתוח עם הגדרת noindex גלובלית שנשארה פעילה באתר החי.
- שימוש ב-noindex לדפים כפולים במקום canonical, ואיבוד הסמכות שהייתה מתאחדת בדף הראשי.
- noindex על דפי קטגוריה בחנות מתוך הנחה שהם דלים, כשבפועל הם הדפים שמדרגים לביטויים מסחריים.
- הסתמכות על noindex כדי להסתיר מידע רגיש. הדף עדיין נגיש לכל מי שמכיר את הכתובת.
דוגמה מהשטח
לדוגמה, נניח שחנות אונליין לריהוט משדרגת את האתר. חודש אחרי העלייה לאוויר בעל החנות שם לב שהמכירות מגוגל נעלמו. בדיקה ב-URL Inspection מראה שדפי הקטגוריה מסומנים noindex: המפתחים השאירו את הגדרת הסביבה הזמנית פעילה. אחרי הסרת התג ושליחת בקשת אינדוקס לדפים המרכזיים, גוגל חוזר לסרוק ולהציג אותם. סריקה שבועית ב-Screaming Frog, או התראה פשוטה שבודקת את תג ה-robots בדף הבית, הייתה מזהה את התקלה ביום הראשון.
להמשך קריאה
שאלות נפוצות על noindex
מה ההבדל בין noindex לחסימה ב-robots.txt?
- robots.txt מונע מגוגל לזחול את הדף, אבל הדף עדיין יכול להופיע באינדקס אם מקשרים אליו. noindex מאפשר זחילה ומורה לא להציג את הדף בתוצאות. כדי להסיר דף מגוגל משתמשים ב-noindex בלבד, בלי חסימה.
כמה זמן לוקח לדף להיעלם מגוגל אחרי noindex?
- זה קורה בסריקה הבאה של גוגל בדף, בדרך כלל ימים עד כמה שבועות, בהתאם לתדירות הזחילה באתר. אפשר לזרז דרך URL Inspection בלחיצה על בקשת אינדוקס, שגורמת לגוגל לקרוא את הדף מחדש.
האם noindex פוגע בשאר האתר?
- לא, כשהוא על הדפים הנכונים. גוגל ממליץ לא לסמן noindex על דפים שחשוב שיופיעו, ולאורך זמן גם מפסיק לעקוב אחרי הקישורים בדף כזה. לכן אל תסמנו דפים שמשמשים כצומת קישורים פנימיים חשוב.