אינדוקס, robots.txt ומפת האתר
קובעים אילו עמודים ייכנסו לגוגל ואילו יישארו בחוץ, ומוודאים שמפת האתר ב-/sitemap.xml עונה כמו שצריך.
המדריך הזה קובע מה גוגל רשאי לאנדקס באתר ומוודא שמפת האתר עונה בכתובת הנכונה — שני הדברים שנשאלים ראשונים כשמחברים את האתר ל-Google Search Console. נדרשת הרשאת מנהל מערכת.
שלב א׳ — ארכיונים שכדאי להשאיר מחוץ לאינדקס
- פותחים “הגדרות ← SEO ← ארכיונים”.
- לכל שורה יש תיבה אחת: “החרג מהאינדוקס”.
- “תוצאות חיפוש” — מסומן כברירת מחדל, וכך צריך להישאר. עמודי תוצאות חיפוש פנימיות אינם תוכן.
- “ארכיוני תאריכים” — מסומן כברירת מחדל. בחנות אין ערך לארכיון לפי חודש.
- “ארכיוני מחבר” — כבוי כברירת מחדל.
- “עמוד 2 ואילך” — כבוי כברירת מחדל. סמנו רק אם אתם יודעים למה.
- “שמירה”.
שלב ב׳ — להוציא סוג תוכן שלם מהאינדקס
- פותחים “הגדרות ← SEO ← סוגי תוכן” (או “טקסונומיות”).
- מסמנים “החרג מאינדוקס כברירת מחדל” בשורה של הסוג הרצוי.
- “שמירה”.
זו הדרך הנכונה להוציא, למשל, תגיות מוצר שלמות מהאינדקס בלי לגעת בעמודים אחד-אחד.
שלב ג׳ — להוציא עמוד בודד
- נכנסים לעריכת העמוד, המוצר או הפוסט.
- בתיבה “SEO ושיתוף” מורידים את הסימון מ”הצג עמוד זה בתוצאות חיפוש”.
- מעדכנים את העמוד.
אותה תיבה קיימת גם במסך העריכה של קטגוריה או מותג, תחת השורה “אינדוקס”.
שים לב: הבחירה בפריט הבודד גוברת על הגדרת סוג התוכן. אם הוצאתם סוג שלם מהאינדוקס ואחר כך סימנתם עמוד בודד כ”הצג עמוד זה בתוצאות חיפוש” — אותו עמוד ייכנס. עמוד שהוצא מהאינדוקס עדיין מסומן לגוגל כ”עקוב אחרי הקישורים”, אלא אם סימנתם גם “nofollow” בנפרד.
שלב ד׳ — מפת האתר
מפת האתר עונה בכתובת /sitemap.xml — הכתובת שבה בני אדם ורובוטים מחפשים אותה. הקובץ robots.txt של האתר מקבל אוטומטית שורת Sitemap: שמצביעה עליה.
- פותחים בדפדפן את כתובת האתר עם
/sitemap.xmlבסופה. - אמורה להיפתח מפת אינדקס עם קישורים למפות המשנה: עמודים, פוסטים, מוצרים, קטגוריות ומותגים.
- את אותה כתובת מגישים ב-Google Search Console.
שים לב: אם /sitemap.xml מחזיר 404, זה כמעט תמיד כללי הכתובות שלא רועננו. נכנסים ל”הגדרות ← קישורים קבועים”, לוחצים “שמירת שינויים” בלי לשנות כלום, ומנסים שוב.
מה נכנס למפה ומה לא
- נכנסים: עמודים, פוסטים, מוצרים, קטגוריות מוצרים, מותגים וקטגוריות בלוג.
- לא נכנסים: עמודי קבצים מספריית המדיה, ארכיוני מחברים, ארכיוני מאפייני מוצר (צבע, מידה וכדומה), תגיות מוצר ופורמטים של פוסטים.
- לא נכנס: כל פריט שסימנתם כלא לאינדוקס — בפריט עצמו או ברמת סוג התוכן.
ארכיון לכל גוון צבע הוא תוכן דק וכפול, ולכן מאפייני המוצר הוצאו במכוון.
שלב ה׳ — המותגים
המותגים באתר מקבלים יחס מלא מהמנוע:
- עמודי המותגים נכללים במפת האתר, בניגוד למאפייני מוצר.
- אפשר לתת להם תבנית כותרת ותיאור משלהם בלשונית “טקסונומיות”, ולכל מותג בנפרד יש שדות “מטא כותרת”, “מטא תיאור” ו-“אינדוקס” במסך העריכה שלו.
- בתבניות של מוצרים אפשר להשתמש במשתנה
%%brand%%, שמחזיר את שם המותג של המוצר. - לאתר יש עמוד ריכוז של כל המותגים בכתובת
/brands/, ופירורי הלחם בעמוד של מותג בודד עוברים דרכו.
אתר בבנייה
שים לב: אם סימנתם בוורדפרס למנוע ממנועי חיפוש לאנדקס את האתר, ההודעה נאמרת פעם אחת — ב-robots.txt ובתגית הרובוטים של כל עמוד. מפת האתר עצמה ממשיכה להיות מוגשת גם אז, במכוון, כדי שתוכלו לבדוק אותה לפני עלייה לאוויר. כשעולים לאוויר — אל תשכחו להוריד את הסימון.
קשור
- settings-seo-titles
- settings-permalinks
- settings-redirects-404-auto