כיצד מנועי חיפוש מוצאים, סורקים ומוסיפים אינדקס לתוכן שלך?
לעתים קרובות אני לא ממליץ ללקוחות לבנות מערכות מסחר אלקטרוני או ניהול תוכן משלהם בגלל אפשרויות ההרחבה הבלתי נראות הדרושות כיום - ממוקדות בעיקר בחיפוש ואופטימיזציה חברתית. כתבתי מאמר בנושא בחירת CMS, ואני עדיין מראה את זה לחברות שאני עובד איתן שמתפתות לבנות את מערכת ניהול התוכן שלהן.
כיצד פועלים מנועי חיפוש?
נתחיל עם איך מנועי החיפוש עובדים. הנה סקירה מצוינת מגוגל.
עם זאת, יש בהחלט מצבים שבהם פלטפורמה מותאמת אישית היא הכרח. כשזה הפתרון האופטימלי, אני עדיין דוחף את הלקוחות שלי לבנות את התכונות הנחוצות כדי לייעל את האתרים שלהם לחיפוש ולמדיה חברתית. שלוש תכונות מפתח הן הכרח.
- robots.txt
- XML Sitemap
- מידע נוסף
מהו קובץ Robots.txt?
robots.txt קובץ - robots.txt file הוא קובץ טקסט רגיל בספריית השורש של האתר ואומר למנועי החיפוש מה עליהם לכלול ומה לא לכלול בתוצאות החיפוש. בשנים האחרונות, גם מנועי החיפוש ביקשו שתכלול את הנתיב למפת אתר XML בתוך הקובץ. הנה דוגמה שלי, המאפשרת לכל הבוטים לסרוק את האתר שלי וגם מפנה אותם למפת ה-XML שלי:
User-agent: *
Sitemap: https://martech.zone/sitemap_index.xmlמהי מפת XML?
XML Sitemap - כמו HTML מיועד לצפייה בדפדפן, XML נכתב כדי לעכל באופן פרוגרמטי. א XML מפת אתר היא טבלה של כל עמוד באתר שלך ומתי הוא עודכן לאחרונה. מפות אתרים של XML יכולות להיות משורשרות... כלומר, מפת אתר XML אחת יכולה להתייחס למפת אתר אחרת. זה נהדר אם אתה רוצה לארגן ולפרק את מרכיבי האתר שלך באופן הגיוני (שאלות נפוצות, דפים, מוצרים וכו') לתוך מפות ה-Sitemap שלהם.
מפות אתר חיוניות כדי לאפשר למנועי החיפוש לדעת איזה תוכן יצרת ומתי הוא נערך לאחרונה. תהליך של מנוע חיפוש בעת כניסה לאתר שלך אינו יעיל ללא הטמעת מפת אתר וקטעי קוד.
ללא מפת XML, אתה מסתכן שהדפים שלך לעולם לא יתגלו. מה אם יש לך דף נחיתה חדש של מוצר שאינו מקושר פנימי או חיצוני? איך גוגל מגלה את זה? ובכן, עד שיימצא קישור אליו, לא יגלו אותך. למרבה המזל, מנועי החיפוש מאפשרים למערכות ניהול תוכן ולפלטפורמות מסחר אלקטרוני לפרוס עבורם שטיח אדום!
- גוגל מגלה קישור חיצוני או פנימי לאתר שלך.
- גוגל מכניסה לאינדקס את הדף ומדרגת אותו בהתאם לתוכן שלו ולתוכן ואיכות האתר של הקישור המפנה.
עם מפת XML, אתה לא משאיר את הגילוי או העדכון של התוכן שלך למקרה! יותר מדי מפתחים מנסים לעשות קיצורי דרך שפוגעים גם בהם. הם מפרסמים את אותו Rich Snippet ברחבי האתר, ומספקים מידע שאינו רלוונטי לפרטי הדף. הם מפרסמים מפת אתר עם אותם תאריכים בכל עמוד (או כולם מתעדכנים כאשר עמוד אחד מתעדכן), ומעניקים תורים למנועי החיפוש שהם משחקים במערכת או לא אמינים. או שהם לא עושים פינג למנועי החיפוש בכלל... כך שמנוע החיפוש לא מבין שמידע חדש פורסם.
מהן מטא נתונים? מיקרו נתונים? Rich Snippets?
קטעי טקסט עשירים מתויגים בקפידה מיקרו נתונים מוסתר מהצופה אך גלוי בדף עבור מנועי חיפוש או אתרי מדיה חברתית לשימוש. זה ידוע בשם מטא נתונים. גוגל מצייתת ל Schema.org כסטנדרט לכלול דברים כמו תמונות, כותרות, תיאורים ושפע של קטעים אינפורמטיביים אחרים כמו מחיר, כמות, מידע על מיקום, דירוגים וכו'. סכימה תשפר משמעותית את הנראות של מנוע החיפוש שלך ואת הסבירות שמשתמש ילחץ עליו.
פייסבוק משתמשת ב- OpenGraph פרוטוקול (כמובן, הם לא יכולים להיות זהים), X יש אפילו קטע לציון פרופיל ה-X שלך. יותר ויותר פלטפורמות משתמשות במטא נתונים אלה כדי להציג תצוגה מקדימה של קישורים מוטמעים ומידע אחר כשהן מפרסמות.
לדפי האינטרנט שלך יש משמעות בסיסית שאנשים מבינים כאשר הם קוראים את דפי האינטרנט. אך למנועי החיפוש יש הבנה מוגבלת של מה שנדון בדפים אלה. על ידי הוספת תגים נוספים ל- HTML של דפי האינטרנט שלך - תגים שאומרים "היי מנוע חיפוש, מידע זה מתאר את הסרט, המקום, או האדם, או הסרטון הספציפי הזה" - אתה יכול לעזור למנועי חיפוש ויישומים אחרים להבין טוב יותר את התוכן שלך. ולהציג אותו בצורה שימושית, רלוונטית. מיקרו נתונים היא קבוצת תגים, שהוצגה עם HTML5, המאפשרת לך לעשות זאת.
Schema.org, מה זה MicroData?
כמובן, אף אחד מאלה אינו נדרש ... אך אני ממליץ עליהם בחום. כשאתה משתף קישור בפייסבוק, למשל, ושום תמונה, כותרת או תיאור לא מופיעים ... אנשים מעטים יתעניינו וללחוץ בפועל. ואם קטעי הסכימה שלך אינם נמצאים בכל עמוד, כמובן שאתה עדיין יכול להופיע בתוצאות חיפוש ... אך המתחרים עשויים לנצח אותך כשיוצג להם מידע נוסף.
רשום את קובצי ה- XML שלך ב- Search Console
אם בנית תוכן משלך או פלטפורמת מסחר אלקטרוני, הכרחי שתהיה לך תת-מערכת שתצלח את מנועי החיפוש, תפרסם מיקרו-נתונים, ולאחר מכן תספק מפת אתר XML חוקית עבור התוכן או מידע המוצר שיימצא!
לאחר שקובץ ה-robots.txt, מפות ה-XML ו-Rich Snippets מותאמים אישית ומותאמים בכל האתר שלך, אל תשכח להירשם לכל מנוע חיפוש קונסולת חיפוש (ידוע גם בשם מנהל האתר כלי) שבו אתה יכול לפקח על תקינותו ונראות האתר שלך במנועי חיפוש. אתה יכול אפילו לציין את נתיב ה-Sitemap שלך אם אף אחד מהם אינו רשום ולראות כיצד מנוע החיפוש צורך אותו, האם יש בו בעיות או לא, ואפילו כיצד לתקן אותן.
שחרר את השטיח האדום למנועי חיפוש ומדיה חברתית, ותמצא את דירוג האתר שלך טוב יותר, הערכים שלך בדפי תוצאות של מנועי החיפוש נלחצו יותר, והדפים שלך שותפו יותר במדיה החברתית. הכל מצטבר!
כיצד Robots.txt, Sitemaps ו- MetaData עובדים יחד
שילוב כל האלמנטים הללו הוא כמו פריסת השטיח האדום עבור האתר שלך. הנה תהליך הסריקה שבוט לוקח יחד עם האופן שבו מנוע החיפוש מוסיף את התוכן שלך לאינדקס.
- באתר שלך יש קובץ robots.txt שמפנה גם למיקום ה- XML של מפת האתר שלך.
- מערכת ה-CMS או המסחר האלקטרוני שלך מעדכנת את מפת האתר XML עם כל דף ומידע על תאריך פרסום או עריכת תאריך.
- מערכת ה-CMS או המסחר האלקטרוני שלך מפצירה את מנועי החיפוש כדי ליידע אותם שהאתר שלך עודכן. אתה יכול לעשות להם פינג ישירות או להשתמש ב-RPC ובשירות כמו Ping-o-matic כדי לדחוף לכל מנועי החיפוש המרכזיים.
- מנוע החיפוש חוזר באופן מיידי, מכבד את קובץ Robots.txt, מוצא דפים חדשים או מעודכנים דרך מפת האתר, ולאחר מכן מוסיף את הדף לאינדקס.
- בעת הוספת הדף שלך לאינדקס, הוא משתמש בכותרת, בתיאור המטא, ברכיבי HTML5, בכותרות, בתמונות, בתגיות האלטרנט ומידע אחר כדי להוסיף כראוי את הדף לאינדקס עבור החיפושים הרלוונטיים.
- בעת הוספת הדף שלך לאינדקס, הוא משתמש בכותרת, בתיאור המטא ובמיקרו נתונים של Rich Snippet כדי לשפר את דף התוצאות של מנוע החיפוש.
- כאשר אתרים רלוונטיים אחרים מקשרים לתוכן שלך, התוכן שלך מדורג טוב יותר.
- מכיוון שהתוכן שלך משותף במדיה חברתית, מידע ה-Rich Snippet שצוין יכול לעזור בתצוגה מקדימה נכונה של התוכן שלך ולהפנות אותו לפרופיל החברתי שלך.
