כיצד מנועי חיפוש מוצאים, סורקים ומוסיפים אינדקס לתוכן שלך?

אופטימיזציה למנועי חיפוש

לא לעתים קרובות אני ממליץ ללקוחות לבנות מערכות מסחר אלקטרוני או ניהול תוכן משלהם בגלל כל אפשרויות ההרחבה הבלתי נראות הדרושות בימינו - בעיקר ממוקדות סביב חיפוש ואופטימיזציה חברתית. כתבתי מאמר על כיצד לבחור CMS ואני עדיין מראה את זה לחברות איתן אני עובד שמתפתות רק לבנות מערכת ניהול תוכן משלהן.

עם זאת, ישנם מצבים שבהם פלטפורמה מותאמת אישית היא הכרח. כאשר זה הפיתרון האופטימלי, אני עדיין דוחף את הלקוחות שלי לבנות את התכונות הדרושות כדי לייעל את האתרים שלהם לחיפוש ולמדיה חברתית. יש בעצם שלוש תכונות עיקריות שהן הכרח.

  • robots.txt
  • XML Sitemap
  • מידע נוסף

מהו קובץ Robots.txt?

robots.txt קובץ - robots.txt קובץ הוא קובץ טקסט רגיל שנמצא בספריית הבסיס של האתר ומספר למנועי החיפוש מה עליהם לכלול ולהוציא מתוצאות החיפוש. בשנים האחרונות מנועי החיפוש גם ביקשו שתכלול את הנתיב למפת XML בתוך הקובץ. הנה דוגמה שלי, המאפשרת לכל הרובוטים לסרוק את האתר שלי וגם מפנה אותם אל מפת ה- XML ​​שלי:

User-agent: *
Sitemap: https://martech.zone/sitemap_index.xml

מהי מפת XML?

XML Sitemap - בדיוק כמו ש- HTML מיועד לצפייה בדפדפן, XML נכתב לעיכול באופן תכנותי. מפת XML היא בעצם טבלה של כל עמוד באתר שלך ומתי עודכן לאחרונה. קובצי Sitemap של XML יכולים גם להיות משורשרים בשרשרת ... כלומר מפת XML אחת יכולה להתייחס למערכת אחרת. זה נהדר אם ברצונך לארגן ולפרק את האלמנטים באתר שלך באופן הגיוני (שאלות נפוצות, דפים, מוצרים וכו ') בקובצי Sitemap משלהם.

Sitemaps הם חיוניים כדי שתוכלו להודיע ​​ביעילות למנועי החיפוש איזה תוכן יצרתם ומתי נערך לאחרונה. התהליך בו מנוע חיפוש משתמש בעת כניסה לאתר שלך אינו יעיל ללא הטמעת Sitemap וקטעי מידע.

ללא מפת XMLאתה מסתכן שהדפים שלך לא יתגלו לעולם. מה אם יש לך דף נחיתה חדש של מוצר שאינו מקושר פנימי או חיצוני. איך גוגל מגלה את זה? ובכן, במילים פשוטות ... עד שיימצא קישור אליו, אתה לא הולך להתגלות. למרבה המזל, מנועי חיפוש מאפשרים למערכות ניהול תוכן ולפלטפורמות מסחר אלקטרוני לפרוש עבורן שטיח אדום!

  1. גוגל מגלה קישור חיצוני או פנימי לאתר שלך.
  2. גוגל מוסיף את העמוד לאינדקס ומדרג אותו על פי תוכנו ומה התוכן והאיכות של האתר של הקישור המפנה.

עם מפת XML, אינך משאיר את גילוי התוכן שלך או את עדכון התוכן שלך במקרה! יותר מדי מפתחים מנסים לקחת קיצורי דרך שפוגעים גם בהם. הם מפרסמים את אותו Rich Snippet ברחבי האתר, ומספקים מידע שאינו רלוונטי למידע העמוד. הם מפרסמים מפת אתר עם אותם תאריכים בכל עמוד (או שכולם מתעדכנים בעת עדכון של עמוד אחד), ומעניקים תורים למנועי החיפוש שהם משחקים במערכת או שאינם אמינים. או שהם בכלל לא מפעילים את מנועי החיפוש ... כך שמנוע החיפוש לא מבין שפורסם מידע חדש.

מהן מטא נתונים? מיקרו נתונים? Rich Snippets?

קטעי טקסט עשירים מתויגים בקפידה מיקרו נתונים שמוסתר מהצופה אך גלוי בדף לשימוש מנועי חיפוש או אתרי מדיה חברתית. זה נקרא מטא נתונים. גוגל תואמת Schema.org כסטנדרט לכלול דברים כמו תמונות, כותרות, תיאורים ... כמו גם שפע של קטעי מידע אינפורמטיביים אחרים כמו מחיר, כמות, מידע על מיקום, דירוגים וכו '. סכמה תשפר משמעותית את הנראות של מנוע החיפוש שלך ואת הסבירות שמשתמש ילחץ דרך.

פייסבוק משתמשת ב- OpenGraph פרוטוקול (כמובן שהם לא יכולים להיות זהים), לטוויטר יש אפילו קטע שמציין את פרופיל הטוויטר שלך. יותר ויותר פלטפורמות משתמשות במטא נתונים זה כדי להציג תצוגה מקדימה של קישורים מוטבעים ומידע אחר כאשר הם מפרסמים.

לדפי האינטרנט שלך יש משמעות בסיסית שאנשים מבינים כאשר הם קוראים את דפי האינטרנט. אך למנועי החיפוש יש הבנה מוגבלת של מה שנדון בדפים אלה. על ידי הוספת תגים נוספים ל- HTML של דפי האינטרנט שלך - תגים שאומרים "היי מנוע חיפוש, מידע זה מתאר את הסרט, המקום, או האדם, או הסרטון הספציפי הזה" - אתה יכול לעזור למנועי חיפוש ויישומים אחרים להבין טוב יותר את התוכן שלך. ולהציג אותו בצורה שימושית, רלוונטית. מיקרו נתונים היא קבוצת תגים, שהוצגה עם HTML5, המאפשרת לך לעשות זאת.

Schema.org, מה זה MicroData?

כמובן, אף אחד מאלה אינו נדרש ... אך אני ממליץ עליהם בחום. כשאתה משתף קישור בפייסבוק, למשל, ושום תמונה, כותרת או תיאור לא מופיעים ... אנשים מעטים יתעניינו וללחוץ בפועל. ואם קטעי הסכימה שלך אינם נמצאים בכל עמוד, כמובן שאתה עדיין יכול להופיע בתוצאות חיפוש ... אך המתחרים עשויים לנצח אותך כשיוצג להם מידע נוסף.

רשום את קובצי ה- XML ​​שלך ב- Search Console

הכרחי שאם בנית פלטפורמת תוכן או מסחר אלקטרוני משלך, שתהיה לך תת-מערכת המציפה את מנועי החיפוש, מפרסמת מיקרו נתונים ואז מספקת מפת XML חוקית לתוכן או למידע על המוצר שיימצא!

ברגע שקובץ ה- robots.txt, קובצי ה- Sitemap של ה- XML ​​וה- Rich Snippets שלך מותאמים אישית ומותאמים בכל האתר שלך, אל תשכח להירשם לכל מנוע החיפוש של Console (המכונה גם כלי למנהלי אתרים), שם תוכל לפקח על הבריאות והנראות של אתר במנועי חיפוש. אתה יכול אפילו לציין את נתיב ה- Sitemap שלך אם אף אחד מהם לא מופיע ברשימה ולראות כיצד מנוע החיפוש צורך אותו, האם יש בעיות בו או לא, ואפילו כיצד לתקן אותן.

גלגלו את השטיח האדום למנועי החיפוש והמדיה החברתית ותמצאו את דירוג האתר שלכם טוב יותר, הערכים שלכם בדפי התוצאות של מנועי החיפוש לחצו על יותר והדפים שלכם חולקו יותר ברשתות החברתיות. הכל מסתכם!

כיצד Robots.txt, Sitemaps ו- MetaData עובדים יחד

שילוב של כל האלמנטים האלה דומה הרבה לגלגול השטיח האדום עבור האתר שלך. הנה תהליך הסריקה שעושה בוט יחד עם האופן בו מנוע החיפוש מוסיף את התוכן לאינדקס.

  1. באתר שלך יש קובץ robots.txt שמפנה גם למיקום ה- XML ​​של מפת האתר שלך.
  2. מערכת ה- CMS או המסחר האלקטרוני שלך מעדכנים את מפת ה- XML ​​עם כל דף ומפרסמים מידע על תאריך או עריכת תאריך.
  3. מערכת ה- CMS או המסחר האלקטרוני שלך מעבירה את מנועי החיפוש כדי להודיע ​​להם שהאתר שלך עודכן. אתה יכול לבצע פינג ישירות אליהם או להשתמש ב- RPC ובשירות כמו פינג-או-מטיק לדחוף אל כל מנועי החיפוש המרכזיים.
  4. מנוע החיפוש חוזר מיד, מכבד את קובץ ה- Robots.txt, מוצא דפים חדשים או מעודכנים באמצעות ה- Sitemap ואז מוסיף את העמוד לאינדקס.
  5. כאשר הוא מוסיף את העמוד לאינדקס, הוא משתמש במיקרו נתונים של Rich Snippet כדי לשפר את דף התוצאות של מנועי החיפוש.
  6. כאשר אתרים רלוונטיים אחרים מקשרים לתוכן שלך, התוכן שלך מדורג טוב יותר.
  7. מכיוון שהתוכן שלך משותף ברשתות החברתיות, מידע ה- Rich Snippet שצוין יכול לעזור בתצוגה מקדימה נכונה של התוכן שלך ולהפנות אותו לפרופיל החברתי שלך.

תגובות 2

  1. 1

מה אתה חושב?

אתר זה משתמש Akismet כדי להפחית דואר זבל. למד כיצד הנתונים שלך מעובדים.