1. דף הבית
  2. »
  3. SEO
  4. »
  5. למה האתר שלי לא מופיע בגוגל?

למה האתר שלי לא מופיע בגוגל?

גוגל לא מאנדקס עמודים

תוכן העניינים

בתקופה האחרונה גוגל מאנדקס אתרים יותר לאט. לא פלא שאנשים שואלים בקבוצות לקידום אתרים למה האתר שלהם לא מופיע בגוגל, או למה עמודים חדשים לא מאונדקסים.

זה התחיל לפני כמה חודשים, כשהכפתור לשליחת עמודים ידנית לאינדקס של גוגל בקונסולת החיפוש (GSC = Google Search Console) פשוט הפסיק לעבוד פתאום, ולא היתה דרך לבעלי אתרים ולמקדמים לבקש ידנית הוספה של עמודים חדשים (או אתר חדש) לאינדקס של גוגל.

קהילת ה-SEO געשה עם פרשנויות והשערות על "המהלך" – האם זה מכוון או באג במנוע החיפוש? מה זה אומר?…

קהילות בניית אתרים לבעלי עסקים רעשו בבהלה – "אי אפשר יותר לאנדקס עמודים חדשים בגוגל?!"

לעומת זאת, מי שהיה קצת יותר ותיק בתחום, הזכיר שלא תמיד היתה אפשרות לבקש אינדוקס ידני של עמודים, ושבעצם לא חייבים לבקש אינדוקס של עמוד כדי שהוא יכנס לאינדקס, ויופיע בתוצאות החיפוש.

סריקה VS אינדוקס – מה ההבדל?

לאחרונה ראיתי כמה שאלות בקבוצות קידום של בעלי אתרים ששואלים למה גוגל לא סורק את העמוד או את האתר שלהם.

חשוב להבדיל בין סריקה של עמוד כלשהו – שאחריה גוגל מכיר אותו, לבין אינדוקס – שאחריו גוגל מוסיף את העמוד לתוצאות החיפוש.

כאשר גוגל סורק את העמוד, ומחליט (בדרך כלל, כתוצאה מאחת הסיבות שהוזכרו במאמר הזה) שהעמוד לא מתאים להופיע בתוצאות החיפוש, הוא לא יאנדקס אותו.

צילום המסך הזה מראה איך נראית ההודעה בקונסולת החיפוש:

GSC Crawled currently not indexed

כלומר, אנחנו יכולים לקבל מידע ישירות מגוגל על כך שהוא זיהה וסרק את העמודים, והחליט שלא להוסיף אותם לאינדקס.

מכאן, תוכלו לעבור על כל הסעיפים במאמר, ולוודא שעשיתם הכל כדי לגרום לגוגל לרצות להוסיף את העמוד לאינדקס, ולשלוח אליו את המחפשים.

אז מה אפשר לעשות כדי שעמוד חדש יופיע בתוצאות החיפוש?

קודם כל, הכפתור לבקשת אינדוקס חזר – למי שרוצה לנסות את המזל בצורה הזאת.

כדי להגיש עמוד לסריקה מחודשת בבקשה להיכנס לאינדקס דרך הקונסול, יש ללחוץ על URL Inspection בתפריט הראשי, להוסיף את הכתובת של העמוד שרוצים לסרוק, ואחרי הבדיקה הידנית, לבחור REQUEST INDEXING.

לבקש מגוגל לסרוק עמוד מחדש

אבל יש דרכים נוספות, ולפעמים יותר אפקטיביות להופיע באינדקס, גם בלי לבקש מגוגל.

וגם אם ביקשת מגוגל לאנדקס את העמוד שלך וזה לא ממש קורה, הנה כמה דרכים להאיץ את התהליך:

בקצרה, כל הצעדים להוספה מהירה של עמוד לאינדקס של גוגל

0. וודאו שהעמוד ניתן לאינדוקס והאתר פתוח למנועי חיפוש.

1. אם הוספתם עמוד חדש והוא לא מתאנדקס במשך הרבה זמן – שיקלו להחליף את הכתובת שלו, ולשלוח אותו שוב לאינדוקס ידני.

2. צרו מפת אתר, והגישו אותה לגוגל באמצעות קונסולת החיפוש.

3. צרו קישור פנימי לעמוד החדש (ודאגו להיררכיה פנימית טובה)

4. דאגו לקישורים מאתרים אחרים אל האתר והעמוד החדש.

5. וודאו שהתוכן בעמוד עונה לדרישות הבאות: מעניין, מחדש ומוסיף ערך לגולשים.

6. וודאו שהעמוד (והאתר באופן כללי) מותאם למובייל.

למתקדמים: צרו הנחיה ל-API של האינדקס להוספה מהירה.

שלב 0. וודאו שהאתר ניתן לאינדוקס, והעמוד גם הוא

לפני הכל, חשוב לוודא שהאתר והעמוד שאתם רוצים לאנדקס, אינו חסום עבור גוגל, ומוגדר ניתן לאינדוקס.

ההגדרות האלה נמצאות בקובץ robots.txt ובחלק head של העמודים.

בוורדפרס, ניתן למצוא הגדרה גורפת עבור האתר למניעת אינדוקס (noindex) תחת הגדרות >> קריאה.

הגדרת disallow שמופיעה בקובץ robots אמנם לא תמנע מגוגל לאנדקס את העמוד, אבל היא תמנע ממנוע החיפוש לגשת אל התוכן של העמוד, כלומר אם הוא נסרק ונשמר לאינדקס, העמוד יופיע עם הערה שהתוכן חסום על ידי האתר – אז תבדקו את זה. לא נחמד לראות תוצאה כזאת על עמוד באתר שלכם שאמור למכור אתכם ואת השירותים או המוצרים שלכם.

wordpress noindex setting

לשם הבהרה: כאשר ה-וי מסומן, האתר לא ניתן לאינדוקס!

אתר חי צריך להיות ללא הסימון הזה.

בתוכנה כמו Screaming Frog ניתן לראות עבור כל עמוד באתר אם הוא ניתן לאינדוקס.

אם אתם רוצים לראות הגדרות עבור עמוד ספציפי, אפשר להיעזר בתוסף לדפדפן כמו למשל Detailed SEO Extension ולקבל מידע בזמן אמת על העמוד – כולל האם ניתן לאנדקס אותו או לא.

באתרי וורדפרס שמשתמשים בתוסף קידום (כמו יואוסט או ראנק מאת') אפשר להגדיר עבור כל עמוד או פוסט בנפרד אם רוצים לאפשר או למנוע אינדוקס שלו במנועי חיפוש.

חשוב לציין, שההגדרה לא מונעת גישה ממנועי החיפוש, והם יכולים לסרוק את העמוד, ולהמשיך ממנו לעמודים נוספים שהוא מקשר אליהם, גם כאשר הוא לא מאונדקס.

1. איך לאנדקס עמוד חדש באתר ותיק

השיטה הזאת לאנדקס עמוד בגוגל כשהאתר כבר מופיע בתוצאות, עובדת כתחליף עוקף (work around) לדרך הרגילה.

אם ביקשת מגוגל להוסיף עמוד לאינדקס והוא מתעכב מעבר לימים בודדים, אפשר לשנות את כתובת העמוד (URI / SLUG), ולשלוח אותו לאינדוקס מחדש כאילו הוא עמוד חדש.

לא ברור למה זה עובד, כנראה באג במערכת, אבל כרגע זה פתרון מהיר ודי אפקטיבי בהרבה מקרים.

פתרון המשך לזה הוא להוסיף עמוד פיקטיבי, שלא באמת קיים, ולהפנות אותו עם 301 לעמוד שרוצים לאנדקס.

2. לשלוח מפת אתר לגוגל כדי לאנדקס את הדפים החשובים

מפת האתר היא קובץ XML שמכיל קישורים למפות נוספות לפי סוגים או נושאים (אינדקס של תת-מפות), וקישורים לכל העמודים באתר שרוצים שיופיעו בתוצאות החיפוש.

באתרי וורדפרס, אנחנו משתמשים בתוסף SEO כדי ליצור את מפת האתר, לפי סט של כללים שנקבעים בהגדרות התוסף.

כאשר מתקינים תוסף כמו Yoast או Rank Math, כדאי לעבור את תהליך אשף ההתקנה (Setup Wizard), אשר במהלכו תוכלו להגדיר אילו עמודים תרצו באופן עקרוני להוסיף לאינדקס של גוגל, ואילו לא.

אז כשתגדירו שאתם רוצים שעמודים ופוסטים יופיעו בתוצאות החיפוש של גוגל, התוסף יכלול אותם במפת האתר, ויגדיר אותם כניתנים לאינדוקס.

לעומת זאת, אם תגדירו שתבניות אלמנטור לא נכללות בתוצאות (כי אין שום סיבה שהן יופיעו!) התוסף יגדיר את התבניות של האתר עם הוראת no-index, ולא יכלול קובץ מפת אתר XML עם סוג הדפים הזה.

מרגע ההגדרה הראשונית, כל עמוד חדש מהסוגים שנכללים בהגדרות התוסף, יופיע במפת האתר הדינאמית, וגוגל יקבל הודעה שנוסף עמוד חדש לאתר – בצורה אוטומטית, ללא התערבות שלכם.

עכשיו כל מה שנשאר לך לעשות הוא להוסיף את מפת האתר שלכם לקונסולת החיפוש של גוגל – פשוט תוסיפו sitemap.xml בקונסול של הדומיין שלכם – למשל מפת האתר של האתר הזה נמצאת כאן:

https://website-experts.net/sitemap.xml

2.א. מפת אתר לאתרים שאינם מבוססי וורדפרס

אם האתר שאתם עובדים איתו אינו מבוסס וורדפרס, כדאי לבדוק אם יש מנגנון אוטומטי לייצור מפת אתר – כדי שיתעדכן אוטומטית על כל עמוד חדש באתר.

למרבית מערכות ניהול התוכן יש מפת אתר דינאמית שמתעדכנת בכל פעם שמוסיפים או מוחקים עמוד מהאתר.

ברוב האתרים הכתובת היא sitemap.xml אבל כדאי לוודא את זה כתלות במערכת שאיתה אתם עובדים.

אם אין מנגנון אוטומטי ליצירת מפת אתר, כדאי להיעזר באתר או תוכנה חיצוניים כדי ליצור מפת אתר בכל פעם שמעדכנים את האתר (מוסיפים או מוחקים עמוד).

Screaming Frog היא תוכנה מצויינת שמאפשרת ליצור מפת אתר ע"י סריקה של כל עמודי האתר – אמנם לא דינאמית, אבל אוטומטית.

בעמוד הזה מה-ויקי של גוגל, תוכלו למצוא את ההמלצות שלהם על מייצרי מפת אתר:

https://code.google.com/archive/p/sitemap-generators/wikis/SitemapGenerators.wiki

גם כאן כדאי להגיש את מפת האתר לגוגל. אין צורך להגיש אותה שוב בכל עידכון, רק לוודא להעלות לאתר מפה מעודכנת בכל עדכון עמודים באתר.

3. קישורים פנימיים מעמודים חזקים באתר שלך מחזקים עמודים חדשים

היררכיה של תוכן ומבנה קישורים פנימיים הוא נושא מאוד גדול, שאני אכסה במאמר נפרד.

לצורך העניין שלנו כרגע, חשוב לדעת, שכאשר עמוד חזק באתר, שכבר מופיע באינדקס של גוגל, מוציא קישור לעמוד חדש, העמוד הזה יקבל גם כוח (מה שנקרא "לינק ג'וס" – Link Juice), וגם הודעה משתמעת (implicit) לגוגל בפעם הבאה שהוא יסרוק את העמוד המקשר.

למשל, עם אני יודע שגוגל סורק את דף הבית שלי פעם בשבוע, ואני רוצה במהירות להוסיף עמוד לאינדקס, אני יכול להוסיף קישור אליו מדף הבית שלי, ובפעם הבאה שגוגל יסרוק את דף הבית, הוא יראה שיש עמוד חדש לסריקה באתר.

ככל שהעמוד המקשר (דף הבית בדוגמא כאן למעלה) חזק יותר, ונסרק לעיתים תכופות, כך יעלה הסיכוי שהעמוד החדש יתווסף לאינדקס מהר.

4. קישורים חיצוניים מאתר חזק כדי לחזק עמוד חדש או אתר חדש

השינוי החדש בהתנהגות של גוגל לגבי סריקה חל גם על אתרים חדשים. מדובר באתרים שלמים שעולים לאוויר ולא מאונדקסים במשך שבועות ואפילו חודשים לפעמים.

חשוב במקרה הזה להבדיל בין סריקת אתרים לבין אינדוקס (ראו בהמשך פירוט).

מראשית יצירתו של גוגל, הוא התבסס על קישורים כאמצעי "לגלות" את האינטרנט. עכבישי הסריקה של גוגל, אותם בוטים שסורקים את הרשת כדי למצוא אתרים, עמודים ותכנים, רצים מקישור לקישור, ובכך יוצרים את מה שאנחנו קוראים לו "הרשת" (לכן קוראים להם עכבישים אגב).

כאשר אתר חדש נוצר, ומצד אחד לא הגיש מפת אתר, ומצד שני אין אליו קישורים עדיין, אין לגוגל דרך לדעת על קיומו.

לכן, כאשר אתר מבוסס וותיק מקשר לאתר חדש, הוא שולח סיגנל לגוגל לעקוב אחרי הקישור, ולהתייחס אליו כהמלצה על האתר החדש.

אותו הדבר נכון כמובן גם לעמודים חדשים. אם תקשרו אליהם מאתרים אחרים, או בעלי אותם אתרים יגלו אותם (למשל משיתוף ברשתות החברתיות) ויקשרו אליהם – זה יהיה סימן לגוגל להוסיף אותם לאינדקס החיפוש שלו.

דרך לחזק את השיטה הזאת היא לשלוח קישור מעמוד באתר שלכם לאותו עמוד שמקשר אליכם (עדיף מאתר שונה, ולא החלפת קישורים ישירה עד כמה שאפשר). כך אתם מחזקים את העמוד המקשר על ידי הקישור שלכם, ובעקיפין מחזקים את האתר או העמוד החדש שמקבל את הקישור הסופי.

באתר הזה תוכלו להוסיף מאמר או תוכן כתוב כלשהו, עם קישור לעמוד או לאתר החדש בחינם (לא ניתן לערוך את המאמר לאחר ההגשה שלו), ואז לשלוח קישור מכם אל אותו מאמר, וליהנות מקישור חיצוני נוסף.

באתרי סימניות חברתיות (Social Bookmarking) כמו אתר MIX (לשעבר StumbleUpon) אפשר להוסיף קישורים לעמודים חדשים או חשובים באתר שלכם, וגוגל לעתים קרובות יגיע דרכם ויאנדקס את העמודים האלה מהר יותר.

במאמר מקיף ב-Search Engine Journal אפשר למצוא רשימה של עשרות אתרים כאלה (כולל כמה מהמוכרים מאוד כמו טוויטר).

אתם יכולים ליצור קישור פוטר מהאתר שלכם לפרופיל באתר כזה, ולעדכן אותו בכל עמוד חדש שתוסיפו לאתר. זה אולי מוסיף עבודה, אבל הרבה פעמים מאוד משתלם (בעיקר בתקופה הזאת).

5. וודאו שהתוכן שלכם מעניין ומוסיף ערך לגולשים

בהנחיות גוגל לבעלי אתרים (כן, יש דבר כזה :) ) אחת ההנחיות החשובות ביותר היא ליצור תוכן שמוסיף ערך לגולשים.

בסרטון הזה מ-2013 מאט כץ (Matt Cutts) מסביר את המשמעות של תוכן רזה, ואת ההתייחסות של גוגל אליו.

המשמעות היא שגוגל רוצים להפנות את המשמתמשים שלהם לעמודים בעלי ערך, שיעניינו אותם ויחדשו להם.

תוכן שחוזר על עצמו, אומר דברים לא רלוונטיים, או משכפל מידע שכבר קיים באתרים אחרים – לא יאונדקס.

באותו אופן, עמודים שמציגים הרבה תוכן עוטף – מילים מגובבות שלא מדברות לעניין – או הבטחות לא מקויימות (קליק בייט) עלולים לסבול מגורל דומה, ולא לקבל חשיפה בתוצאות החיפוש.

כלומר, לא מספיק לכתוב הרבה – התוכן צריך להיות גם מעניין ורלוונטי לנושא.

ההנחיה רק התחזקה מאז – בעיקר בעדכון הליבה האחרון (נובמבר 2021), שפגע בדירוגים של אלפי אתרים שסיפקו מידע רזה וסקירות מוצרים ללא ערך מוסף (חלקם ממש העתיקו מידע מעמודי המוצר באמזון, כלומר אפילו לא טרחו לערוך אותו או לשנות נוסח).

6. וודאו שהעמוד והאתר שלכם מותאמים למובייל

זה אולי נראה מובן מאליו היום, כי רוב הגולשים באתרים גולשים ממכשירים ניידים. למעט תחומים מיוחדים שדורשים שימוש במחשב, אחוז גבוה של הגולשים גולש לאתרים רק ממובייל.

גוגל כמובן "יודע" את זה (האלגוריתם שלו לוקח את זה בחשבון), ולמעשה גוגל עברו ביולי 2019 לגישה של mobile first indexing כלומר יש קדימות לבדיקות במובייל, ולהתאמה למובייל כדי לקבל זכות להיכנס לאינדקס של גוגל.

אתרים, או מדוייק יותר לומר עמודים, שלא מתאימים למכשירים ניידים (כתב קטן מדי, אלמנטים שבורחים מחוץ למסך, אלמנטים צפופים מדי אחד לשני), מסתכנים בכך שגוגל לא יכללו אותם באינדקס ובתוצאות החיפוש.

אותו הדבר נוגע לעמודים שמציגים מידע שונה מהותית בין תצוגה למחשב נייח לבין מובייל – אלא אם כן זה במטרה להקל על הגלישה ממובייל, זה עלול לסכן את ההופעה שלהם בתוצאות.

כדי לבדוק אם עמוד כלשהו באתר שלכם תואם מובייל, השתמשו בקישור כאן למטה, ושימו בו את הכתובת של העמוד שאתם רוצים לבדוק (צריך לעשות את זה אחד-אחד)

https://search.google.com/test/mobile-friendly

שימו לב, שגם אם העמוד לא מוצג כמו שהוא אמור להיות (כי גוגל לא מעבד את כל הקוד של העמוד), תקבלו הערה שבה מוסבר מה בעמוד הופך אותו לבלתי מתאים למובייל.

בונוס למשתמשים מתקדמים: הגישה הטכנית להוספת עמוד לאינדקס

באתר של נתי אלימלך (היום SEO בחברת וויקס) הוא מסביר את הדרך הטכנית והמאוד מהירה להוספת עמוד או אתר לאינדקס.

זה מאמר לאנשים עם הבנה טכנית מתקדמת – לא לבעלי אתרים, או ל-SEO מתחילים. ראו הוזהרתם ;-)

לסיכום

חשוב לזכור שגוגל רוצים לתת לגולשים ולמחפשים מידע רלוונטי, עדכני ובעל ערך.

התפקיד שלכם הוא ליצור את המידע הזה באתר שלכם, ולעזור לגוגל להבין שאכן הוא רלוונטי למשתמשים שלהם – ככה תרתמו אותם לשלוח אליכם גולשים.

צרו קשר

לחצ/י לשליחת הודעה בווטסאפ, או מלא/י את הפרטים בטופס כאן למטה.

מה אומרים בעלי אתרים ואנשי/נשות מקצוע שעזרתי להם:

תומי גורדון קידום אתרים אורגני SEO
תומי גורדון קידום אתרים אורגני SEO
מבוסס על 6 Google ביקורות.
MAORCOHEN054
MAORCOHEN054
03/11/2021
מקצועי, שירותי ביותר, זמין לכל שאלה ואדיב בצורה לא רגילה. עזר לי בבעיה שהייתה לי תוך דקות בודדות - אחרי שאני כבר כמה ימים מחפש תשובה ולא מוצא... מומלץ בחום!
ner online
ner online
27/10/2021
תומי גורדון בחור תותח ומקצועי. עזר לי לזנק קדימה בגוגל וענה לי להודעות גם בשעות לא נוחות לכל שאלה. ממליץ בחום
Keren Bashari
Keren Bashari
20/10/2021
תומי מדהים. נותן שירות מצויין, עונה על כל השאלות והכי חשוב מקצוען. ישר, אמין, הכל בשקיפות. ממליצה בחום על השירות שלו.
CLICK NGO Hod-Hasharon
CLICK NGO Hod-Hasharon
17/10/2021
Great quality, immediate and professional service. Highly recommend
Eden Gordon
Eden Gordon
14/10/2021
אחד השינויים שגוגל עשה גרם לירידה משמעותית של האתר שלי בהרבה מילות מפתח הייתי חייב בוסט רציני לאתר ופניתי לתומי. מאותו רגע, ידעתי שהאתר בידיים הכי טובות שיש. תומי במקצועיות הסביר את כל מה שצריך לעשות ושדרג מאוד את האתר ברמה הטכנית. מבחינת התוכן והטקסטים באתר קיבלתי ממנו הסברים מפורטים ופשוטים לשינויים הקטנים שחשוב לעשות. כל הליווי והקידום הרגישו לי מדויקים ומקצועיים, וגם - זה היה פשוט כיף - נהניתי מהעבודה עם תומי ולגמרי גם מהשיפור שהאתר עובר. גם גוגל אהב את השינוי! הביטויים שקודם ירדו והתרחקו ממש מהעמוד הראשון של התוצאות, חזרו פתאום למקומות הראשונים. האתר חזר להיות בעניינים ושוב קיבלתי יותר פניות ולקוחות. תומי, אלפי תודות על הכול ❤️ אלוף אתה
N-taharot uliel
N-taharot uliel
14/10/2021
לעבוד עם תומי זה ללא ספק חוויה . לא רק שמקבלים מקצועיות ברמות שלא רואים כל יום, זמינות וסובלנות! .... גם בן אדם מדהים אין לי ספק שכל לקוח שלו יגיד את זה

על הכותב:

תומי גורדון

תומי גורדון

היי, אני תומי.
אני מתכנת, מקדם אתרים (SEO) בגוגל אורגני ובונה אתרים כבר יותר מ-10 שנים.
עבדתי עם בעלי ובעלות עסקים בתחומים שונים - ביניהם: משרדי עו"ד (מסחרי, תעבורה, צווארון לבן), חנויות רהיטים, אסטרולוגיה, יוגה, רפואה סינית, קידום אתרים, חוגים וסדנאות, עיצוב פנים, אימון אישי - קואוצ'ינג, ייעוץ עסקי ופיננסי, הילינג אנרגטי, ריהוט גינה, חנויות שונות, מכללות וקורסים אונליין, תכשיטים תעשיות מתכת, ועוד...
ועזרתי להם לייצר ולבסס נוכחית באינטרנט שמתאימה לצרכים, לרצונות ולשאיפות שלהם - כדי למשוך יותר לקוחות מרוצים ומשלמים אל העסק, דרך האינטרנט.

א.נשים שקראו את המאמר הזה התעניינו גם במדריכים הבאים:

בדיקת מהירות אתר ושיפור ביצועים

למה חשוב שאתר יהיה מהיר? בואו נתחיל מזה שרוב האנשים היום גולשים דרך טלפונים ניידים. אפילו כשהם נמצאים בבית, אנשים מעדיפים הרבה פעמים לחפש משהו