منو
به نقل از مقاله منتشر شده در search engine journal ، گوگل سه عامل را تایید کرده است که میتوانند خزش Googlebot را افزایش دهند. در اینجا نحوه استفاده از این دانش آورده شده است. گری ایلیس و لیزی ساسمن از گوگل، سه عامل را که باعث افزایش خزش گوگل بات می شوند، مورد بحث قرار دادند. در حالی که آنها نیاز به خزش مداوم را کم اهمیت جلوه دادند، اذعان کردند که راه هایی برای تشویق گوگل بات به بازدید مجدد از یک وب سایت وجود دارد.
به دنیایی از آموزش های هیجان انگیز و پردرآمد قدم بگذراید
محتوا در افزایش خزش بات های گوگل تاثیر بسزایی دارد. یکی از مسائلی که آنها در مورد آن صحبت کردند، کیفیت یک وب سایت بود. بسیاری از مردم از مشکل کشف شده اما ایندکس نشده رنج می برند و این گاهی اوقات ناشی از برخی شیوه های سئو است که مردم یاد گرفته اند و معتقدند که یک روش خوب است.
«من 25 سال است که سئو انجام می دهم و یک چیزی که همیشه ثابت مانده این است که بهترین شیوه های تعریف شده توسط صنعت عموماً سال ها عقب تر از کاری است که گوگل انجام می دهد. با این حال، اگر کسی متقاعد شده باشد که همه کارها را درست انجام می دهد، دیدن اینکه چه چیزی اشتباه است، سخت است.»
گری ایلیس در دقیقه 4:42 دلیلی برای افزایش خزش بات های گوگل (Crawl Frequency) را به اشتراک گذاشت و توضیح داد که یکی از عوامل محرک برای سطح بالای خزش، سیگنال‌های با کیفیت بالایی است که الگوریتمهای گوگل شناسایی می‌کنند.
… به طور کلی اگر محتوای یک سایت با کیفیت بالا باشد و مفید باشد و مردم به طور کلی آن را دوست داشته باشند، آنگاه گوگل‌بات – خب، گوگل – تمایل دارد که از آن سایت بیشتر خزش کند …
نکات ظریف زیادی در این گفته وجود دارد که ذکر نشده است، مثلاً سیگنال‌های با کیفیت بالا و مفید بودن که گوگل را تحریک میکند تا تصمیم به خزش مکرر بگیرد، چیست؟ خب، گوگل هرگز نمی‌گوید. اما می‌توانیم حدس بزنیم و موارد زیر برخی از حدس‌های آگاهانه من هستند.
ما می‌دانیم که حق ثبت اختراعاتی در مورد جستجوی برند وجود دارد که جستجوهای برند انجام شده توسط کاربران را به عنوان پیوندهای ضمنی شمارش میکند. برخی از مردم فکر می‌کنند که پیوندهای ضمنی به معنای ذکر برند هستند، اما ذکر برند قطعاً چیزی نیست که حق ثبت اختراع در مورد آن صحبت میکند.
به طور کلی باید دانست Crawl Budget چیست. درباره Crawl Budget یا همان بودجه خزش باید بگوییم که اگر گوگل یک صفحه از سایتی را Index نکند، آن صفحه هیچ رتبه ای دریافت نمی کند. پس اگر سایت شما به اندازه کافی بودجه خزش یا همان Crawl Budget را نداشته باشد، ممکن است شما در سایتتان صفحاتی داشته باشید که اصلا Index نمی شوند و ربات های گوگل به سراغ آن ها نمی روند.
ضمن اینکه باید بدانید Crawler چیست. crawler یا همان خزنده در واقع همان ربات موتور جست و جو است که در سرتاسر وب می چرخد تا سایت ها را به اصطلاح Crawl کند (در آن ها بخزد!) و آن ها را به فهرست مطالب موتور جست و جو اضافه کند.
البته در تفاوت crawler و spider باید گفت که این تفاوت crawler و spider در سئو سایت عملا وجود ندارد. در واقع هم Crawler و هم Spider در واقع همان ربات گوگل هستند که در طی صفحات وب می خزد و صفحات مختلف را برای Index شدن در موتور جست و جو کرال می کند.
پیش تر درباره “افزایش خزش بات های گوگل” صحبت شد. در ادامه باید گفت که حق اختراع Navboost وجود دارد که از سال 2004 تاکنون وجود داشته است. برخی افراد حق اختراع Navboost را با کلیک‌ها مرتبط می‌دانند، اما اگر حق اختراع اصلی از سال 2004 را مطالعه کنید، خواهید دید که هرگز به نرخ کلیک (CTR) اشاره نشده است.
در این حق اختراع، در مورد سیگنال‌های تعامل کاربر صحبت شده است. کلیک‌ها موضوع تحقیقات گسترده‌ای در اوایل دهه 2000 بودند، اما اگر مقالات تحقیقاتی و حق اختراع‌ها را بخوانید، به راحتی متوجه خواهید شد که منظور من چیست، وقتی که موضوع به این سادگی نیست که میمون روی وبسایت در SERPها کلیک میکند، گوگل رتبه آن را بالاتر می‌برد، میمون موز میگیرد.
به طور کلی، من فکر می‌کنم سیگنال‌هایی که نشان می‌دهند افراد یک سایت را مفید می‌دانند، میتوانند به رتبه‌بندی بهتر آن وبسایت کمک کنند. و گاهی اوقات این می‌تواند به معنای ارائه آنچه افراد انتظار دارند ببینند، به آنها باشد.
صاحبان سایت‌ها به من می‌گویند که گوگل در حال رتبه‌بندی مطالب بی‌ارزش است، و وقتی نگاهی می‌اندازم، میتوانم منظور آنها را درک کنم، سایت‌ها تا حدی بی‌ارزش هستند. اما از طرف دیگر، محتوا همان چیزی را به افراد می‌دهد که می‌خواهند، زیرا آنها واقعاً نمی‌دانند چگونه بین آنچه انتظار دارند ببینند و محتوای با کیفیت واقعی تفاوت قائل شوند (من این را الگوریتم Froot Loops می‌نامم).
الگوریتم Fruit Loops چیست؟ این یک اثر از تکیه Google بر سیگنال‌های رضایت کاربر برای قضاوت در مورد این است که آیا نتایج جستجوی آنها کاربران را راضی میکند یا خیر. در اینجا چیزی است که قبلا در مورد الگوریتم Fruit Loops گوگل منتشر کردم:
آیا تا به حال در راهروی غلات یک سوپرمارکت قدم زده‌اید و متوجه شده‌اید که چه تعداد غلات پر از شکر در قفسه‌ها وجود دارد؟ این رضایت کاربر در عمل است. مردم انتظار دارند غلات بمب شکری را در راهروی غلات خود ببینند و سوپرمارکت‌ها این قصد کاربر را برآورده می‌کنند.
من اغلب به Fruit Loops در راهروی غلات نگاه می‌کنم و فکر می‌کنم، چه کسی آن چیزها را می‌خورد؟ ظاهراً افراد زیادی این کار را می‌کنند، به همین دلیل است که جعبه روی قفسه سوپرمارکت است – زیرا مردم انتظار دارند آن را آنجا ببینند.
گوگل هم همین کار را میکند که سوپرمارکت انجام می‌دهد. گوگل نتایجی را نشان می‌دهد که به احتمال زیاد کاربران را راضی میکند، درست مانند آن راهروی غلات.
مثالی از یک سایت بی ارزش (garbagey) که کاربران را راضی میکند، یک سایت دستور پخت محبوب (که نامش را نمی‌برم) است که دستور پخت‌های آسان برای پخت را منتشر میکند که غیر اصیل هستند و از میانبرهایی مانند سوپ قارچ خامه‌ای کنسروی به عنوان یک ماده تشکیل دهنده استفاده میکند.
من در آشپزخانه کاملاً باتجربه هستم و این دستور پخت‌ها باعث ناراحتی من میشود. اما افرادی که می‌شناسم این سایت را دوست دارند زیرا آنها واقعاً چیز بهتری نمی‌دانند، آنها فقط یک دستور پخت آسان می‌خواهند.
آنچه که بحث مفید بودن واقعاً در مورد آن است، درک مخاطبان آنلاین و دادن آنچه که می‌خواهند به آنها است، که متفاوت از دادن آنچه که باید بخواهند به آنها است. درک آنچه که مردم می‌خواهند و دادن آن به آنها، به نظر من، همان چیزی است که جستجوگران آن را مفید خواهند یافت و زنگ سیگنال‌های مفید بودن گوگل را به صدا در خواهد آورد.
نکته دیگری که Illyes و Sassman به آن اشاره کردند که می‌تواند باعث افزایش خزش Googlebot شود، افزایش فراوانی انتشار محتوا است؛ مثلاً اگر سایتی به طور ناگهانی تعداد صفحاتی را که منتشر میکند افزایش دهد.
اما Illyes این موضوع را در متن یک سایت هک شده بیان کرد که به طور ناگهانی شروع به انتشار صفحات وب بیشتری کرده است. یک سایت هک شده که تعداد زیادی صفحه منتشر میکند باعث میشود Googlebot بیشتر بخزد.
اگر از این گفته کمی فاصله بگیریم و از دید کلی‌تری به آن نگاه کنیم، کاملاً واضح است که او اشاره میکند که افزایش فعالیت انتشار ممکن است باعث افزایش فعالیت خزش شود. این که سایت هک شده باعث خزش بیشتر Googlebot میشود نیست، بلکه افزایش انتشار محتوا است که باعث این موضوع میشود.
اینجاست که Gary به یک انفجار فعالیت انتشار به عنوان یک محرک Googlebot اشاره میکند:
…اما همچنین می‌تواند به این معنی باشد که، نمی‌دانم، سایت هک شده است. و سپس یک دسته از URLهای جدید وجود دارد که Googlebot در مورد آنها هیجان زده میشود و سپس بیرون می‌رود و سپس دیوانه‌وار می‌خزد.
نتیجه این است که تعداد زیادی صفحات جدید باعث میشود Googlebot هیجان زده شود و یک سایت را دیوانه‌وار بخزد. هیچ توضیح بیشتری لازم نیست، بیایید ادامه دهیم.
گری ایلیس در ادامه اشاره میکند که گوگل ممکن است کیفیت کلی سایت را مجدداً بررسی کند و این ممکن است باعث کاهش فرکانس خزش شود. در اینجا چیزی است که گری گفت:
… اگر ما زیاد خزش نمی‌کنیم یا به تدریج سرعت خزش وب سایت را کاهش می‌دهیم، این ممکن است نشانه‌ای از محتوای بی‌کیفیت باشد یا اینکه ما در مورد کیفیت سایت تجدید نظر کرده‌ایم.
منظور گری از اینکه گوگل در مورد کیفیت سایت تجدید نظر کرده است چیست؟ برداشت من از این موضوع این است که گاهی اوقات کیفیت کلی یک سایت می‌تواند کاهش یابد اگر بخش‌هایی از سایت وجود داشته باشد که مطابق با استاندارد کیفیت اصلی سایت نباشد.
به نظر من، بر اساس چیزهایی که در طول سال‌ها دیده‌ام، در نقطه‌ای ممکن است محتوای بی‌کیفیت شروع به سنگین‌تر شدن از محتوای خوب کند و بقیه سایت را نیز به پایین بکشاند. وقتی مردم به من می‌گویند که مشکل هم‌نوع‌خواری محتوا دارند، وقتی به آن نگاه می‌کنم، چیزی که واقعاً از آن رنج می‌برند، مشکل محتوای بی‌کیفیت در بخش دیگری از سایت است.
لیزی ساسمن در حدود دقیقه 6 می‌پرسد که اگر محتوای وبسایت ثابت باشد، نه بهبود یابد و نه بدتر شود، بلکه به سادگی تغییر نکند، آیا تأثیری وجود دارد؟
گری از دادن پاسخ خودداری کرد و به سادگی گفت که Googlebot برای بررسی اینکه آیا سایت تغییر کرده است یا خیر، بازمی‌گردد و می‌گوید که احتمالاً Googlebot ممکن است سرعت خزش را کاهش دهد اگر تغییری وجود نداشته باشد، اما این جمله را با گفتن اینکه او نمی‌داند، مشروط کرد.
چیزی که گفته نشده است اما مربوط به ثبات کیفیت محتوا است، این است که گاهی اوقات موضوع تغییر میکند و اگر محتوا ثابت باشد، ممکن است به طور خودکار ارتباط خود را از دست بدهد و شروع به از دست دادن رتبه‌بندی کند.
بنابراین ایده خوبی است که به طور منظم یک ممیزی محتوا انجام دهید تا ببینید آیا موضوع تغییر کرده است یا خیر و در صورت لزوم محتوا را بهروز کنید تا همچنان برای کاربران، خوانندگان و مصرف‌کنندگان هنگامی که در مورد یک موضوع گفتگو می‌کنند، مرتبط باشد.
همانطور که گری و لیزی به وضوح بیان کردند، هدف اصلی این نیست که گوگل‌بات را تحریک کنیم تا فقط به خاطر خزیدن به سایت ما سر بزند. نکته مهم این است که در مورد محتوای خود و ارتباط آن با کاربران فکر کنید.
آیا محتوا به یک موضوع می‌پردازد یا به یک کلمه کلیدی؟ سایتهایی که از استراتژی محتوای مبتنی بر کلمه کلیدی استفاده می‌کنند، همان‌هایی هستند که در به‌روزرسانی‌های الگوریتم اصلی 2024 دچار مشکل می‌شوند. استراتژی‌هایی که بر اساس موضوعات هستند، معمولاً محتوای بهتری تولید می‌کنند و از به‌روزرسانی‌های الگوریتم به راحتی عبور می‌کنند.
افزایش فعالیت انتشار محتوا می‌تواند باعث شود گوگل‌بات بیشتر به سایت شما سر بزند. صرف نظر از اینکه این افزایش به دلیل هک شدن سایت است یا به دلیل اینکه سایت با انرژی بیشتری به استراتژی انتشار محتوای خود می‌پردازد، یک برنامه منظم انتشار محتوا چیز خوبی است و همیشه چیز خوبی بوده است. در انتشار محتوا، هیچ چیز تنظیم کن و فراموش کن وجود ندارد.
کیفیت محتوا، بهروز بودن و ارتباط آن با کاربران در طول زمان یک ملاحظه مهم است و تضمین میکند که گوگل‌بات همچنان به سایت شما سر می‌زند. کاهش هر یک از این عوامل (کیفیت، بهروز بودن و ارتباط) می‌تواند بر خزیدن گوگل‌بات تأثیر بگذارد که خود نشانه‌ای از یک عامل مهم‌تر است، یعنی اینکه الگوریتم گوگل چگونه محتوا را ارزیابی میکند.
| نکته کلیدی | توضیحات |
| هدف اصلی | تولید محتوای با کیفیت و مرتبط با کاربران، نه فقط جلب توجه گوگل‌بات |
| استراتژی محتوا | تمرکز بر موضوعات به جای کلمات کلیدی برای تولید محتوای بهتر و جلوگیری از مشکلات در به‌روزرسانی‌های الگوریتم |
| افزایش فعالیت انتشار محتوا | انتشار منظم محتوا باعث میشود گوگل‌بات بیشتر به سایت سر بزند، اما نیاز به برنامه‌ریزی و نظارت مداوم دارد |
| پایداری کیفیت محتوا | حفظ کیفیت، بهروز بودن و ارتباط محتوا با کاربران در طول زمان برای جلب توجه مداوم گوگل‌بات و ارزیابی مثبت الگوریتم گوگل ضروری است |
به طور کلی می توان گفت افزایش خزش بات‌های گوگل به معنای افزایش دفعات بازدید و بررسی صفحات وبسایت شما توسط ربات‌های گوگل است. این امر می‌تواند منجر به ایندکس شدن سریعتر محتوای جدید، بهبود رتبه‌بندی در نتایج جستجو و در نهایت افزایش ترافیک ارگانیک به وبسایت شما شود.
برای دستیابی به این هدف، بهبود ساختار وبسایت، ایجاد محتوای باکیفیت و به‌روزرسانی مداوم آن، بهینه‌سازی سرعت سایت و استفاده از نقشه سایت XML از جمله اقدامات کلیدی هستند. در نتیجه، افزایش خزش بات‌های گوگل یک گام مهم در جهت بهبود عملکرد و دیده‌شدن وبسایت شما در فضای آنلاین است و می‌تواند تأثیر قابل توجهی در موفقیت کلی کسب‌وکار شما داشته باشد.
اگر سوالی یا پیشنهادی دارید میتوانید با ما در میان بگذارید.
انرژی گرفته با 🤍 از تیم طراحی سایت تابان شهر
