سئو گزارش نمایه پوشش Google کاملاً خارق العاده است زیرا به SEO می دهد اطلاعاتی واضح تر درباره تصمیمات خزنده و نمایه سازی گوگل ارائه می دهد. از زمان رها شدن آن ، ما تقریباً هر روز در Go سئو برای تشخیص مشکلات فنی در مقیاس مشتریان خود استفاده سئو می کنیم.
در این گزارش سئو مختلفی وجود دارد که اطلاعاتی در مورد نحوه استفاده گوگل با محتوای سایت خود در اختیار وب مسترها می گذارد. در حالی که بسیاری از وضعیت ها زمینه های تصمیم گیری در مورد خزیدن و نمایه سازی Google را فراهم می کنند ، هنوز
صحیحبوتاکس در تهران
ناشناخته مانده است: "خزنده - در حال حاضر ایندکس نشده سئو ".از زمان مشاهده سئو "خزنده - در حال حاضر فهرست نشده" گزارش شده است ، ما از چندین صاحب سایت شنیده ایم که درباره معنای آن سؤال می کنند. یکی از مزایای کار در آژانس این است که بتوانیم جلوی داده های زیادی را بدست آوریم ، و از آنجا که ما این پیام را در چندین حساب مشاهده کرده ایم ، شروع به برداشتن روند از گزارش شده سئو کرده ایم.
بنابراین ، اساساً آنچه می دانیم این است که:
Google قادر به دسترسی به صفحه است
Google زمان خزیدن صفحه را به خود اختصاص داد
بعد از خزیدن ، گوگل تصمیم گرفت آن را در این فهرست درج نکند
کلید فهم این وضعیت ، فکر کردن به دلایلی است که گوگل "آگاهانه" در برابر فهرست بندی تصمیم می گیرد. ما می دانیم که Google مشکل پیدا کردن صفحه را ندارد ، اما به دلایلی احساس می کند کاربران از یافتن آن سود نمی برند.
این می تواند بسیار ناامید کننده باشد ، زیرا ممکن است نمی دانید چرا محتوای شما ایندکس نمی شود. در زیر برخی از متداول ترین دلایلی که تیم ما دیده است را توضیح می دهم تا دلیل این وضعیت اسرارآمیز روی وب سایت شما تأثیر بگذارد.
1. مثبت کاذب
اولویت: کم
اولین قدم ما این است که همیشه چندین چک URL از نشانه های پرچم دار در بخش "Crawled - در حال حاضر فهرست بندی نشده" را برای فهرست بندی انجام دهیم. پیدا کردن URL هایی که گزارش می شوند به عنوان حذف شده غیر معمول نیست ، اما به نظر می رسد که در فهرست Google قرار دارند.
به عنوان مثال ، اینجا URL وجود دارد که در این گزارش برای وب سایت ما در حال پرچم گذاری است: https://gofishdigital.com/meetup/
با این حال ، هنگام استفاده از یک اپراتور جستجوی سایت ، می توانیم ببینیم که URL در واقع در فهرست Google قرار دارد. شما می توانید این کار را با پیوست کردن متن "سایت:" قبل از URL انجام دهید.
اگر URL هایی را تحت این وضعیت مشاهده می کنید ، توصیه می کنم با استفاده از اپراتور جستجوی سایت ، تعیین کنید که URL ایندکس شده است یا خیر ، شروع کنید. بعضی اوقات ، اینها به نظر می رسد مثبت نادرست است.
راه حل: هیچ کاری نکنید! شما خوب هستید.
2. URL های خوراک RSS
اولویت: کم
این یکی از متداول ترین نمونه هایی است که می بینیم. اگر سایت شما از یک فید RSS استفاده می کند ، ممکن است URL هایی را پیدا کنید که در گزارش "خزنده - در حال حاضر فهرست نشده" در Google نمایش داده می شوند. بسیاری از این URL ها رشته "/ فید /" را به انتهای آن وصل می کنند. آنها می توانند در این گزارش مانند این ظاهر شوند:
Google این URL های خوراک RSS را که از صفحه اصلی مرتبط است پیدا می کند. آنها غالباً با استفاده از یک عنصر "rel = alternate" مرتبط می شوند. افزونه های وردپرس مانند Yoast می توانند به صورت خودکار این URL ها را تولید کنند.
راه حل: هیچ کاری نکنید! شما خوب هستید.
احتمالاً Google به صورت دلخواه انتخاب کرده است که این URL ها را فهرست نکند و به دلایل خوبی. اگر به URL فید RSS بروید ، یک سند XML مانند پرونده زیر را مشاهده خواهید کرد:
اگرچه این سند XML برای فیدهای RSS مفید است ، دیگر نیازی به گوگل نیست که آن را در این فهرست وارد کند. این امر یک تجربه بسیار ضعیف را ایجاد می کند زیرا این محتوا برای کاربران منظور نشده است.
3. URL های دارای صفحه
اولویت: کم
یکی دیگر از دلایل بسیار رایج رد محرومیت "خزنده - که در حال حاضر ایندکس نشده است" است. ما غالباً خواهیم دید که تعداد خوبی از URL های صفحه بندی شده در این گزارش ظاهر می شوند. در اینجا ما می توانیم برخی URL های مسدود شده را که از یک سایت تجارت الکترونیکی بسیار بزرگ ظاهر می شوند ، ببینیم:
راه حل: هیچ کاری نکنید! شما خوب هستید.
برای به دست آوردن یک جستجوی کامل در سایت ، Google باید از طریق URL های صفحه شده خزنده شود. این مسیر خود را به محتوا مانند صفحات طبقه بندی عمیق تر و یا صفحه توصیف محصول است. با این حال ، در حالی که Google از صفحه بندی به عنوان مسیری برای دسترسی به محتوا استفاده می کند ، لزوما نیازی به فهرست کردن URL های صفحه بندی شده خود نیست.
در هر صورت ، اطمینان حاصل کنید که هیچ کاری برای تأثیرگذاری بر خزیدن صفحه بندی فردی انجام نمی دهید. اطمینان حاصل کنید که تمام صفحه بندی شما حاوی یک برچسب کانونی مرجع است و عاری از هرگونه برچسب "nofollow" است. این صفحه بندی به عنوان یک راه برای Google می تواند صفحات اصلی دیگر را در سایت شما خزنده کند ، بنابراین شما مطمئناً می خواهید گوگل همچنان آن را ادامه دهد.
4- محصولات منقضی شده
اولویت: متوسط
هنگام چک کردن نقاط صفحات مجزا که در این گزارش ذکر شده است ، مشکلی که در مشتری مشاهده می کنیم URL هایی هستند که حاوی متنی هستند که محصولات "منقضی شده" یا "غیرقابل انبار" دارند. به خصوص در سایت های تجارت الکترونیکی ، به نظر می رسد که گوگل بررسی می کند که در دسترس بودن یک محصول خاص است. اگر تشخیص دهد محصولی در دسترس نیست ، سعی می کند آن محصول را از فهرست خارج کند.
آنجا که ممکن است Google نتواند محتوا را در ایندکس قرار دهد که کاربران قادر به خرید آن نیستند.
با این حال ، اگر این محصولات در واقع در سایت شما موجود باشند ، این می تواند به احتمال زیاد فرصت SEO را از دست بدهد. با حذف صفحات از فهرست ، محتوای شما به هیچ وجه فرصتی برای رتبه بندی نمی دهد.
علاوه بر این ، Google فقط محتوای قابل مشاهده را در صفحه بررسی نمی کند. مواردی وجود داشته است که هیچ علامتی در محتوای قابل مشاهده پیدا نکردیم که محصول در دسترس نباشد. با این حال ، هنگام بررسی داده های ساخت یافته ، می بینیم که ویژگی "در دسترس بودن" روی "OutOfStock" تنظیم شده است.
به نظر می رسد که گوگل سرنخ هایی راجع به محتوای قابل مشاهده و داده های ساخت یافته در مورد در دسترس بودن محصول خاص است. بنابراین ، مهم است که محتوا و طرح را بررسی کنید.
راه حل: در دسترس بودن موجودی خود را بررسی کنید.
اگر کالاهایی را پیدا می کنید که در واقع در این گزارش لیست شده اند ، می خواهید تمام محصولات خود را که ممکن است به اشتباه در دسترس نباشند ، بررسی کنید. یک خزیدن از سایت خود انجام دهید و از یک ابزار استخراج سفارشی مانند Screaming Frog's برای خراش دادن داده ها از صفحات محصول استفاده کنید.
به عنوان مثال ، اگر می خواهید تمام آدرسهای اینترنتی خود را با طرحواره "OutOfStock" در مقیاس مشاهده کنید ، می توانید "Regex" را روی: "در دسترس" قرار دهید: "
این: "class =" redactor-autoparser-object "> http://schema.org/OutOfStock" باید به طور خودکار تمام URL ها را با این خاصیت ضبط کند:
شما می توانید با استفاده از اکسل یا ابزارهای اطلاعاتی تجاری ، این لیست و مرجع متقابل را با داده های موجودی صادر کنید. این به سرعت باید به شما امکان دهد اختلاف بین داده های ساخت یافته در سایت خود و محصولاتی که در واقع موجود هستند را بیابید. همین روند را می توان تکرار کرد تا مواردی را ببینید که محتوای قابل مشاهده شما نشان می دهد که محصولات منقضی شده اند.
5. 301 تغییر سئو
اولویت: متوسط
یک نمونه جالب که ما در زیر این وضعیت مشاهده کردیم ، URL های مقصد صفحات هدایت شده است. اغلب ، خواهیم دید که Google در حال خزیدن URL مقصد است اما آن را در این فهرست درج نمی کند. با این حال ، با نگاهی به SERP ، متوجه می شویم که گوگل URL را هدایت می کند. از آنجا که URL هدایت شونده نمایه شده است ، URL مقصد به گزارش "Crawled - در حال حاضر فهرست نشده" منتقل می شود.
مسئله اینجاست که ممکن است Google هنوز این تغییر مسیر را تشخیص ندهد. در نتیجه ، URL مقصد را "کپی" می بیند زیرا هنوز URL را هدایت می کند.
راه حل: یک نقشه سایت موقت.xml ایجاد کنید.
اگر این اتفاق در تعداد زیادی آدرس اینترنتی رخ داده است ، ارزش دارد تا برای ارسال سیگنالهای تلفیقی قوی تر به Google قدمی بردارید. این مسئله می تواند نشان دهد که Google به موقع تغییر مسیرهای شما را تشخیص نمی دهد و منجر به سیگنال های محتوای تلفیقی نشده می شود.
یک گزینه ممکن است تنظیم "نقشه موقت" باشد. این یک نقشه سایت است که می توانید برای تسریع در خزیدن این URL های هدایت شونده ایجاد کنید. این استراتژی است که جان مولر قبلاً توصیه کرده است.
برای ایجاد یکی ، باید تغییر مسیرهایی را که در گذشته ایجاد کرده اید مهندس معکوس کنید:
صادر کردن همه URL ها از گزارش "خزنده - در حال حاضر فهرست نشده".
آنها را در اکسل با تغییر مسیرهایی که قبلاً تنظیم شده اند ، مطابقت دهید.
همه تغییر مسیرهایی که URL مقصد را در سطل "سئو - در حال حاضر فهرست نشده" پیدا کنید.
با استفاده از Screaming Frog یک sitemap.xml ساکن از این URL ها ایجاد کنید.
نقشه سایت را بارگذاری کنید و گزارش "خزنده - در حال حاضر فهرست نشده" را در کنسول جستجو مشاهده کنید.
هدف در اینجا این است که گوگل بتواند URL های موجود در نقشه موقت.xml را بیشتر از آنچه که در غیر این صورت بود ، خز کند. این امر منجر به ادغام سریعتر این تغییر مسیرها می شود.
6. محتوای نازک
اولویت: متوسط
بعضی اوقات می بینیم URL های موجود در این گزارش که از نظر محتوا بسیار نازک هستند. این صفحات ممکن است دارای تمامی عناصر فنی به درستی تنظیم شده باشد و حتی ممکن است به درستی با آنها ارتباط برقرار کند ، اما وقتی Google در این URL ها اجرا می شود ، محتوای واقعی بسیار کمی در صفحه وجود دارد. در زیر مثالی از صفحه دسته بندی محصولات که در آن متن منحصر به فرد بسیار کمی وجود دارد:
این صفحه لیست محصولات با عنوان "خزنده - در حال حاضر فهرست نشده" پرچم گذاری شده است. این ممکن است به دلیل محتوای بسیار نازک در صفحه باشد.
این صفحه احتمالاً بسیار نازک است که گوگل فکر کند مفید است یا محتوای کمی وجود دارد که گوگل آن را نسخه ای از صفحه دیگر تلقی می کند. نتیجه این است که گوگل محتوا را از فهرست حذف می کند.
در اینجا مثال دیگری وجود دارد: گوگل توانست یک صفحه مؤلفه توصیفی را در سایت Go Fish Digital (در شکل بالا) نشان دهد. اگرچه این محتوا برای سایت ما منحصر به فرد است ، احتمالاً Google باور نمی کند که توصیف تک جمله ای باید به عنوان یک صفحه فهرست بندی مجزا باشد.
یک بار دیگر ، Google به دلیل عدم کیفیت ، تصمیم اجرائی را برای حذف صفحه از ایندکس صادر کرده است.
راه حل: محتوای بیشتری اضافه کنید یا سیگنال های نمایه سازی را تنظیم کنید.
مراحل بعدی به ایندکس شدن این صفحات بستگی دارد.
اگر فکر می کنید که صفحه به طور قطع باید در این فهرست قرار بگیرد ، اضافه کردن ادامه مطالب را در نظر بگیرید
ورود این به Google کمک می کند تا صفحه را به عنوان تجربه بهتر به کاربران مشاهده کند.
اگر نمایه سازی برای محتوای یافت شده ضروری نباشد ، سؤال بزرگتر این خواهد بود که آیا باید اقدامات اضافی را انجام دهید تا به شدت علامت گذاری شود که نباید این محتوا فهرست بندی شود. گزارش "Crawled —سئو فهرست نشده" نشان می دهد که محتوای واجد شرایط برای نمایش در فهرست Google است ، اما Google تصمیم می گیرد که آن را لحاظ نکند.
صفحات کم کیفیت دیگری نیز وجود دارد که Google از این منطق استفاده نمی کند. برای یافتن محتوای ایندکس شده با همان معیارهای مثال بالا می توانید یک جستجوی "سایت" را انجام دهید. اگر متوجه شدید تعداد زیادی از این صفحات در فهرست نمایش داده می شوند ، ممکن است بخواهید ابتکارهای قوی تری را برای اطمینان از حذف این صفحات از فهرست مانند "برچسب" noindex "، خطای 404 یا حذف آنها از صفحه خود در نظر بگیرید. ساختار اتصال داخلی به طور کامل.
7. محتوای تکراری
اولویت: زیاد
هنگام ارزیابی این محرومیت در تعداد زیادی مشتری ، این بالاترین اولویتی است که ما دیده ایم. اگر Google محتوای شما را کپی کند ، ممکن است محتوا را خزنده کند اما انتخاب کند که آن را در فهرست قرار ندهد. این یکی از راه هایی است که گوگل از تکثیر SERP جلوگیری می کند. با حذف محتوای تکراری از فهرست ، Google اطمینان می دهد که کاربران از صفحات منحصر به فرد بیشتری برای تعامل با آنها برخوردار هستند. گاهی اوقات این گزارش این URL ها را با وضعیت "سئو " برچسب گذاری می کند ("کپی کردن ، Google اختیاری متفاوت از کاربر را انتخاب کرد"). اما همیشه هم به این صورت نیست.
این یک موضوع با اولویت بالا است ، به خصوص در بسیاری از سایت های تجارت الکترونیکی. صفحات کلیدی مانند صفحات توضیحات محصول اغلب توضیحات محصول مشابه یا مشابه بسیاری از نتایج دیگر در وب را شامل می شوند. اگر Google این موارد را خیلی به سایر صفحات داخلی یا خارجی تشخیص دهد ، ممکن است همه آنها را از این فهرست خارج کند.
راه حل: عناصر منحصر به فرد را به محتوای تکراری اضافه کنید.
اگر فکر می کنید این وضعیت در مورد سایت شما صدق می کند ، چگونه می توانید برای آن آزمایش کنید:
یک متن از متن تکراری بالقوه را بگیرید و آن را در Google جایگذاری کنید.
در سئو SERP ، رشته زیر را تا انتها اضافه کنید: "& num = 100". این 100 نتیجه برتر را به شما نشان می دهد.
از عملکرد "یافتن" مرورگر خود استفاده کنید تا ببینید نتیجه شما در 100 نتیجه برتر ظاهر می شود یا خیر. اگر اینگونه نباشد ، ممکن است نتیجه شما از فهرست penis extenders شود.
به URL SERP برگردید و رشته آخر را به انتهای آن اضافه کنید: "& filter = 0". این باید نتیجه فیلتر نشده Google شما را نشان دهد (با تشکر ، پاتریک استوکس ، برای نکته).
برای جستجوی آدرس اینترنتی خود از عملکرد "Find" استفاده کنید. اگر اکنون می بینید که صفحه شما در حال ظاهر شدن است ، این نشانگر خوبی است که محتوای شما از فهرست خارج می شود.
این فرآیند را برای چند URL با محتوای تکراری یا بسیار مشابه که در گزارش "Crawled - در حال حاضر فهرست بندی نشده" مشاهده می کنید ، تکرار کنید.
اگر به طور مداوم مشاهده می کنید که URL های شما از فهرست بهتر فیلتر نمی شوند ، باید برای منحصر به فرد تر کردن مطالب خود قدم بردارید.
در حالی که هیچ استانداردی برای رسیدن به این هدف وجود ندارد ، در اینجا چند گزینه وجود دارد:
بازنویسی مطالب برای منحصر به فرد تر شدن در صفحات دارای اولویت بالا.
برای تزریق خودکار محتوای منحصر به فرد بر روی صفحه ، از خصوصیات دینامیکی استفاده کنید.
مقادیر زیادی از محتوای غیرضروری دیگ بخار را حذف کنید. صفحات با متن بیشتر از متن منحصر به فرد ممکن است به عنوان تکراری در حال خواندن باشند.
اگر سایت شما به محتوای تولید شده توسط کاربر وابسته است ، به همکاران مطلع کنید که کلیه محتوای ارائه شده باید بی نظیر باشد. این ممکن است به جلوگیری از مواردی منجر شود که مشارکت کنندگان از همان محتوای در چندین صفحه یا دامنه استفاده می کنند.
8- محتوای شخصی
اولویت: زیاد
مواردی وجود دارد که خزندگان گوگل به محتوا دسترسی پیدا می کنند که نباید به آنها دسترسی داشته باشند. اگر Google در حال یافتن محیط های توسعه یافته است ، می تواند آن URL ها را در این گزارش درج کند. ما حتی نمونه هایی از Google را مشاهده کرده ایم که می تواند زیر دامنه یک مشتری خاص را برای بلیط های سئو تنظیم کند. این باعث خزیدن انفجاری سایت شد ، که بر URL هایی تمرکز می کرد که دیگر نباید برای فهرست بندی در نظر گرفته شوند.
مسئله اینجاست که خزیدن سایت Google متمرکز نشده است ، و این وقت را صرف خزیدن (و ایندکس کردن بالقوه) آدرس های اینترنتی می کند که منظور از جستجوگرها نیست. این می تواند نتایج گسترده ای برای بودجه خزیدن سایت داشته باشد.
راه حل: ابتکارات خزنده و نمایه سازی خود را تنظیم کنید.
این راه حل کاملاً به شرایط و دسترسی Google وابسته است. به طور معمول ، اولین کاری که می خواهید انجام دهید این است که چگونه Google قادر به کشف این آدرس های اینترنتی خصوصی است ، به خصوص اگر از طریق ساختار پیوند داخلی شما باشد.
یک صفحه خزیدن را از صفحه اصلی زیر دامنه اصلی خود شروع کنید و ببینید که آیا subdomains نامطلوب از طریق یک خزیدن استاندارد قادر به دسترسی به Screaming Frog هستند. اگر چنین است ، به راحتی می توان گفت که Googlebot ممکن است مسیرهای مشابه را پیدا کند. می خواهید هرگونه پیوند داخلی به این محتوا را حذف کنید تا دسترسی Google را قطع کنید.
مرحله بعدی بررسی وضعیت نمایه سازی URL هاست که باید از این امر جدا شوند.
گوگل به اندازه کافی همه آنها را از فهرست در امان نگه می دارد ، یا برخی از آنها در این فهرست گرفتار شده اند؟ اگر Google مقدار زیادی از این محتوا را فهرست بندی نکرده است ، ممکن است در نظر داشته باشید که پرونده robots.txt خود را تنظیم کنید تا فوراً خزیدن را مسدود کند. در غیر این صورت ، برچسب های "noindex" ، ضمائم ، و صفحات محافظت شده با رمز عبور همه در جدول هستند.
برای مثال در دنیای واقعی ، این مثالی است که ما در سایت مشتری توضیح داده ایم. این مشتری شبیه به یک سایت تجارت الکترونیکی است زیرا بسیاری از مطالب آنها از صفحات توضیحات محصول تشکیل شده است. با این حال ، این صفحات توضیحات محصول ، همه محتوای تولید شده توسط کاربر هستند.
در اصل ، اشخاص ثالث مجاز به ایجاد لیست در این سایت هستند. با این حال ، اشخاص ثالث اغلب توضیحات بسیار کوتاهی را به صفحات خود اضافه می کردند و در نتیجه محتوای نازک ایجاد می شد. مسئله ای که اغلب اتفاق می افتد این بود که این صفحات توصیف محصول تولید شده توسط کاربر در گزارش "خزنده - در حال حاضر فهرست نشده" گرفتار می شوند. این منجر به از دست رفته فرصت SEO شد زیرا صفحاتی که قادر به ایجاد ترافیک ارگانیک هستند به طور کامل از فهرست حذف شدند.
وقتی سئو مراحل بالا را طی کردیم ، متوجه شدیم که صفحات توضیحات محصول مشتری از نظر محتوای منحصر به فرد کاملاً نازک بوده است. صفحاتی که حذف می شدند فقط یک پاراگراف یا متن کمتری دارند. علاوه بر این ، بخش عمده محتوای درون صفحه متنی توصیف شده است که در همه این انواع صفحه وجود دارد. از آنجا که محتوای منحصر به فرد در صفحه وجود دارد ، محتوای قالب ممکن است باعث شده باشد Google نتواند این صفحات را به صورت تکراری مشاهده کند. نتیجه این بود که گوگل با استناد به وضعیت "خزنده - در حال حاضر فهرست نشده" این صفحات را از فهرست حذف سئو می کند.
سئو برای حل این مشکلات ، ما با مشتری کار کردیم تا مشخص کنیم کدام یک از محتوای طراحی شده نیازی به وجود در هر صفحه توضیحات محصول ندارد. ما توانستیم محتوای مورد نیاز غیر ضروری را از هزاران URL حذف کنیم. این نتیجه منجر به کاهش چشمگیر صفحات "Crawled - در حال حاضر فهرست نشده" شد زیرا Google شروع به دیدن هر صفحه به عنوان منحصر به فرد تر سئو می کند.