چطور خطای “Crawled – Currently Not Indexed” در سرچ کنسول رو رفع کنیم؟

خلاصه:

برای حل مشکل صفحاتی که در سرچ کنسول گوگل وضعیت Crawled – currently not indexed رو دارن، می‌تونید این قدم‌ها رو دنبال کنید:

• کیفیت محتوا رو بالا ببرید:
  مطمئن بشید که محتواتون باکیفیت، منحصر به فرد و برای کاربرها ارزشمنده. محتوا باید نیاز کاربر رو برآورده کنه و با مخاطب شما مرتبط باشه.
• صفحات رو دستی بررسی کنید:
  شاید صفحه شما قبلاً ایندکس بوده، ولی گوگل حالا اون رو حذف کرده. اگه اینطوره، صفحاتی که این مشکل رو دارن تک به تک بررسی کنید تا به احتمال زیاد دلیلش رو پیدا کنید.
• ساختار سایت رو بهینه و از لینک‌سازی داخلی استفاده کنید:
  مطمئن بشید که سایت شما ساختار واضح و مسیریابی (Navigation) درستی داره، چون معماری ضعیف سایت می‌تونه روی ایندکس شدن تأثیر بذاره. از صفحات مهم سایتتون به این محتوا لینک بدید تا به گوگل نشون بدید که این محتوا ارزشمنده.
• از شر محتوای تکراری خلاص بشید:
  گوگل از محتوای تکراری متنفره. اگه سایت شما درگیر این مشکله، حتماً اون رو حذف یا بهینه‌سازی کنید.
• درخواست ایندکس مجدد بدید:
  از ابزار URL Inspection در سرچ کنسول گوگل استفاده کنید تا از گوگل بخواید دوباره صفحه رو کرال (بررسی) کنه.
• از سایت‌مپ موقت یا اعتبارسنجی (Validate) URLها استفاده کنید:
  یک راهکار اینه که یک سایت‌مپ موقت فقط با URLهایی که ایندکس نشدن بسازید و اون رو در سرچ کنسول ثبت کنید. همچنین می‌تونید برای گزارش «Crawled – currently not indexed» درخواست اعتبارسنجی (Validate) بدید.

ابزار URL Inspection در سرچ کنسول گوگل به شما اجازه می‌ده وضعیت ایندکس یک صفحه رو با ارائه اطلاعات دقیق در مورد اون URL و مشکلات احتمالی بررسی کنید. برای یک تحلیل جامع‌تر، ابزار ZipTie.dev مکمل خوبی برای سرچ کنسول محسوب میشه. این ابزار وضعیت ایندکس چندین صفحه رو به صورت همزمان ردیابی می‌کنه و با ارائه گزارش‌های کاربردی و منظم، به شما کمک می‌کنه همیشه یک قدم از مشکلات جلوتر باشید.

اینطوری، سرچ کنسول گوگل ابزاری عالی برای چک کردن یک URL خاص میشه، در حالی که ZipTie.dev به شما در مورد ده‌ها هزار URL دید میده. به علاوه، با استفاده از ZipTie سریع متوجه میشید که کدوم URLها از ایندکس گوگل حذف شدن و به وضعیت «Crawled – currently not indexed» تغییر کردن.

تمرکز این مقاله روی تشخیص و بهبود یک URL خاص با استفاده از سرچ کنسول گوگل است.

منظور از وضعیت «Crawled – Currently Not Indexed» در سرچ کنسول چیست؟

وقتی در سرچ کنسول با وضعیت «Crawled — currently not indexed» روبرو می‌شید، معنیش اینه که گوگل صفحه شما رو کرال (بررسی) کرده، ولی اون رو ایندکس نکرده. به عبارت دیگه، این وضعیت نشون میده که گوگل از وجود صفحه شما باخبره، اما هنوز اون رو به فهرست (ایندکس) خودش اضافه نکرده. در نتیجه، این صفحه در نتایج جستجوی گوگل (SERP) نمایش داده نمیشه.

این وضعیت به دلایل مختلفی ممکنه پیش بیاد. این دلایل می‌تونه مربوط به کیفیت پایین محتوا، مشکلات فنی، یا حتی خودِ فرآیند ایندکس‌سازی گوگل باشه. فهمیدن دلیل این اتفاق، اولین قدم برای حل مشکله. با شناسایی و برطرف کردن عواملی که باعث این وضعیت میشن، می‌تونید شانس ایندکس شدن صفحاتتون و دیده شدنشون در نتایج جستجو رو به شدت بالا ببرید.

اما قبل از هر چیز…

قبل از اینکه ادامه بدیم، شما باید با فرآیند کرال (Crawl) و ایندکس (Index) آشنا بشید. خلاصه کلام اینکه، قبل از اینکه محتوای شما بتونه در نتایج موتورهای جستجو نمایش داده بشه، از سه مرحله کلیدی عبور می‌کنه: کرال (Crawling)، ایندکس (Indexing) و رتبه‌بندی (Ranking).

۱. کرال (Crawling)

موتورهای جستجو از ربات‌های خودکاری به نام خزنده (Crawler) یا عنکبوت (Spider) برای کشف صفحات جدید و آپدیت‌شده استفاده می‌کنن. این ربات‌ها لینک‌ها رو از صفحات شناخته‌شده به صفحات جدید دنبال می‌کنن و اینطوری محتوای وب رو بررسی و ثبت می‌کنن.

۲. ایندکس (Indexing)

بعد از مرحله کرال، موتور جستجو اطلاعاتی که پیدا کرده رو پردازش و ذخیره می‌کنه. اون محتوا، کلمات کلیدی و کاربردپذیری (Usability) صفحه رو تحلیل می‌کنه و بعد، صفحات ارزشمند رو به فهرست (ایندکس) خودش اضافه می‌کنه.

۳. رتبه‌بندی (Ranking)

وقتی یک کاربر چیزی رو جستجو می‌کنه، موتور جستجو صفحات مرتبط رو از ایندکس خودش فراخوانی می‌کنه و اون‌ها رو بر اساس فاکتورهایی مثل میزان ارتباط (Relevance)، اعتبار (Authority) و تجربه کاربری (User Experience) رتبه‌بندی می‌کنه. صفحاتی که رتبه بالاتری دارن، در بالای نتایج جستجو نمایش داده میشن و در نتیجه ترافیک بیشتری جذب می‌کنن.

اگه شما با پیغام خطای «Crawled – Currently Not Indexed» مواجه شدید، یعنی این فرآیند در مرحله «ایندکس کردن» متوقف شده. به دلایل نامشخصی، محتوای شما به مرحله «رتبه‌بندی» راه پیدا نکرده است.

چرا این اتفاق می‌افته؟ (دلایل بروز این خطا)

عوامل زیادی می‌تونن باعث بشن شما با وضعیت «Crawled – currently not indexed» در سرچ کنسول گوگل مواجه بشید. ممکنه گوگل به این نتیجه برسه که محتوای شما به اندازه کافی ارزشمند یا منحصر به فرد نیست که بخواد اون رو ایندکس کنه. محتوای تکراری یا محتوای ضعیف (Thin Content) با ارزش کم، می‌تونن به این وضعیت منجر بشن.

مشکلات فنی (Technical) هم می‌تونن جلوی ایندکس شدن صفحات شما توسط گوگل رو بگیرن. این مشکلات می‌تونن شامل خطاهای سرور، تنظیمات اشتباه فایل robots.txt، یا وجود تگ noindex باشن. یک وب‌سایت با ساختار ضعیف و نامنظم می‌تونه فهم و ایندکس کردن محتوا رو برای گوگل سخت کنه. نداشتن سلسله‌مراتب واضح و لینک‌سازی داخلی ناکافی هم می‌تونه در این مشکل نقش داشته باشه.

گاهی وقت‌ها هم گوگل فقط به زمان بیشتری برای ایندکس کردن محتوای جدید یا محتوایی که به تازگی آپدیت شده نیاز داره. این موضوع به خصوص برای وب‌سایت‌ها یا صفحات جدید صدق می‌کنه. با پرداختن به این عوامل، می‌تونید شانس خودتون رو برای ایندکس شدن صفحات و نمایش در نتایج جستجو بالا ببرید.

تغییر اولویت‌های گوگل در ایندکس کردن

اما یک جنبه دیگه هم برای کل این ماجرا وجود داره. به خاطر حجم عظیمی از محتوا که هر روز تولید میشه، گوگل خیلی سخت‌گیرتر شده و منابع کمتری رو برای پردازش صفحات جدید صرف می‌کنه. با ظهور هوش مصنوعی تولید محتوا (Generative AI)، هم‌پوشانی زیادی در محتواها به وجود اومده و همین باعث شده گوگل در انتخاب چیزهایی که ایندکس می‌کنه، وسواس بیشتری به خرج بده. آپدیت‌های اخیر، از جمله آپدیت محتوای مفید (Helpful Content Update) و آپدیت هسته مارس ۲۰۲۴ (March 2024 Core Update)، این تغییر رویه رو به خوبی نشون میدن.

این یعنی شما باید این سؤال مهم رو از خودتون بپرسید:

اصلاً چرا گوگل باید صفحه شما رو ایندکس کنه؟

با توجه به حجم بالای محتوای مشابه که در اینترنت وجود داره، گوگل به یک دلیل قانع‌کننده نیاز داره تا صفحه شما رو ایندکس کنه. محتوای شما باید به این دلایل برجسته باشه:

• اصالت و منحصر به فرد بودن (Originality): محتوای منحصر به فردی که دیدگاه‌ها یا اطلاعات جدیدی ارائه میده، شانس بیشتری برای ایندکس شدن داره.
• ارزش (Value): محتوایی که واقعاً به کاربرها کمک می‌کنه یا بهشون اطلاعات مفیدی میده، در اولویت گوگل قرار می‌گیره.
• کیفیت (Quality): الگوریتم‌های گوگل طرفدار محتوای باکیفیت و خوش‌نگارش هستن که ساختار و خوانایی خوبی داشته باشه.

چطور خطای “Crawled – Currently Not Indexed” رو رفع کنیم؟

گوگل جواب شفافی نمیده که چرا یک صفحه خاص کرال شده ولی ایندکس نه، اما چند دلیل احتمالی برای این وضعیت وجود داره.

از مراحل زیر استفاده کنید تا یاد بگیرید چطور این مشکل رو حل کنید.

قدم اول: محتوای باکیفیت ارائه بدید

مشکلات محتوایی، دلیل اصلی گزارش «Crawled – currently not indexed» هستن.

به عنوان صاحب یک وب‌سایت، شما باید مطمئن بشید که صفحاتتون محتوای باکیفیتی دارن. بررسی کنید که آیا محتوای شما نیاز کاربر رو برآورده می‌کنه یا نه و در صورت نیاز، محتوای خوب و باکیفیت بهش اضافه کنید. Google Search Central لیستی از سؤالات رو ارائه کرده که به شما کمک می‌کنه ارزش محتواتون رو بسنجید:

علاوه بر این، می‌تونید از نکات مربوط به محتوای باکیفیت در راهنمای ارزیابان کیفیت گوگل (Quality Raters Guidelines) استفاده کنید. اگرچه این سند عمدتاً برای خودِ ارزیاب‌های کیفیت گوگل نوشته شده، اما مدیران وب‌سایت‌ها (وبمسترها) می‌تونن ازش برای گرفتن ایده‌هایی جهت بهبود سایتشون استفاده کنن.

یک جنبه دیگه که باید بهش توجه کنید، بهینه‌سازی محتوای تولید شده توسط کاربر (User-Generated Content) در سایت شماست.

فرض کنید شما یک انجمن (فروم) دارید و یک نفر سؤالی می‌پرسه. ممکنه در آینده جواب‌های ارزشمند زیادی برای این سؤال ثبت بشه، اما در لحظه‌ای که گوگل صفحه رو کرال می‌کنه، هیچ جوابی وجود نداشته. در این حالت، گوگل ممکنه اون صفحه رو به عنوان محتوای بی‌کیفیت دسته‌بندی کنه.

یادتون باشه که گوگل نمی‌تونه تمام صفحات موجود در اینترنت رو ایندکس کنه. فضای ذخیره‌سازی اون محدوده، برای همین مجبوره محتواهای بی‌کیفیت رو فیلتر کنه.

قدم دوم: صفحات درگیر رو دستی بررسی کنید

ممکنه یک URL به این دلیل وضعیت «Crawled – currently not indexed» رو گرفته باشه که در گذشته ایندکس بوده، اما گوگل به مرور زمان تصمیم گرفته اون رو از ایندکس خارج کنه (Deindex).

اگه می‌پرسید چرا، دلایلش احتمالاً این‌هاست:

• با یک محتوای باکیفیت‌تر جایگزین شده (همونطور که گری ایلیس از گوگل در توییتر اشاره کرد).
• تحت تأثیر یک الگوریتم جدید قرار گرفته.
• به خاطر یک باگ از سمت خود گوگل بوده. برای مثال، سایت Search Engine Land یک بار از ایندکس خارج شد چون گوگل به اشتباه فکر کرده بود که سایت هک شده.

اینطور فکر نکنید که وقتی یک صفحه ایندکس شد، دیگه کاری باهاش ندارید. گوگل ممکنه در طول زمان نحوه ارزیابی محتوای شما رو تغییر بده.

شاید بخشی از محتوای شما به خاطر یک خطا حذف شده باشه. یا مثلاً توضیحات یک محصول تغییر کرده و نسخه جدیدش با استانداردهای گوگل همخوانی نداره. این اتفاق‌ها بیشتر از چیزی که فکر می‌کنید رایجه.

محتوای خودتون رو چک کنید و نسخه‌های اخیرش رو با هم مقایسه کنید – اگه چیزی تغییر کرده، باید بدونید. ممکنه همین تغییر دلیل حذف شدن از ایندکس باشه. صفحاتتون رو مدام زیر نظر داشته باشید و در صورت نیاز، بهبودشون بدید.

بعد از اینکه مشکلات رو برطرف کردید، می‌تونید URLهای بررسی شده رو دوباره در سرچ کنسول گوگل ثبت کنید تا گوگل سریع‌تر متوجه تغییرات بشه.

قدم سوم: روی ساختار سایتتون کار کنید و لینک‌سازی داخلی رو بهبود بدید

یک دلیل دیگه که ممکنه صفحات شما در گزارش «crawled – currently not indexed» گیر کرده باشن، ساختار ضعیف سایت (Poor Site Structure) هست.

معماری خوب وب‌سایت، کلید اصلی برای بالا بردن شانس ایندکس شدنه. این کار به ربات‌های موتور جستجو اجازه میده محتوای شما رو راحت‌تر پیدا کنن و ارتباط بین صفحات رو بهتر بفهمن.

به همین دلیله که داشتن یک معماری خوب برای سایت و اطمینان از وجود لینک‌های داخلی به تمام صفحاتی که می‌خواید ایندکس بشن، حیاتیه.

بیایید این سناریو رو تصور کنیم: شما یک صفحه خیلی باکیفیت دارید، اما گوگل فقط از طریق سایت‌مپ می‌تونه اون رو پیدا کنه.

گوگل ممکنه نگاهی به صفحه بندازه و اون رو کرال کنه، اما چون هیچ لینک داخلی بهش وجود نداره، فرض می‌کنه که این صفحه نسبت به بقیه صفحات ارزش کمتری داره. هیچ اطلاعات ساختاری یا معنایی برای کمک به ارزیابی صفحه وجود نداره. این می‌تونه یکی از دلایلی باشه که گوگل تصمیم گرفته روی صفحات دیگه تمرکز کنه و این یکی رو بعد از کرال کردن، ایندکس نکنه.

قدم چهارم: محتوای تکراری (Duplicate Content) رو محدود کنید

محتوای تکراری یکی دیگه از مشکلاتیه که باعث میشه گوگل ایندکس کردن صفحات شما رو متوقف کنه.

شما باید مطمئن بشید که صفحاتی که می‌سازید، اورجینال و منحصر به فرد هستن.

گوگل می‌خواد به کاربرهاش محتوای خاص و ارزشمند نشون بده. به همین دلیله که وقتی چند صفحه کاملاً یا تقریباً شبیه به هم باشن، ممکنه فقط یکی از اون‌ها رو ایندکس کنه.

متأسفانه، گاهی اوقات محتوای تکراری اجتناب‌ناپذیره (مثلاً وقتی یک نسخه دسکتاپ و یک نسخه موبایل از یک صفحه دارید). شما کنترل کاملی روی چیزی که در نتایج جستجو نمایش داده میشه ندارید، اما می‌تونید به گوگل سرنخ‌هایی در مورد نسخه اصلی بدید.

اگه متوجه شدید که تعداد زیادی محتوای تکراری در سایتتون ایندکس شده، این موارد رو بررسی کنید:

• تگ‌های کنونیکال (Canonical tags): این تگ‌های HTML به موتورهای جستجو میگن که کدوم نسخه، نسخه اصلیه.
• لینک‌های داخلی (Internal links): مطمئن بشید که لینک‌های داخلی به محتوای اصلی شما اشاره می‌کنن. گوگل ممکنه از این به عنوان یک نشونه برای تشخیص صفحه مهم‌تر استفاده کنه.
• سایت‌مپ‌های XML: مطمئن بشید که فقط نسخه کنونیکال (اصلی) در سایت‌مپ شما قرار داره.

اما یادتون باشه که این‌ها فقط سرنخ هستن و گوگل مجبور نیست ازشون پیروی کنه.

اگه گوگل تگ کنونیکال شما رو نادیده بگیره، می‌تونید این موضوع رو از طریق وضعیت «Duplicate, Google chose different canonical than user» در سرچ کنسول بفهمید.

برای مثال، آدام جنت، یک فریلنسر سئو، یک کیس جالب رو با جامعه سئو به اشتراک گذاشت. صفحه او وضعیت «Crawled – currently not indexed» گرفته بود چون گوگل فکر می‌کرد اون یک صفحه تکراریه.

مشخص نیست چرا گوگل به جای استفاده از وضعیت مخصوص محتوای تکراری، از «Crawled – Currently Not Indexed» استفاده می‌کنه. یک توضیح احتمالی اینه که این وضعیت بعداً، یعنی وقتی گوگل تصمیم گرفت وضعیت مناسب‌تری برای صفحه پیدا کنه، تغییر می‌کنه.

گزینه دیگه می‌تونه یک باگ در گزارش‌دهی باشه. ممکنه گوگل موقع اختصاص دادن وضعیت‌ها اشتباه کرده باشه. متأسفانه، این وضعیت کار رو سخت‌تر می‌کنه، چون «Crawled – Currently Not Indexed» به اندازه وضعیت مخصوص محتوای تکراری به شما اطلاعات نمیده.

قدم پنجم: به صورت دستی برای URLهای خاص درخواست کرال مجدد بدید

اگه همه این مشکلات رو برطرف کردید، می‌تونید صفحاتتون رو برای ایندکس شدن دوباره ثبت کنید.

برای این کار، به ابزار URL inspection برید، آدرس URL رو وارد کنید و دکمه Request Indexing رو بزنید.

یک راه دوم و خودکارتر هم وجود داره. به مسیر Indexing → Pages → “Crawled – Currently Not Indexed” برید. گزینه All known pages رو انتخاب کنید و روی Validate Fix کلیک کنید.

وقتی گوگل درخواست شما رو قبول کنه، می‌تونید ببینید که فرآیند اعتبارسنجی از چه زمانی شروع شده.

قدم ششم: از سایت‌مپ موقت استفاده کنید

گاهی اوقات، صفحاتی مثل URLهای مقصد در ریدایرکت‌ها (Redirects) در گزارش «Crawled – Currently Not Indexed» ظاهر میشن. این مشکل به خاطر ریدایرکت‌های اشتباه نیست، بلکه به این مرتبطه که گوگل هر چند وقت یکبار سایت شما رو کرال می‌کنه. ممکنه متوجه بشید که گوگل این URLهای مقصد رو کرال می‌کنه، اما اون‌ها رو به ایندکس خودش اضافه نمی‌کنه.

یک راه‌حل بالقوه، ساختن یک فایل sitemap.xml موقت هست. اول تمام URLها رو از گزارش «Crawled – Currently Not Indexed» استخراج کنید و با استفاده از اکسل یا گوگل شیت، اون‌ها رو با ریدایرکت‌های موجود هماهنگ کنید.

بعد، یک سایت‌مپ بسازید (که می‌تونید با ابزارهایی مثل XML Sitemaps این کار رو انجام بدید) و اون رو در داشبورد سرچ کنسول گوگل خودتون آپلود کنید.

نکات و راهکارهای تکمیلی

این راهکارهای تکمیلی سئو رو هم در نظر بگیرید تا شانس ایندکس شدن صفحاتتون رو بالا ببرید و عملکرد کلی سایتتون رو بهتر کنید.

• به طور منظم محتوا منتشر کنید تا سایتتون رو مرتبط و ارزشمند نگه دارید. محتوای تازه می‌تونه بازدیدکننده‌های بیشتری جذب کنه و گوگل رو تشویق کنه که سایت شما رو بیشتر و سریع‌تر کرال کنه. علاوه بر این، باید به صورت دوره‌ای محتوای قدیمی رو بازبینی و آپدیت کنید تا مطمئن بشید که دقیق و مفید باقی می‌مونه.
• سعی کنید تعامل (Engagement) رو در سایتتون بالا ببرید. کاربران درگیر (Engaged users) می‌تونن به گوگل این سیگنال رو بدن که محتوای شما ارزشمنده. محتواتون رو در شبکه‌های اجتماعی به اشتراک بذارید تا بیشتر دیده بشه و ترافیک جذب کنه. سیگنال‌های اجتماعی می‌تونن به طور غیرمستقیم روی سئوی شما تأثیر مثبت بذارن.
• مطمئن بشید که سایت شما روی دستگاه‌های موبایل عملکرد عالی داره. فرآیندهای ایندکس گوگل بر اساس نسخه موبایل سایت‌ها انجام میشه (Mobile-First Indexing)، بنابراین داشتن یک تجربه کاربری خوب در موبایل کاملاً حیاتیه. سرعت بارگذاری سایتتون رو بهینه کنید. صفحات سریع‌تر، تجربه کاربری بهتری برای مخاطب می‌سازن و می‌تونن رتبه شما در نتایج جستجو رو هم بهبود بدن.
• برای وب‌سایت‌های معتبر در حوزه کاری خودتون، پست مهمان (Guest Post) بنویسید. بک‌لینک‌های باکیفیت از سایت‌های معتبر می‌تونن اعتبار سایت شما رو به شدت افزایش بدن. محتوای ارزشمندی تولید کنید که دیگران مشتاق باشن بهش لینک بدن. بک‌لینک‌های طبیعی می‌تونن اعتبار (Authority) و وضعیت ایندکس سایت شما رو بهبود بدن.

تفاوت «Crawled – currently not indexed» با «Discovered – currently not indexed»

وضعیت «Crawled – Currently Not Indexed» معمولاً با یک مشکل ایندکس دیگه در گزارش Page indexing سرچ کنسول اشتباه گرفته میشه: «Discovered – currently not indexed» (کشف شده – در حال حاضر ایندکس نشده).

هر دو وضعیت نشون میدن که صفحه ایندکس نشده. اما، در مورد «Crawled…» گوگل قبلاً از صفحه بازدید کرده. در حالی که در مورد «Discovered…» گوگل از وجود URL خبر داره، اما به دلایلی هنوز اون رو کرال نکرده.

بعضی از دلایل این دو وضعیت ممکنه شبیه هم باشن، مثل صفحات بی‌کیفیت و مشکلات ساختار لینک‌سازی داخلی. اما وقتی وضعیت «Discovered…» رو می‌بینید، باید بررسی کنید که چرا گوگل نتونسته یا نخواسته به صفحه دسترسی پیدا کنه. برای مثال، این وضعیت می‌تونه به مشکلات مربوط به کیفیت کلی کل وب‌سایت، مشکلات بودجه خزش (Crawl Budget)، یا بار زیاد روی سرور اشاره داشته باشه.

سوالات متداول

«Crawled but Not Indexed» یعنی چی؟
این وضعیت یعنی گوگل صفحه شما رو پیدا و بررسی (کرال) کرده، اما تصمیم گرفته اون رو در نتایج جستجوی خودش قرار نده (ایندکس نکنه). در نتیجه، این صفحه در نتایج جستجو نمایش داده نمیشه.

چرا بعضی از صفحات کرال شده، ایندکس نمیشن؟
صفحات ممکنه به دلایلی مثل کیفیت پایین محتوا، اطلاعات تکراری، یا نداشتن لینک‌های داخلی کافی و موارد دیگه ایندکس نشن.

چطور بفهمم صفحاتم کرال شده ولی ایندکس نه؟
از گزارش Coverage (یا Page indexing) در سرچ کنسول گوگل یا از ابزار URL Inspection برای تحلیل یک URL خاص استفاده کنید.

داشتن صفحات کرال شده ولی ایندکس نشده چه تأثیری داره؟
این موضوع می‌تونه روی سئو تأثیر منفی بذاره، چون به گوگل این سیگنال رو میده که این صفحات احتمالاً ارزش یا ارتباط کافی ندارن. وقتی صفحه ایندکس نیست، یعنی هیچ ترافیکی هم از طریق گوگل دریافت نمی‌کنه.

چطور مشکلات صفحاتی که کرال شده ولی ایندکس نشده رو برطرف کنم؟
کیفیت محتوا رو بررسی کنید، دنبال آپدیت‌های جدید باشید، ساختار و لینک‌سازی داخلی رو بهینه کنید و در نهایت درخواست ایندکس مجدد بدید.

بهترین روش‌ها برای اطمینان از ایندکس شدن بهتر صفحات وب چیست؟
محتوای منحصر به فرد بسازید، ساختار سایت رو منظم نگه دارید، از لینک‌سازی داخلی مؤثر استفاده کنید و مشکلات محتوای تکراری رو حل کنید.

آیا ممکنه یک صفحه بعداً دوباره کرال و ایندکس بشه؟
بله، با ایجاد بهبودها و ثبت مجدد از طریق ابزار URL Inspection، می‌تونید شانس ایندکس شدن دوباره صفحه رو بالا ببرید.

سرعت سایت چه نقشی در ایندکس شدن داره؟
سرعت بالای سایت تجربه کاربری رو بهتر می‌کنه و می‌تونه به طور غیرمستقیم روی قابلیت ایندکس شدن صفحه تأثیر بذاره، اما محتوای باکیفیت همچنان فاکتور اصلی و حیاتیه.

مشکلات محتوای تکراری چطور روی ایندکس تأثیر میذاره؟
محتوای تکراری می‌تونه باعث بشه گوگل فقط یک نسخه از محتوا رو ایندکس کنه و بقیه رو نادیده بگیره، مگر اینکه از استراتژی‌هایی مثل تگ کنونیکال استفاده بشه.

آیا ابزاری برای کمک به فهمیدن مشکلات کرال و ایندکس وجود داره؟
بله، ابزارهایی مثل سرچ کنسول گوگل و ZipTie.dev اطلاعات و دیدگاه‌های مختلفی در مورد مشکلات کرال و ایندکس ارائه میدن.

صفحات با محتوای ضعیف (Thin Content) چی هستن و چه ارتباطی با ایندکس دارن؟
صفحات با محتوای ضعیف، محتوای قابل توجه و ارزشمندی ندارن و به همین دلیل، احتمال ایندکس شدنشون خیلی کمه.

چطور شانس ایندکس شدن یک صفحه داینامیک رو بالا ببرم؟
از کیفیت محتوا، لینک‌سازی داخلی مؤثر، ساختار URL بهینه و حداقل بودن پارامترهای URL اطمینان حاصل کنید.

چه ارتباطی بین ثبت سایت‌مپ و ایندکس شدن وجود داره؟
سایت‌مپ‌ها به گوگل کمک می‌کنن صفحات رو کشف کنه، اما ایندکس شدن رو تضمین نمی‌کنن. اون‌ها ابزاری برای کشف بهینه‌تر محتوا هستن.

آیا تغییر در صفحات موجود می‌تونه وضعیت ایندکس اون‌ها رو تغییر بده؟
بله، بهبودهای قابل توجه می‌تونه گوگل رو ترغیب کنه که در مورد وضعیت ایندکس صفحه تجدید نظر کنه، هرچند ایندکس شدن هیچوقت تضمینی نیست.

جمع‌بندی

خطای «Crawled – Currently Not Indexed» عمدتاً با کیفیت صفحه مرتبطه، اما در واقعیت می‌تونه به مشکلات خیلی بیشتری مثل معماری گیج‌کننده سایت یا محتوای تکراری هم اشاره داشته باشه.

این‌ها نکات کلیدی هستن که به شما کمک می‌کنن با وضعیت «Crawled – Currently Not Indexed» کنار بیایید:

• محتوای منحصر به فرد و ارزشمند به صفحاتتون اضافه کنید. بعد از این کار، اون URLها رو در سرچ کنسول گوگل ثبت کنید تا گوگل سریع‌تر متوجه تغییرات بشه.
• معماری سایتتون رو بازبینی کنید و مطمئن بشید که به صفحات مهمتون لینک داخلی داده شده.
• تصمیم بگیرید که کدوم صفحات باید و کدوم نباید ایندکس بشن تا به گوگل کمک کنید URLهای ارزشمندتر رو در اولویت قرار بده.
• از سایت‌مپ موقت استفاده کنید (این روش برای حل مشکل URLهای مقصد در ریدایرکت‌های ۳۰۱ که توسط گوگل کرال شده ولی هنوز در ایندکس نیستن، خیلی مفیده).

اگه برای رفع خطای “Crawled – currently not indexed” در سایتتون به کمک نیاز دارید، خدمات سئو تکنیکال رادزاد دقیقاً همون چیزیه که دنبالش هستید. تیم ما آماده‌ست تا سایت شما رو به طور کامل بررسی و این مشکل رو به شکل ریشه‌ای برای همیشه حل کنه.