ایندکس نشدن سایت در گوگل

سرچ کنسول تیک سبز داده، سایت‌مپ ثبت شده، صفحه در URL Inspection می‌گوید «URL is on Google». ولی وقتی کلمه کلیدی را سرچ می‌کنی، خبری از سایت تو نیست. نه صفحه اول، نه صفحه دهم.

ایندکس نشدن سایت در گوگل برای بیشتر سئوکارها یک مشکل ساده با یک راه‌حل ساده نیست. گاهی صفحه اصلاً ایندکس نمی‌شود، گاهی ایندکس می‌شود ولی گوگل حاضر نیست آن را نشان بدهد. دلیل و راه‌حل این دو حالت هم فرق دارد.

من امیر بهارزاده هستم، مشاور دیجیتال مارکتینگ و متخصص سئوی نتیجه‌محور. حدود ۷ سال است روی پروژه‌های واقعی سئو کار می‌کنم و در همین سال‌ها بارها با سایت هایی روبه‌رو شدم که همه‌چیزش درست بود ولی ایندکس درست‌ و حسابی نمی‌گرفت. این مقاله ترتیبی است که خودم برای پیدا کردن و رفع مشکل جلو می‌روم؛ از تشخیص دقیق وضعیت تا راه‌حل‌هایی که در عمل جواب داده‌اند.

ایندکس نشدن سایت در گوگل یعنی دقیقاً چه؟ سه وضعیتی که قاطی می‌شوند

اولین اشتباه این است که همه مشکلات را زیر یک عنوان بریزیم. قبل از هر اقدامی مشخص کن با کدام وضعیت طرفی.

وضعیت اول: صفحه اصلاً ایندکس نشده

در URL Inspection پیام «URL is not on Google» می‌بینی. دلیلش معمولاً فنی است: robots.txt، تگ noindex، خطای سرور یا ریدایرکت اشتباه.

وضعیت دوم: گوگل صفحه را دیده ولی تصمیم به ایندکس نگرفته

در گزارش Pages این دو وضعیت را می‌بینی:

• Crawled – currently not indexed: گوگل صفحه را خزیده ولی هنوز قانع نشده ارزش ذخیره دارد.
• Discovered – currently not indexed: گوگل از وجود آدرس خبر دارد ولی هنوز سراغش نرفته.

اینجا معمولاً مشکل کیفیت، لینک‌دهی داخلی ضعیف یا اعتبار کم سایت در میان است، نه یک خطای فنی.

ایندکس نشدن سایت در گوگل | امیر بهارزاده

وضعیت سوم: ایندکس شده ولی دیده نمی‌شود

این همان حالتی است که خیلی از ما را کلافه می‌کند. صفحه ایندکس است، اما با هیچ کلمه‌ای جایی در ده نتیجه اول ندارد. این دیگر مشکل ایندکس نیست؛ مشکل رتبه‌گیری است و راه‌حلش هم متفاوت است. در بخش بعد بیشتر توضیح می‌دهم.

برای یک چک سریع هم می‌توانی در گوگل site:yourdomain.com/your-page را بزنی. گوگل خودش می‌گوید این عملگر نتیجه دقیقی نمی‌دهد، پس آن را فقط یک نشانه اولیه بدان و تصمیم را بر اساس URL Inspection بگیر.

تیک سبز سرچ کنسول یعنی ایندکس شده، نه یعنی دیده می‌شود

بخش زیادی از سوال‌هایی که سئوکارها درباره ایندکس نشدن سایت می‌پرسند از همین سوءتفاهم می‌آید. تیک سبز فقط می‌گوید گوگل صفحه را در پایگاه داده‌اش دارد. رتبه‌بندی مرحله جداگانه‌ای است.

چند سناریوی رایج که در پرسش‌های سئوکارها زیاد دیده می‌شود:

• صفحه دسته‌بندی یک فروشگاه با سرچ خود URL می‌آید، ولی با کلمه کلیدی نه. این یعنی ایندکس مشکلی ندارد و مسئله کیفیت و قدرت صفحه است.
• سایتی که فقط با سرچ نام برندش دیده می‌شود. گوگل سایت را می‌شناسد ولی برای هیچ عبارت غیربرندی ارزشی برایش قائل نیست.
• صفحاتی که در بینگ ایندکس شده‌اند ولی در گوگل نه. بینگ معیارهای ساده‌تری دارد. ایندکس شدن در بینگ ثابت نمی‌کند سایت از نظر فنی و کیفی برای گوگل هم آماده است.

راه‌حل این‌ها بیشتر بهبود کیفیت صفحه، ارتباط با قصد جستجو و تقویت لینک‌دهی است، نه زدن دوباره «Request Indexing».

ایندکس نشدن سایت در گوگل | امیر بهارزاده

قبل از هر کاری Crawl Stats را بخوان

اغلب اولین چیزی که می‌بینم این است که کسی ده بار Request Indexing زده ولی هیچ‌وقت نگاهی به رفتار ربات گوگل روی سایت نینداخته. Crawl Stats می‌گوید گوگل واقعاً با سایت تو چه می‌کند.

مسیرش: سرچ کنسول ← Settings ← Crawl stats ← Open report. این گزارش فقط برای پراپرتی سطح دامنه (Domain یا URL-prefix ریشه) نمایش داده می‌شود.

چهار بخش را دقیق نگاه کن:

• Total crawl requests: اگر تعداد درخواست‌های گوگل به سایتت پایین است یا ناگهان افت کرده، یعنی گوگل علاقه یا دسترسی‌اش را کم کرده.
• Average response time: زمان پاسخ بالا یعنی سرور کند است و گوگل تعداد کمتری صفحه می‌خزد.
• Host status: هرگونه خطای DNS، robots.txt fetch یا server connectivity اینجا مشخص می‌شود.
• By response: درصد بالای 4xx، 5xx یا ریدایرکت (301/302) در مقابل 200، یعنی بودجه خزش صرف چیزهایی می‌شود که به کار ایندکس نمی‌آیند.

همین گزارش بخش «By purpose» را هم دارد. اگر بیشتر خزش‌ها Refresh هستند و تقریباً هیچ Discovery ندیدی، یعنی گوگل صفحات قدیمی را دوباره چک می‌کند ولی صفحات جدید را پیدا نمی‌کند. نتیجه‌اش معمولاً مشکل لینک‌دهی داخلی یا سایت‌مپ است.

دلیل ایندکس نشدن سایت در گوگل | امیر بهارزاده

یک نکته: گوگل خودش می‌گوید بودجه خزش (Crawl Budget) برای سایت‌های بسیار بزرگ (چندده‌هزار صفحه به بالا) مسئله جدی است. اگر سایتت کوچک یا متوسط است، کندی سرور و کیفیت پایین بیشتر از «سقف بودجه» جلوی ایندکس را می‌گیرد.

دلایل فنی ایندکس نشدن صفحات سایت

اول این‌ها را چک کن. معمولاً یک ساعت وقت می‌گیرد و اگر مشکل فنی باشد، همین‌جا پیدایش می‌کنی.

robots.txt و تگ noindex

فایل /robots.txt را باز کن و ببین دستور Disallow: / برای همه یا برای Googlebot وجود دارد یا نه. بعد سورس صفحه را ببین و دنبال noindex بگرد. در وردپرس گزینه «Discourage search engines from indexing this site» (Settings ← Reading) و تنظیمات پلاگین‌های Yoast و Rank Math برای هر نوع محتوا و هر صفحه را هم بررسی کن. وقتی طراح سایت بعد از تحویل پروژه این تیک را برنمی‌دارد، رایج‌ترین ماجراست.

کنونیکال و محتوای تکراری فنی

اگر گوگل صفحه‌ای را «نسخه تکراری» بداند، خودش کنونیکال دیگری انتخاب می‌کند. در URL Inspection دو خط Google-selected canonical و User-declared canonical را مقایسه کن. اگر فرق دارند، همین سرنخ است. نسخه‌های www و بدون www، http و https، و پارامترهای فیلتر در فروشگاه‌ها منشأ معمول این مشکل‌اند.

ریدایرکت‌های اشتباه

لوپ ریدایرکت و زنجیره‌های طولانی ریدایرکت، خزنده را خسته و بودجه را هدر می‌دهند. خطای Redirect error در گزارش Pages نشانه مستقیم آن است. با Screaming Frog یا گزارش Crawl Stats زنجیره‌ها را پیدا کن و هر مسیر را به یک ریدایرکت مستقیم تبدیل کن.

سرور، هاست و در دسترس بودن

اگر سایت روی هاستی است که زیاد قطع و وصل می‌شود یا پاسخ‌دهی‌اش کند است، Crawl Stats همین را نشان می‌دهد. برای سایت‌های ایرانی یک نکته هم هست: وقتی شرایط شبکه بین ایران و بیرون دچار اختلال می‌شود، دسترسی ربات گوگل به هاست‌های داخل ایران می‌تواند مختل شود و خطاهای اتصال در Host status ظاهر می‌شوند. اگر چنین علامتی دیدی، مسئله زیرساخت است، نه محتوا.

رندر جاوااسکریپت و ریسپانسیو بودن

اگر محتوای اصلی صفحه فقط بعد از اجرای جاوااسکریپت ساخته می‌شود، گوگل ممکن است دیر یا ناقص آن را ببیند. در URL Inspection گزینه Test Live URL و سپس View tested page را بزن و ببین HTML رندرشده چه محتوایی دارد. از آنجا که گوگل ایندکس را بر پایه نسخه موبایل انجام می‌دهد، نسخه موبایل هم باید همان محتوای اصلی را داشته باشد.

بررسی وضعیت ایندکسینگ در گوگل | امیر بهارزاده

دلایل محتوایی: وقتی مشکل فنی نیست

اگر مطمئنی فنی همه‌چیز درست است و باز هم صفحه‌ای ایندکس نمی‌شود یا دیده نمی‌شود، معمولاً مشکل از خود محتواست. این‌ها چیزهایی است که بیشتر از همه می‌بینم:

۱. محتوای خام تولیدشده با هوش مصنوعی. مشکل خود هوش مصنوعی نیست؛ مشکل متنی است که با یک پرامپت ساخته و بدون ویرایش، مثال و تجربه واقعی منتشر شده. گوگل صراحتاً محتوای انبوه بدون ارزش افزوده را در سیاست‌های اسپم خودش می‌آورد. چنین صفحاتی معمولاً به Crawled – currently not indexed می‌رسند.

۲. کپی یا بازنویسی سطحی سایت‌های دیگر. وقتی ده سایت همین متن را دارند، گوگل دلیلی نمی‌بیند نسخه یازدهم را ایندکس کند.

۳. محتوای بی‌عمق. صفحه‌ای که همان چیزی را می‌گوید که ده نتیجه اول گفته‌اند، بدون هیچ زاویه یا اطلاعات تازه.

۴. محتوای تکراری داخلی. چند صفحه با یک قصد جستجو که با هم رقابت می‌کنند (Cannibalization). گوگل یکی را انتخاب می‌کند و بقیه را کنار می‌گذارد.

۵. ویدیو یا عنصر غیرمتنی به‌جای محتوای اصلی. در گزارش‌های سرچ کنسول پیام‌هایی مثل «Video is not the main content of the page» دیده می‌شود. اگر ویدیو تنها ارزش صفحه است، متن پشتیبان جدی لازم داری.

یک سوال ساده برای سنجش: «اگر این صفحه فردا از اینترنت حذف شود، کاربر چیزی از دست می‌دهد؟» اگر جواب نه است، گوگل هم همین را حس می‌کند.

لینک‌دهی داخلی: ابزاری که اغلب دست‌کم گرفته می‌شود

فرض کن صفحه‌ای مهم داری که ایندکس نمی‌شود. اولین چیزی که می‌پرسم این است که «از کجای سایت به آن لینک داده‌ای؟» جواب بیشتر وقت‌ها این است: «فقط از سایت‌مپ».

گوگل صفحاتی را جدی می‌گیرد که سایت خودش هم جدی گرفته باشد. اگر صفحه‌ای از منو، هدر یا فوتر و از صفحات مهم دیگر لینک نگرفته باشد، برای گوگل مهم به نظر نمی‌رسد.

چند اقدام عملی:

• لینک از جاهای پرقدرت سایت: صفحه هدف را از هدر یا فوتر و از صفحه اصلی لینک کن، با انکر تکست دقیق همان کلمه کلیدی. البته هدر و فوتر برای همه صفحات جا ندارد؛ این کار را فقط برای صفحات اولویت‌دار انجام بده.
• پیدا کردن صفحات یتیم: صفحاتی که هیچ لینک داخلی ندارند. با Screaming Frog یا Sitebulb خروجی بگیر و با لیست آدرس‌های سایت‌مپ مقایسه کن.
• عمق کلیک: صفحه‌ای که از صفحه اصلی بیشتر از سه کلیک فاصله دارد، احتمال دیده شدنش پایین می‌آید.
• حذف nofollow از لینک‌های داخلی مهم.

تاثیر لینک های داخلی در ایندکس گوگل | امیر بهارزاده

اگر پروژه‌ات سئوی محلی و سایت شرکتی است، همین منطق برای صفحات خدماتی هم صدق می‌کند. مثلاً در صفحه خدمات باید از مقالات مرتبط بلاگ لینک بگیرد تا هم گوگل به آن برسد و هم قدرتش بالا برود.

سئوکار وقتی مقابل یک صفحه ایندکس نشده ایستاده به «ترتیب اقدام» نیاز دارد. این ترتیبی است که من از سبک‌ترین و بی‌ریسک‌ترین به سنگین‌ترین می‌روم:

راه طلایی: تغییر URL و ریدایرکت ۳۰۱

این مرحله‌ای است که در تجربه خودم چند بار نتیجه داده. همان صفحه را با یک اسلاگ جدید منتشر می‌کنی و آدرس قبلی را با ریدایرکت ۳۰۱ به آدرس جدید می‌فرستی. مواردی داشته‌ایم که صفحه ماه‌ها گیر کرده بود و بعد از این کار ایندکس شد.

اما صادقانه بگویم: این روش رسمی و مستند گوگل نیست، بلکه یک تجربه میدانی است. چند شرط دارد:

• فقط برای صفحه‌ای استفاده کن که ایندکس نشده یا رتبه‌ای ندارد. صفحه‌ای که رتبه دارد را برای آزمایش دست نزن.
• ریدایرکت ۳۰۱ را مستقیم و بدون زنجیره بگذار.
• لینک‌های داخلی را به آدرس جدید اصلاح کن.
• سایت‌مپ را آپدیت کن و URL جدید را در URL Inspection تست و درخواست ایندکس بده.

و اگر ماه‌ها هیچ‌چیز جواب نداد؟

اگر هر شش مرحله را درست انجام داده‌ای و دامنه بعد از چند ماه هنوز نتیجه نمی‌دهد، ممکن است دامنه سابقه بدی داشته باشد (مثلاً پنالتی قبلی). تغییر دامنه آخرین کارتی است که باید بازی کنی، نه اولین. قبلش مطمئن شو مشکل واقعاً از خود دامنه است.

تاثیر سایت مپ در ایندکس گوگل | امیر بهارزاده

سوالات متداول

۱. چرا سایتم بعد از چند هفته هنوز ایندکس نشده؟
اگر سایت جدید است، طبیعی است که گوگل زمان بیشتری بگذارد. اما باید مطمئن شوی robots.txt و noindex مشکلی ندارند، سایت‌مپ ثبت شده و از صفحه اصلی به صفحات داخلی لینک وجود دارد. بعد از اطمینان از این‌ها، مشکل را در Crawl Stats و گزارش Pages جستجو کن.

۲. با اینکه در سرچ کنسول تیک سبز دارم، چرا در گوگل نمایش داده نمی‌شوم؟
تیک سبز یعنی ایندکس شده‌ای، نه رتبه گرفته‌ای. فرق ایندکس و رتبه‌بندی را در نظر بگیر و به‌جای Request Indexing روی کیفیت صفحه، قصد جستجو و لینک‌دهی کار کن.

۳. آیا زدن مکرر Request Indexing کمک می‌کند؟
نه. درخواست‌های پشت‌سرهم تأثیری در ایندکس ندارد و مشکل زیربنایی را حل نمی‌کند. بعد از یک درخواست، چند روز صبر کن و در همین فاصله علت اصلی را پیدا کن.

۴. تفاوت Crawled و Discovered – currently not indexed چیست؟
در Discovered گوگل فقط از آدرس خبر دارد و هنوز نرفته آن را بخزد؛ اغلب نشانه لینک داخلی ضعیف یا سرور کند است. در Crawled گوگل صفحه را دیده ولی نپسندیده؛ اغلب نشانه مشکل کیفیت یا تکراری بودن.

۵. آیا محتوای هوش مصنوعی باعث ایندکس نشدن می‌شود؟
خود هوش مصنوعی مشکل نیست. اگر متن بدون ویرایش، بدون تجربه و بدون ارزش افزوده منتشر شود، شانس ایندکس شدنش پایین می‌آید.

۶. کِی باید دامنه را عوض کرد؟
فقط بعد از اینکه مشکلات فنی و محتوایی را رفع کردی، لینک‌دهی را درست کردی، تغییر URL و ریدایرکت را امتحان کردی و ماه‌ها منتظر ماندی. دامنه آخرین گزینه است.

نتیجه‌گیری: ایندکس نشدن سایت در گوگل را مرحله‌ای حل کن

چیزی که در این سال‌ها بیشتر از همه یاد گرفتم این است که ایندکس نشدن سایت در گوگل را نباید با فرمول ثابت حل کرد. اول وضعیت را دقیق تشخیص بده (ایندکس نشده، خزیده ولی ایندکس نشده، یا ایندکس شده ولی دیده نمی‌شود)، بعد Crawl Stats را بخوان، بعد فنی را چک کن و آخر سر برو سراغ کیفیت محتوا و نردبان اقدامات.

اگر سایتت هنوز گیر کرده و می‌خواهی کسی نگاه تخصصی به گزارش‌هایش بیندازد، می‌توانی درباره خدمات سئوی سایت در اصفهان بیشتر بخوانی یا از طریق شماره تماس ۰۹۱۰۶۰۶۴۷۱۲ با ما در ارتباط باشی.