دلایل عدم نمایش سایت در نتایج گوگل + راه تشخیص و رفع مشکل

نمایش ندادن سایت در گوگل همیشه به یک دلیل اتفاق نمی‌افتد. ممکن است گوگل هنوز صفحات را کشف نکرده باشد، نتواند آن‌ها را Crawl کند، اجازه Index کردن نداشته باشد، URL دیگری را به‌عنوان نسخه اصلی انتخاب کرده باشد یا صفحه ایندکس شده باشد اما برای جست‌وجوی موردنظر رتبه کافی نداشته باشد.

به همین دلیل اولین قدم، تولید محتوای بیشتر یا خرید بک‌لینک نیست. ابتدا باید مشخص شود مشکل دقیقا در کدام مرحله قرار دارد: Discovery، Crawling، Indexing یا Ranking.

قبل از هر اقدام SEO مشخص کنید مشکل در کدام مرحله است: Discovery، Crawling، Indexing یا Ranking. راه‌حل هر مرحله متفاوت است و تولید محتوا یا Link Building نمی‌تواند یک مشکل فنی در Crawl یا Index را مستقیما برطرف کند.

چرا سایت در گوگل نمایش داده نمی‌شود؟ پاسخ کوتاه

مهم‌ترین دلایل عبارت‌اند از:

• سایت یا صفحه هنوز توسط گوگل کشف نشده است؛
• دسترسی Googlebot در robots.txt مسدود شده است؛
• صفحه دارای دستور noindex است؛
• صفحه خطای HTTP دارد یا Redirect اشتباه ایجاد شده است؛
• Google URL دیگری را Canonical تشخیص داده است؛
• Sitemap ناقص یا قدیمی است؛
• صفحات لینک داخلی مناسبی ندارند؛
• سایت تازه راه‌اندازی یا منتقل شده است؛
• محتوای صفحه بسیار مشابه صفحات دیگر است؛
• صفحه ایندکس شده اما برای Query مورد نظر رتبه نمی‌گیرد؛
• سایت Manual Action یا مشکل امنیتی دارد.

برای تشخیص درست، بهتر است هر URL مهم به‌صورت جداگانه در Google Search Console و URL Inspection بررسی شود؛ این ابزار نشان می‌دهد گوگل URL را شناخته، Crawl کرده و ایندکس کرده است یا خیر.

ابتدا تفاوت «ایندکس نشدن» و «رتبه نگرفتن» را مشخص کنید

این دو مشکل اغلب با یکدیگر اشتباه گرفته می‌شوند. اگر صفحه Index نشده باشد، اساسا امکان حضور عادی آن URL در نتایج Google Search وجود ندارد. اما ممکن است صفحه کاملا ایندکس شده باشد و فقط برای عبارت مورد نظر شما در نتایج قابل مشاهده نباشد. در این حالت مسئله دیگر Indexing نیست و باید مواردی مانند Search Intent، کیفیت محتوا، رقابت، ساختار سایت و ارتباط صفحه با Query بررسی شوند.

بنابراین قبل از هر اقدام، URL را در Search Console بررسی کنید. اگر وضعیت صفحه نشان دهد: «URL is not on Google» باید مشکل Indexing را پیدا کنید. اگر صفحه Index شده باشد، وارد مرحله تحلیل Ranking شوید. حتی وضعیت «URL is on Google» نیز تضمین نمی‌کند که صفحه برای هر جست‌وجویی نمایش داده شود.

برای شناخت تفاوت دیده‌شدن و جذب مشتری، مقالهٔ سئو چیست را بخوانید.

۱. گوگل هنوز سایت یا صفحه را پیدا نکرده است

این مشکل بیشتر برای سایت‌های تازه، صفحات جدید یا URL هایی اتفاق می‌افتد که هیچ مسیر مشخصی برای Discovery ندارند. گوگل معمولا صفحات را از طریق لینک‌ها، Sitemap و سایر سیگنال‌های موجود کشف می‌کند. اگر یک صفحه جدید ایجاد شده اما موارد زیر وجود داشته باشد، ممکن است کشف آن بیشتر زمان ببرد:

• هیچ لینک داخلی به آن وجود ندارد
• در Sitemap نیست
• از هیچ صفحه قابل Crawl دیگری لینک دریافت نکرده

برای یک URL مهم می‌توان از URL Inspection استفاده و پس از اطمینان از Indexable بودن صفحه، درخواست Indexing ثبت کرد. برای تعداد زیادی URL نیز Sitemap راه مناسب‌تری برای معرفی صفحات است. درخواست Indexing یا ثبت Sitemap تضمینی برای ایندکس شدن نیست.

۲. فایل robots.txt دسترسی Googlebot را مسدود کرده است

یکی از خطاهای فنی رایج این است که مسیرهای مهم سایت به اشتباه در robots.txt مسدود شده باشند. برای مثال ممکن است هنگام طراحی نسخه آزمایشی سایت، دسترسی موتورهای جست‌وجو بسته شده باشد و بعد از Launch این تنظیم حذف نشده باشد. اگر Googlebot اجازه Crawl یک URL را نداشته باشد، نمی‌تواند محتوای آن صفحه را بررسی کند.

نکته مهم این است که robots.txt ابزار مستقیم حذف URL از Index نیست. گوگل توضیح می‌دهد که ممکن است URL مسدودشده را در بعضی شرایط بشناسد و بدون Snippet در نتایج نشان دهد، حتی اگر محتوای آن را Crawl نکرده باشد. بنابراین اگر هدفتان جلوگیری از Index شدن یک صفحه است، نباید robots.txt را با noindex اشتباه بگیرید.

۳. صفحه به اشتباه noindex شده است

دستور noindex به موتور جست‌وجو می‌گوید صفحه نباید در Index قرار بگیرد. این دستور ممکن است از طریق Meta Robots یا HTTP Header اعمال شده باشد. این مشکل به‌خصوص بعد از طراحی مجدد سایت یا انتقال از Staging به Production دیده می‌شود. ممکن است تیم توسعه برای جلوگیری از ایندکس شدن نسخه آزمایشی noindex فعال کرده باشد اما بعد از Launch فراموش کند آن را حذف کند.

در URL Inspection می‌توان وضعیت Indexing allowed را بررسی کرد. اگر Google مقدار noindex را مشاهده کند، آن URL برای نمایش عادی در نتایج ایندکس نمی‌شود. یک نکته مهم دیگر این‌که اگر هم‌زمان Googlebot را با robots.txt مسدود کرده باشید، ممکن است اصلا نتواند صفحه را Crawl کند تا دستور noindex را ببیند.

robots.txt و noindex یک کار انجام نمی‌دهند. اگر هدف حذف یک URL از Index است، مسدودکردن Crawl می‌تواند باعث شود Google اصلا دستور noindex صفحه را نبیند.

۴. Sitemap سایت ناقص یا اشتباه است

XML Sitemap به گوگل کمک می‌کند URLهای مهم سایت را پیدا کند، به‌خصوص در سایت‌های بزرگ یا سایت‌هایی که مرتب صفحات جدید ایجاد می‌کنند. اما وجود URL در Sitemap به معنی تضمین Index شدن آن نیست. Sitemap باید URL هایی را معرفی کند که واقعا می‌خواهید در نتایج Search حضور داشته باشند.

قرار دادن URL های زیر در Sitemap معمولا نشانه معماری نامنظم است:

• صفحات Redirect شده
• URL های دارای noindex
• صفحات حذف‌شده
• Duplicate URL ها
• URL هایی که Canonical آن‌ها صفحه دیگری است

بهتر است Sitemap بازتابی از صفحات اصلی و Indexable سایت باشد.

Sitemap ابزار معرفی URLهاست، نه تضمین Indexing. بهتر است فقط URLهای اصلی، قابل ایندکس و Canonical سایت در Sitemap قرار بگیرند.

۵. صفحه لینک داخلی ندارد و به یک Orphan Page تبدیل شده است

صفحه‌ای که از هیچ بخش مهم سایت لینک دریافت نمی‌کند، ممکن است برای کاربران و موتورهای جست‌وجو به‌سختی قابل کشف باشد. این صفحات معمولا Orphan Page نامیده می‌شوند. فرض کنید یک شرکت صفحه جدیدی برای «طراحی سایت فروشگاهی» ایجاد کرده اما این صفحه:

• در منوی خدمات نیست
• از صفحه اصلی لینک ندارد
• از صفحه «طراحی سایت» نیز به آن لینک داده نشده است.

وجود URL در Sitemap مفید است، اما بهتر است صفحات مهم بخشی از معماری واقعی لینک داخلی سایت نیز باشند. Internal Linking علاوه بر Discovery به موتور جست‌وجو کمک می‌کند رابطه موضوعی صفحات را بهتر درک کند.

۶. صفحه Status Code مناسبی برنمی‌گرداند

URL مهمی که قرار است در نتایج ظاهر شود باید برای Googlebot قابل دسترسی باشد. مشکلاتی زیر می‌توانند Crawl و Indexing را مختل کنند:

• 404
• 410
• خطاهای 5xx
• Redirect Loop
• Redirect Chain های نامناسب

گاهی کاربر در مرورگر صفحه‌ای را مشاهده می‌کند اما Server رفتار متفاوتی برای Googlebot یا درخواست‌های دیگر دارد. به همین دلیل هنگام عیب‌یابی باید فقط ظاهر صفحه بررسی نشود؛ HTTP Response و نسخه‌ای که Google مشاهده می‌کند نیز اهمیت دارند.

۷. Redirect های سایت اشتباه تنظیم شده‌اند

بعد از Redesign یا تغییر URL Structure ممکن است URL های قبلی به صفحات اشتباه Redirect شوند. اگر تعداد زیادی URL بدون منطق مشخص به یک صفحه عمومی Redirect شوند، ساختار انتقال برای موتور جست‌وجو و کاربر مبهم می‌شود.

هنگام Migration بهتر است برای هر URL مهم قدیمی، نزدیک‌ترین URL جدید تعیین شود و Redirect ها قبل از Launch تست شوند. گوگل نیز در راهنمای Site Migration تاکید می‌کند که هنگام تغییر URL ها باید Mapping و Redirect ها با دقت انجام شوند.

۸. Canonical صفحه به URL دیگری اشاره می‌کند

Canonical مشخص می‌کند کدام URL را به‌عنوان نسخه ترجیحی یک محتوا در نظر می‌گیرید. اگر Canonical اشتباه باشد، ممکن است صفحه‌ای که انتظار دارید در نتایج نمایش داده شود به‌عنوان نسخه اصلی انتخاب نشود.

Google نیز همیشه مجبور نیست Canonical معرفی‌شده توسط سایت را بپذیرد و می‌تواند بر اساس مجموعه سیگنال‌ها URL دیگری را به‌عنوان Canonical انتخاب کند. در URL Inspection دو مورد را بررسی کنید:

• User-declared canonical
• Google-selected canonical

اگر با یکدیگر متفاوت هستند، باید علت Duplicate Content یا سیگنال‌های متناقض بررسی شود.

وجود Canonical در کد به معنی پذیرش قطعی آن توسط Google نیست. اگر User-declared canonical و Google-selected canonical متفاوت‌اند، Duplicate Content و سیگنال‌های متناقض میان URLها را بررسی کنید.

۹. چند URL محتوای بسیار مشابه دارند

گاهی سایت برای یک موضوع چند صفحه تقریبا یکسان ایجاد می‌کند. اگر چند صفحه تقریبا همان محتوا و همان Search Intent را پوشش دهند، گوگل ممکن است آن‌ها را به‌عنوان نسخه‌های مشابه ارزیابی و یکی را Canonical انتخاب کند.

Duplicate Content همیشه به معنای Penalty نیست، اما می‌تواند باعث شود همه URL هایی که صاحب سایت انتظار دارد به‌صورت مستقل ظاهر شوند، در نتایج نمایش داده نشوند. Google برای صفحات مشابه فرایند Canonicalization انجام می‌دهد و یک نسخه را به‌عنوان نماینده انتخاب می‌کند. راه‌حل معمولا تولید تعداد بیشتری صفحه مشابه نیست؛ باید مشخص شود آیا این URLها واقعا Intent مستقل دارند یا بهتر است ادغام شوند.

۱۰. سایت تازه راه‌اندازی شده است

راه‌اندازی سایت به این معنی نیست که تمام صفحات بلافاصله وارد Index گوگل می‌شوند. Discovery، Crawl و Indexing می‌توانند زمان‌بر باشند و سرعت آن‌ها به عواملی مانند ساختار سایت، تعداد URL ها و وضعیت Crawl بستگی دارد.

ثبت درخواست Indexing نیز تضمین نمی‌کند صفحه فورا وارد نتایج شود. Google در مستندات Search Console صراحتا توضیح می‌دهد که پردازش درخواست می‌تواند زمان ببرد و تضمینی برای Index شدن وجود ندارد. اگر سایت جدید است، ابتدا مسائل فنی را بررسی کنید و سپس فرصت کافی برای Crawl و پردازش صفحات در نظر بگیرید.

۱۱. سایت اخیرا Redesign یا Migration شده است

تغییر Domain، انتقال HTTP به HTTPS یا تغییر گسترده URLها می‌تواند باعث نوسان موقت در وضعیت Search شود. مشکل جدی زمانی ایجاد می‌شود که Migration به‌درستی برنامه‌ریزی نشده باشد. برای مثال:

• URL های قدیمی حذف شده‌اند
• Redirect وجود ندارد
• noindex نسخه Staging باقی مانده است
• robots.txt سایت جدید اشتباه است
• Internal Links ها هنوز به URL های قدیمی اشاره می‌کنند
• Canonical ها به نسخه قبلی اشاره دارند

Google توصیه می‌کند انتقال URLها با Mapping، Redirect و پایش Search Console انجام شود و تاکید دارد که پردازش کامل تغییرات می‌تواند زمان ببرد.

پیش‌نیازهای فنی جست‌وجو در مقالهٔ ارتباط طراحی سایت و سئو بررسی شده‌اند.

۱۲. محتوای صفحه ارزش مستقل کافی ندارد

ممکن است Google صفحه را Crawl کند اما تصمیم نگیرد آن URL را به‌صورت مستقل Index کند یا صفحه پس از Index شدن برای Query های مهم Visibility کمی داشته باشد. این مسئله مخصوصا زمانی دیده می‌شود که سایت تعداد زیادی صفحه بسیار مشابه ایجاد کرده باشد.

برای مثال ایجاد ده‌ها Landing Page با متن تقریبا یکسان و فقط تغییر نام شهر، خدمت یا Keyword لزوما باعث ایجاد ده‌ها صفحه ارزشمند نمی‌شود. هر صفحه باید دلیل مشخصی برای وجود مستقل داشته باشد.

از خود بپرسید: «اگر این صفحه حذف شود، کاربر چه اطلاعات یا پاسخ منحصربه‌فردی را از دست می‌دهد؟» اگر پاسخ مشخصی وجود ندارد، احتمالا باید معماری محتوا دوباره بررسی شود.

۱۳. سایت ایندکس شده اما برای Keyword مورد نظر رتبه ندارد

این یکی از مهم‌ترین تفاوت‌هاست. گاهی صاحب سایت می‌گوید: «سایت من در گوگل نیست.» اما URL در Index وجود دارد و فقط برای عبارتی مانند «طراحی سایت» در صفحات ابتدایی نتایج دیده نمی‌شود. در این شرایط مشکل می‌تواند به موارد دیگری مربوط باشد:

• Search Intent نامتناسب
• محتوای ضعیف‌تر از نیاز Query
• معماری محتوایی نامناسب
• رقابت بالا
• Internal Linking ضعیف
• صفحه اشتباهی برای Keyword هدف انتخاب شده است
• ارتباط موضوعی سایت هنوز کافی نیست

در این مرحله درخواست Indexing مجدد راه‌حل اصلی نیست. باید Ranking Problem را از Indexing Problem جدا کرد.

۱۴. Google صفحه دیگری از سایت را برای همان Keyword مناسب‌تر می‌داند

گاهی چند صفحه از یک سایت برای یک Query مشابه رقابت می‌کنند. برای مثال یک سایت ممکن است این صفحات را داشته باشد:

• «طراحی سایت چیست؟»
• «خدمات طراحی سایت»
• «شرکت طراحی سایت»
• «طراحی سایت حرفه‌ای»

اگر هدف هر صفحه مشخص نباشد، موتور جست‌وجو ممکن است صفحه‌ای غیر از URL مورد نظر شما را نمایش دهد یا عملکرد صفحات ناپایدار شود. این مسئله معمولا با افزایش استفاده از Exact Match Keyword حل نمی‌شود. باید برای هر صفحه مشخص شود:

• Search Intent چیست؟
• Keyword اصلی چیست؟
• نقش آن صفحه در Customer Journey چیست؟
• چه تفاوتی با صفحات نزدیک دارد؟

این کار به ایجاد Content Architecture شفاف‌تر کمک می‌کند.

۱۵. محتوای اصلی برای Google قابل دسترسی نیست

ممکن است ظاهر سایت برای کاربر مناسب باشد اما محتوای مهم به شکلی پیاده‌سازی شده باشد که دسترسی یا Rendering آن با مشکل مواجه شود. برای مثال محتوای اصلی ممکن است:

• فقط بعد از Login نمایش داده شود
• به Interaction خاصی وابسته باشد
• در اجرای JavaScript خطا داشته باشد
• از Resource هایی استفاده کند که قابل Load نیستند

URL Inspection امکان مشاهده اطلاعاتی درباره نسخه‌ای که Google دریافت کرده، منابع Load شده و Rendering صفحه را فراهم می‌کند.

در سایت‌های JavaScript-heavy بهتر است بررسی شود Google واقعا همان محتوای اصلی مورد نظر شما را مشاهده می‌کند یا خیر.

۱۶. Manual Action روی سایت اعمال شده است

در شرایط خاص ممکن است Google به دلیل نقض Spam Policies یک Manual Action روی بخشی از سایت یا تمام آن اعمال کند. Manual Action می‌تواند باعث کاهش Visibility یا حذف برخی صفحات از نتایج شود. این وضعیت را نباید حدس زد.

Search Console بخش مستقلی به نام Manual Actions دارد و در صورت وجود اقدام دستی، اطلاعات مربوط به آن در همان گزارش نمایش داده می‌شود. اگر گزارش مشکلی ندارد، نباید هر افت Ranking را «Penalty گوگل» نامید.

۱۷. سایت مشکل امنیتی یا هک دارد

هک، Malware، Phishing یا محتوای مخرب می‌تواند حضور سایت در Search و اعتماد کاربران را تحت تاثیر قرار دهد. Search Console برای این موارد گزارش Security Issues دارد.

Google ممکن است برای سایت‌هایی که تهدید امنیتی تشخیص داده می‌شوند هشدار نمایش دهد و در برخی شرایط دسترسی یا حضور آن‌ها در Search تحت تاثیر قرار گیرد. اگر افت ناگهانی و غیرعادی در Visibility مشاهده شده است، Security Issues نیز باید همراه با Manual Actions بررسی شود.

اگر بخش بزرگی از سایت به‌صورت ناگهانی از Search ناپدید شده است، گزارش‌های Manual Actions و Security Issues را مستقیما در Search Console بررسی کنید. هر افت شدید را نباید بدون بررسی «Penalty» فرض کرد، اما وجود مشکل امنیتی یا Manual Action نیازمند توجه جدی است.

از کجا بفهمیم مشکل دقیقا چیست؟

بهترین روش این است که عیب‌یابی را مرحله‌به‌مرحله انجام دهید.

مرحله اول: یک URL مهم را انتخاب کنید

به‌جای بررسی کل سایت، ابتدا یک صفحه‌ای را انتخاب کنید که مطمئن هستید باید در نتایج حضور داشته باشد.

مرحله دوم: URL Inspection را بررسی کنید

مشخص کنید:

• Google URL را می‌شناسد؟
• Crawl مجاز است؟
• Indexing مجاز است؟
• آخرین Crawl چه زمانی بوده؟
• Canonical انتخاب‌شده چیست؟
• URL Index شده است یا خیر؟

مرحله سوم: نسخه Live را تست کنید

اگر بعد از آخرین Crawl تغییراتی انجام داده‌اید، Live Test کمک می‌کند وضعیت فعلی صفحه را بررسی کنید.

مرحله چهارم: Page Indexing را بررسی کنید

اگر مشکل تعداد زیادی URL را درگیر کرده است، گزارش Page Indexing می‌تواند الگوهای مشترک را نشان دهد؛ برای مثال گروهی از صفحات که به یک دلیل Index نشده‌اند.

مرحله پنجم: Manual Actions و Security Issues را بررسی کنید

این مرحله مخصوصا زمانی اهمیت دارد که بخش زیادی از سایت به‌صورت ناگهانی از Search ناپدید شده باشد.

یک چارچوب سریع برای تشخیص مشکل

می‌توانید بر اساس وضعیت صفحه تصمیم بگیرید:

• وضعیت: URL برای Google ناشناخته است؛ احتمال اصلی: Discovery و Internal Linking
• وضعیت: Crawl مسدود است؛ احتمال اصلی: robots.txt
• وضعیت: Indexing مجاز نیست؛ احتمال اصلی: noindex
• وضعیت: صفحه Redirect می‌شود؛ احتمال اصلی: Redirect Configuration
• وضعیت: Google Canonical دیگری انتخاب کرده؛ احتمال اصلی: Duplicate/Canonical
• وضعیت: URL Index شده ولی دیده نمی‌شود؛ احتمال اصلی: Ranking/Search Intent
• وضعیت: بسیاری از صفحات ناگهان حذف شده‌اند؛ احتمال اصلی: Migration، Technical Issue، Manual/Security
• وضعیت: صفحه جدید است؛ احتمال اصلی: Discovery و زمان پردازش

این جدول نقطه شروع است؛ تشخیص نهایی باید با داده واقعی Search Console انجام شود.

اشتباه رایج: درخواست Indexing مداوم بدون حل مشکل

Request Indexing برای URL قابل ایندکس می‌تواند مفید باشد، اما درمان همه مشکلات نیست. اگر صفحه noindex باشد، Canonical آن اشتباه باشد، Server خطا بدهد یا محتوای صفحه ارزش مستقلی نداشته باشد، ارسال مکرر درخواست مشکل اصلی را حل نمی‌کند. اول باید علت عدم Index شدن اصلاح شود و سپس درخواست Recrawl منطقی است.

چک‌لیست بررسی سایتی که در گوگل دیده نمی‌شود

پیش از تغییر محتوا یا شروع Link Building، این موارد را بررسی کنید:

1. ۱آیا URL در Search Console شناخته شده است؟
2. ۲آیا Googlebot اجازه Crawl دارد؟
3. ۳آیا noindex وجود دارد؟
4. ۴آیا صفحه Status Code صحیح دارد؟
5. ۵آیا Redirect اشتباه وجود دارد؟
6. ۶آیا Canonical صحیح است؟
7. ۷آیا URL در Sitemap قرار دارد؟
8. ۸آیا صفحه Internal Link دریافت می‌کند؟
9. ۹آیا محتوای آن با صفحات دیگر بیش از حد مشابه است؟
10. ۱۰آیا Migration یا Redesign اخیر انجام شده است؟
11. ۱۱آیا Manual Action وجود دارد؟
12. ۱۲آیا Security Issue ثبت شده است؟
13. ۱۳اگر صفحه Index شده، آیا مشکل واقعی Ranking است؟

این ترتیب کمک می‌کند مشکلات فنی قبل از فعالیت‌های Off-page یا تولید محتوای بیشتر شناسایی شوند.

برای بازگرداندن سایت به نتایج گوگل از کجا شروع کنیم؟

اول مشخص کنید سایت واقعا ایندکس نشده یا فقط برای Keyword های مورد نظر رتبه ندارد. اگر مشکل Indexing است، URL Inspection، robots.txt، noindex، Canonical، Status Code، Sitemap و Internal Linking را بررسی کنید. اگر تعداد زیادی URL هم‌زمان مشکل دارند، Page Indexing Report و تغییرات اخیر سایت اهمیت بیشتری پیدا می‌کنند.

اگر صفحه در Index قرار دارد، از درخواست مداوم Indexing عبور کنید و سراغ Search Intent، کیفیت و تمایز محتوا، معماری صفحات و ارتباط داخلی سایت بروید. در بررسی فنی و SEO سایت در آوانا نیز همین ترتیب رعایت می‌شود: اول Crawl و Indexing، سپس Content و Ranking. بدون این تفکیک ممکن است برای حل یک مشکل فنی، بودجه روی تولید محتوا یا لینک‌سازی مصرف شود در حالی که Google اساسا به URL مورد نظر دسترسی مناسبی ندارد.

برای بررسی فنی صفحات و تدوین مسیر جذب مشتری از جست‌وجو، خدمات سئو آوانا را ببینید.

سوالات متداول درباره نمایش ندادن سایت در گوگل