خطاهای 404 پاسخی است که به سرور نشان میدهد صفحه درخواستی را پیدا نکرده است و دیر یا زود در هر سایتی پیش میآید. بیشتر صاحبان سایت وقتی 404 میبینند به این فکر میافتند که «سئوی من خراب شد»؛ در حالی که معمولاً وضعیت بسیار آرامتر از این است. آنچه واقعاً باید به آن توجه کرد این است که صفحات مهم به اشتباه 404 بدهند، و صفحاتی که باید 404 بدهند با برگرداندن 200 به soft 404 تبدیل شوند. در این نوشته توضیح میدهیم کدام 404ها مشکلساز هستند، کدام نیستند و چطور باید با آنها برخورد کرد.
خطای 404 چیست؟
404 (Not Found) کد وضعیت HTTP است که نشان میدهد سرور درخواست را فهمیده، اما در آن آدرس منبعی پیدا نکرده است. دلایل آن معمولاً اینها هستند:
- صفحه حذف شده یا آدرس آن (slug) تغییر کرده، اما تغییر مسیری اضافه نشده است.
- یک لینک داخلی یا خارجی با آدرس اشتباه نوشته شده است.
- هنگام انتقال سایت، برخی صفحات تطبیق داده نشدهاند.
- کاربر آدرس را دستی و با غلط تایپ کرده است.
آیا خطاهای 404 به سئو آسیب میزنند؟
موضع رسمی گوگل روشن است: برگرداندن 404 برای صفحاتی که وجود ندارند کاملاً طبیعی است و به عملکرد کلی رتبهبندی سایت شما آسیبی نمیزند. حذف شدن صفحهای که دیگر وجود ندارد از فهرست، رفتار مورد انتظار است. یعنی اگر در Search Console چند صد «Not found (404)» ببینید، این به تنهایی نشانه جریمه نیست.
مشکل زمانی شروع میشود که:
- صفحهای که ترافیک یا لینک دارد 404 شود؛ در این صورت ارزش آن هدر میرود.
- آدرسهایی که در نقشه سایت هستند یا با لینکهای داخلی نشان داده میشوند 404 بدهند؛ گوگل وقت تلف میکند و کاربر ناامید میشود.
- صفحات مهمی که باید کار کنند (محصول، دستهبندی، خدمات) به اشتباه 404 برگردانند؛ در این حالت مستقیماً ترافیک را از دست میدهید.
تفاوت مهم: هدف این نیست که همه خطاهای 404 از بین بروند. هدف پیدا کردن 404هایی است که نباید وجود داشته باشند: آدرسهایی که ارزش دارند، لینک دریافت میکنند یا از داخل خود سایت نشان داده میشوند.
soft 404 چیست؟
soft 404 یعنی صفحه به کاربر پیام «صفحه پیدا نشد» یا محتوای خالی نشان میدهد، اما سرور همچنان کد 200 (موفق) برمیگرداند. گوگل این موضوع را تشخیص میدهد و صفحه را از فهرست خارج میکند، اما چون این سیگنال گیجکننده است، بودجه خزش شما را هم مصرف میکند. نمونههای رایج:
- صفحه خطای سفارشی شما نوشته «صفحه پیدا نشد» اما کد وضعیت 200 است.
- دستهبندیای که محتوایش خالی شده یا صفحه نتایج جستوجوی «نتیجهای یافت نشد» با کد 200 برمیگردد.
- هزاران صفحه حذفشده بهصورت گروهی به صفحه اصلی هدایت شدهاند.
- صفحات چند جملهای و بیمعنا.
برای بررسی در سایت خودتان، مانند یک بازدیدکننده یک آدرس نامعتبر را وارد کنید و در تب Network ابزارهای توسعهدهنده مرورگر، کد پاسخ را بخوانید؛ اگر به جای 404 عدد 200 میبینید، مشکل همین است. در Search Console، گزارش «صفحات» بخشی با عنوان Soft 404 دارد که همین موارد را فهرست میکند. برای دیگر وضعیتهای این گزارش میتوانید به راهنمای مشکلات ایندکس گوگل ما مراجعه کنید.
404، 410 یا تغییر مسیر: کدام؟
| وضعیت | پاسخ درست | توضیح |
|---|---|---|
| صفحه به اشتباه حذف شده | بازگردانی (200) | بهترین کار این است که محتوا را در همان آدرس قبلی دوباره منتشر کنید |
| آدرس تغییر کرده، محتوای یکسان در جای جدید است | تغییر مسیر 301 | از آدرس قدیمی به جدید دقیقاً منتقل شود؛ تفاوتها را در مطلب تفاوت 301 و 302 ببینید |
| محتوا حذف شده، یک جایگزین بسیار نزدیک دارد | تغییر مسیر 301 | فقط به صفحهای که واقعاً مرتبط است هدایت کنید |
| محتوا حذف شده، معادلی ندارد | 404 یا 410 | پاسخ صادقانه همین است؛ همه را به صفحه اصلی هدایت نکنید |
| محتوا عمداً و بهطور دائمی حذف شده | 410 (Gone) | «دیگر وجود ندارد» را اعلام میکند؛ در عمل رویکرد گوگل به 404 بسیار نزدیک است |
تفاوت عملی بین 404 و 410 کم است؛ هر دو به گوگل میگویند که صفحه دیگر وجود ندارد. 410 این موضوع را کمی قطعیتر بیان میکند. نکته اصلی که باید به آن توجه کنید برگرداندن کد درست است و اینکه با یک تغییر مسیر نامربوط سیگنال را مبهم نکنید.
چطور خطاهای 404 را پیدا کنید؟
- Search Console ← صفحات: دلیلهای «Not found (404)» و «Soft 404» را باز کنید، به آدرسهای نمونه و تاریخ «اولین شناسایی» نگاه کنید.
- ابزار خزش: یک ابزار خزش دسکتاپی سایت شما را میگردد و لینکهای داخلیای که 404 میدهند را همراه صفحهای که از آن نمایش داده میشوند فهرست میکند. این خروجی برای رفع مشکل مفیدترین است.
- لاگهای سرور: آدرسهایی که بیشترین 404 را دریافت میکنند و اینکه از چه ارجاعی آمدهاند دیده میشود؛ لینکهای خارجی با غلطاملایی را اینجا پیدا میکنید.
- تحلیل: نمایشهای فیلترشده در GA4 بر اساس عنوان صفحه خطای سفارشی شما نشان میدهد کدام آدرسها خطا را به کاربر نشان میدهند.
- گزارشهای بکلینک: آدرسهایی را پیدا میکند که لینک دریافت میکنند اما 404 میدهند؛ معمولاً ارزشمندترین اصلاحات همینجا هستند. برای ارزش لینکها، به راهنمای بکلینک ما نگاه کنید.
فهرست پیداشده را در یک جدول جمع کنید: آدرس، منبع آن (لینک داخلی، لینک خارجی، نقشه سایت)، تعداد ترافیک یا لینکی که دریافت میکند، و تصمیم شما (بازگردانی، 301، رها کردن با 404). به این ترتیب در میان صدها آدرس گم نمیشوید و در تیم هم مشخص است که چه کسی چه کاری را انجام میدهد.
مراحل رفع خطا
- فهرست را اولویتبندی کنید. آدرسهایی را که لینک خارجی دارند، ترافیک آوردهاند یا در نقشه سایت هستند، در بالای فهرست قرار دهید.
- لینکهای داخلی را اصلاح کنید. هر لینکی که از داخل سایت شما به 404 میرود یک فرصت اصلاح است؛ آن را به آدرس درست جدید ببرید یا لینک را حذف کنید. راهنمای استراتژی لینکسازی داخلی ما در این زمینه راهنمای خوبی است.
- آدرسهایی را که معادل دارند با 301 هدایت کنید. از آدرس قدیمی به مرتبطترین آدرس جدید، دقیقاً منتقل شود.
- آدرسهایی را که معادل ندارند رها کنید. صفحاتی که واقعاً حذف شده و مشابهی ندارند باید 404 (یا 410) بمانند.
- نقشه سایت را تمیز کنید. آدرسهایی که 404 میدهند باید از نقشه سایت حذف شوند.
- soft 404ها را رفع کنید. صفحات خالی را یا با محتوای واقعی پر کنید یا به کد 404 تبدیل کنید.
- در Search Console تأیید کنید. در گروه مشکلی که رفع کردهاید، گزینه «اعتبارسنجی اصلاح» را استفاده کنید.
سناریوهای کاربردی
یک کد 404 در موقعیتهای مختلف تصمیمهای متفاوتی میطلبد. سه نمونه رایج:
- صفحه محصولی که تمام شده (تجارت الکترونیک): اگر محصول بهطور موقت تمام شده، صفحه را با کد 200 باز نگه دارید و اطلاع «موجود نیست» و محصولات مشابه را نشان دهید. اگر محصول بهطور دائمی حذف شده و یک مدل جدید بسیار نزدیک دارد، 301 مناسب است؛ در غیر این صورت 404/410.
- مطلب قدیمی وبلاگ: بهجای حذف مطلبی که کهنه شده، بهروزرسانی و تقویت آن معمولاً سودآورتر است. اگر ناچار به حذف هستید، برای مطلب جدید مرتبط 301 بدهید.
- صفحه کمپین: اگر صفحه کمپینی که تمام شده هر سال تکرار میشود، آدرس را حفظ کنید و صفحه را برای دوره بعد آماده نگه دارید. اگر یکباره بوده، هدایت به دستهبندی مشابه یا دادن 404 منطقی است.
وجه مشترک این نمونهها این است که هنگام تصمیمگیری این پرسش را بپرسید: «آیا هنوز بازدیدکننده، لینک یا تقاضای جستوجو به این آدرس میرسد؟» اگر جواب مثبت است، بهجای رها کردن آدرس، چیزی مفید به کاربر نشان دهید؛ اگر منفی است، 404 مشکلی ندارد. نکته عملی دیگر: هنگام منتشر کردن صفحه جدید، آدرس را از ابتدا خوب فکر کنید، چون تغییر دادن بعدی آدرس همیشه یک بدهی تغییر مسیر ایجاد میکند.
یک صفحه 404 خوب چگونه باید باشد؟
صفحه 404ای که مانع ترک سایت توسط کاربر شود، بیشتر به تجربه کاربری مربوط است، اما بهطور غیرمستقیم از سایت محافظت میکند. به این موارد توجه کنید:
- کد وضعیت حتماً 404 (یا 410) باشد؛ هر قدر متن صفحه زیبا باشد، کد آن نباید 200 باشد.
- طراحی و منوی بالای سایت را حفظ کنید تا بازدیدکننده بفهمد هنوز در سایت است.
- توضیح کوتاه و روشنی بنویسید: «صفحهای که دنبال آن هستید پیدا نشد؛ ممکن است منتقل یا حذف شده باشد.»
- یک کادر جستوجو، لینک صفحه اصلی و چند لینک به صفحات پربازدید قرار دهید.
- کاربرانی را که به این صفحه هدایت شدهاند، بهطور خودکار به صفحه اصلی نفرستید؛ این کار ممکن است soft 404 محسوب شود.
جلوگیری از خطاهای 404 جدید
جلوگیری از ایجاد خطاهای جدید به اندازه رفع خطاهای موجود مهم است:
- پیش از تغییر آدرس یک صفحه، تغییر مسیر را آماده کنید و همزمان با تغییر منتشر کنید.
- پیش از حذف محتوا، ارزش لینکهای خارجی و ترافیک آن صفحه را بررسی کنید.
- در سایتهای بزرگ یک مرحله «بررسی لینکهای خراب» به فرایند انتشار اضافه کنید؛ پس از تغییر قالب، CMS یا انتقال سایت، کل سایت را دوباره خزش کنید.
- در سایتهای چندزبانه، لینکهای متقابل بین نسخههای زبانی را هم بررسی کنید؛ جزئیات را در راهنمای hreflang ما ببینید.
- هر ماه روند تعداد 404 و soft 404 در Search Console را دنبال کنید؛ افزایش ناگهانی معمولاً نشانه خطای یک انتشار است.
در پایان، به دستگاه یا مرورگری که 404 در آن رخ میدهد هم نگاه کنید. خطاهایی که فقط در موبایل و فقط از یک قالب خاص میآیند نشانه مشکلی از قالب یا افزونهاند و با یک اصلاح میتوانند صدها آدرس را همزمان درست کنند.
پرسشهای متداول
آیا باید 404های Search Console را یکییکی رفع کنم؟
خیر. برگرداندن 404 برای صفحات حذفشدهای که ارزشی ندارند طبیعی است. بر اساس اهمیت، روی آدرسهایی تمرکز کنید که ارزش دارند و با لینک داخلی نشان داده میشوند.
آیا ارزش لینکهایی که به صفحات 404 میروند کاملاً از بین میرود؟
اگر لینک به آن صفحه میرود و صفحه وجود ندارد، ارزش در همان نقطه از دست میرود. دادن 301 به صفحهای مشابه، بخش بزرگی از این ارزش را بازمیگرداند.
آیا باید صفحه 404 خود را noindex کنم؟
لازم نیست. کد وضعیت درست (404) کافی است؛ گوگل این صفحات را از قبل وارد فهرست نمیکند.
بعد از رفع خطا، Search Console چه مدت طول میکشد تا بهروز شود؟
گزارش با بازخوانی آدرسها توسط گوگل بهروز میشود؛ این کار ممکن است از چند روز تا چند هفته طول بکشد.
نتیجهگیری
خطاهای 404 جریمه نیستند، بخش طبیعی یک سایت هستند؛ مهم این است که تشخیص دهید کدامیک واقعاً ضرر ایجاد میکند. آدرسهای ارزشمند را بازگردانید یا با 301 هدایت کنید، برای آدرسهای بیارزش صادقانه 404/410 بدهید، soft 404ها را از بین ببرید و لینکهای داخلی را تمیز نگه دارید. برای اینکه این روال بخشی از بررسی فنی شما شود، میتوانید از فهرست بررسی سئوی فنی ما استفاده کنید.