راهکارهای ایندکس صفحات در گوگل + سریعترین راه برای ایندکس شدن صفحات جدید

ایندکس صفحات در گوگل یکی از مهم ترین بخش ها در سایت بعد از انتشار یک صفحه (پست یا محصول یا هرچی) به حساب میاد که باید بهش توجه کنیم. تو این مقاله میخوام درباره این موضوع و به سریعترین راه برای ایندکس شدن صفحات جدید پس در ادامه همراه من باشین.

فرقی نمیکنه که سایت جدید باشه یا مدتی از راه اندای اون گذشته باشه، مهم اینه که صفحات ما توسط گوگل شناسایی بشه و توی نتایج بیاره بالا. اما گاهی اوقات به خاطر اشکالاتی که سایت ما داره این اتفاق به درستی نمیوفته و ممکنه یه مطلب خیلی ساده روزها و حتی هفته ها طول بکشه تا توسط گوگل شناسایی بشه.

حالا چه اتفاق هایی ممکنه این روند رو به تعویق بندازه؟ تو این آموزش سئو میخوام موارد مختلفی که ممکنه سایت شما رو اشکال بیندازه بررسی کنم و به صورت ریشه ای اون رو باهم بررسی کنیم. قبل از اینکه این مطلب رو بخونین پیشنهاد میکنم حتما اصطلاحات سئو رو مطالعه کنین که با اصطلاحاتی که توی صفحه گفته میشه آشنا باشین.

بررسی ایندکس صفحات در گوگل

اولین کاری که باید انجام بدید، اینه که صفحات سایت رو توی گوگل بررسی کنین که ایندکس شده یا نه؟! حالا چطور میتونیم این کار رو انجام بدیم؟ کافیه دستور زیر رو توی گوگل سرچ کنین:

site:Your Site Address

مثلا وقتی این دستور رو سرچ کنین، تعداد صفحات ایندکس شده از سایت من رو میاره:

site:jalaltorabi.com

اگه صفحات سایت رو در نتایج آورد، یعنی (۱) گوگل به صفحات سایت شما دسترسی داره و باید بریم سر وقت اشکالاتی که ممکنه توی ایندکس وجود داشته باشه. ولی (۲) اگه با سرچ کردن دستور تنها در نتایج یک گزینه مثل شکل زیر اومد باید به فنی سایت توجه کنین.

برای دسترسی راحت شما دو تا شماره کنار هرکدوم گذاشتم که تو بخش مشکلات ایندکس بدونین اگه هرکدوم رو آورد، سروقت چه چیزایی برید و تو وقتتون صرفه جویی بشه.

مهم ترین مشکلات در ایندکس صفحات در گوگل

قبل از اینکه بریم سر راه حل ها بهتره اول مشکلاتی که ممکنه تو پیدا کردن صفحه توسط گوگل پیش بیاد رو باهم بررسی کنیم و بعد بریم سراغ راه حل ها:

No Index بودن قسمتی یا کل صفحات

مربوط به (۱) و (۲)

بحث نوایندکس بودن توی گوگل ممکنه بنابه دلایل مختلفی باشه. مهم ترین دلیلی که توی سایت های وردپرسی چنین مشکلی پیش میاد اینه که توی بخش ” تنظیمات – خواندن “ تیک ” نمایش به موتورهای جستجو “ خورده باشه. دقت کنین که این تیک نباید فعال باشه و گاها پیش میاد که به خاطر عدم توجه به متنی که جلوی چک باکس نوشته شده، اکثر طراحان سایت یا مدیران سایت این تیک رو میزنن و فکر میکنن که باید فعال باشه تا گوگل سایتشون رو بشناسه…! در صورتیکه فعال بودن تیک به گوگل و سایر موتورهای جستجو تگ Noindex رو توی Header سایت نشون میده و از خوانش صفحات منصرف میشن.

دستورات اشتباه در فایل Robots.txt

مربوط به (۲)

فایل Robots.txt یه فایل متنی ساده هست که دستور خوانش یا عدم خوانش صفحات و بخش های مختلف سایت رو به موتور جستجو اعلام میکنه و در root هاست قرار داره و عموما با زدن /robots.txt/ آخر آدرس سایت میشه دستورات رو دید.

دستورات موجود در این فایل خیلی مهم هستن و اگه این فایل توی هاست سایت موجود نباشه ممکنه اتفاقات مختلفی رو رقم بزنه که مهم ترین اتفاق اینه که بودجه خزش (Crawl Budget) رو به درستی مصرف نمیکنه و همین امر باعث میشه تا خیلی از صفحات سایت درست خوانش نشه.

دستورات داخل فایل خیلی ساده هست، در ادامه یک نمونه کد بهینه برای Robots.txt قرار دادم:

[html]
User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-admin/
Disallow: /wp-content/plugins/

Sitemap: x.com/sitemap.xml [اینجا آدرس سایت مپ رو وارد کنین]
[/html]

دو تا دستور اصلی توی Robots.txt وجود داره :

1. Allow: صفحات یا بخش هاییکه ربات گوگل اجازه داره بهشون دسترسی داشته باشه که عموما بخش هایی رو باید بهش معرفی کنین که عکس ها و مدیای سایت قرار داره. (توجه کنین که این فایل آدرس های فیزیکی رو دنبال میکنه مثلا پوشه uploads توی وردپرس رو میتونین بهش معرفی کنین چون یه گزینه مهم برای ایندکس تصاویر هست اما نیازی به معرفی برگه ها و نوشته های سایت نیست چون این موارد را از طریق فایل سایت مپ بررسی میکنه.)
2. Disallow: صفحات یا بخش هایی از سایت که ربات گوگل اجازه دسترسی و بررسی رو نداره که عموما باید بخش هایی از سایت رو بهش معرفی کنین که نیازی نیست توسط ربات گوگل خوانش بشه مثل : پنل ادمین، فایل های مربوط به پنل ادمین یا پنل کاربری

و یک راهنما در نهایت داره sitemap: که به گوگل مسیر سایت مپ اصلی سایت گفته میشه. پس میتونین به راحتی دستورهای Allow و Disallow رو در صورت نیاز به این فایل اضافه کنین.

عدم مشخص بودن http یا https بودن سایت

مربوط به (۱) و (۲)

اگه سایتتون با http و https میاد بالا، باید حتما این مشکل رو در اسرع وقت حل کنین. راه حل اون هم اضافه کردن کد ریدایرکت ۳۰۱ اصولی به فایل .htaccess در Root سایت هست. اگه مشکل ریدایرکت دارین (چه وردپرس چه سیستم دیگه) این کد رو به اول .htaccess اضافه کنین.

[html]
RewriteEngine On
RewriteCond %{HTTPS} off [OR]
RewriteCond %{HTTP_HOST} ^www\. [NC]
RewriteCond %{HTTP_HOST} ^(?:www\.)?(.+)$ [NC]
RewriteRule ^ https://%1%{REQUEST_URI} [L,NE,R=301]
[/html]

وجود تعداد زیادی صفحه بی کیفیت

مربوط به (۱) و (۲)

وجود صفحات بی کیفیت توی رتبه گرفتن سایت و حتی ایندکس کردن اثر زیادی میذاره. اگه میخواین متوجه بشین که چه صفحاتی بی کیفیت یا زیاد هستن به این چندتا نکته توجه کنین:

1. وجود کپی در قسمت یا کل مطلب
2. استفاده از دسته های اشتباه در نوشته
3. سرعت لود صفحات به شدت پایین هست
4. تعداد زیادی صفحه با محتوای زیر ۳۰۰ کلمه دارید
5. استفاده از برچسب های متعدد و غیر مرتبط در سایت
6. اصول سئوی داخلی در بالای ۸۰% از صفحات سایت شما رعایت نشده
7. نسبت تعداد صفحات در نتایج گوگل به تعداد صفحات منتشر شده زیر ۵% هست (مثلا ۱۰۰۰ صفحه تو سایت دارین اما ۵۰ صفحه توی گوگل هست)

عدم وجود فایل سایت مپ

مربوط به (۲)

همونطور که از اسمش پیداست، سایت مپ یا نقشه سایت یک فایل راهنما برای موتورهای جستجو هست که از طریق این فایل متوجه میشن چه صفحاتی توی سایت شما فعال هست. در واقع سایت مپ یک راهنمای دائم در حال بروزرسانی هست که موتورهای جستجو با رجوع به اون متوجه صفحات جدید سایت میشن.

حالا اشکال اونجایی پیش میاد که سایت مپ به طور کلی در سایت وجود نداشته باشه و سایت مدتهاست برای خودش داره فعالیت میکنه! اما هیچ کدوم از مطالب توی گوگل بالا نیومده، یا به اشتباه یک صفحه نامرتبط اومده بالا یا تعداد خیلی کمی از مطالب رو تونسته گوگل متوجه حضورشون بشه.

اگه سایت وردپرسی دارین، با نصب افزونه یواست یا رنک مث به صورت خودکار سایت مپ اضافه میشه ولی اگه سایت اختصاصی دارین میتونین از طریق سایت xml-sitemaps.com میتونین به راحتی سایت مپ رو ایجاد، خروجی گرفته و روی هاست مثل یک فایل بارگذاری کنین.

وجود سایت مپ های متعدد

مربوط به (۱) و (۲)

برعکس حالت قبل که هیچ سایت مپی توی سایت وجود نداشته باشه میتونه سایت رو به مشکلات مختلفی برسونه، وجود سایت مپ های مختلف اما بدون کاربرد هم میتونه گوگل در ایندکس کردن صفحات اصلی به تاخیر و حتی به اشتباه بندازه. در وردپرس افزونه یواست بعد از تنظیم اولیه که انجام میشه، سایت مپ های مهم رو در فایل Sitemap_index.xml قرار میده و اینطوری گوگل به راحتی به همه سایت مپ ها و آدرس های سایت دسترسی داره.

عدم معرفی سایت مپ به سرچ کنسول

مربوط به (۲)

وقتی سایت رو داخل گوگل سرچ کنسول ادد میکنین، بعد از اون حتما آدرس سایت مپ خودتون رو از بخش Sitemaps ادد کنین. اینکار، گوگل رو در ایندکس کردن سریع تر صفحات سایت کمک میکنه. نکته مهمی که توی معرفی سایت مپ به سرچ کنسول باید رعایت کنین اینه که هرتعداد سایت مپ مهمی که دارین باید به سرچ کنسول با ادد کردن بشناسونین.

تنظیم اشتباه افزونه سئو در سایت های وردپرسی

مربوط به (۱) و (۲)

تنظیم اشتباه رو نمیشه یه مشکل جدی در نظر گرفت اما میتونه یه مشکل بینابینی باشه تا مشکلاتی که بالاتر گفتم و مشکلاتی که پایین تر میخونین رو بهم وصل کنه. پس اگه افزونه یواست یا رنک مث روی وردپرس نصب میکنین حتما به درستی تنظیم کنین. فاکتورهاییکه توی تنظیم درست افزونه سئو تاثیر داره:

1. تنظیم صفحات مهم از غیر مهم در Config wizard افزونه های سئو (صفحات غیر مهم مثل صفحه نویسنده) که سایت مپ های مهم رو توی فایل /Sitemap_index.xml/ ادد میکنه
2. استفاده از علامت جدا کننده ” – ” برای جدا کردن عنوان صفحه از اسم برند سایت در تب مرورگر. مثلا این صفحه در تب مرورگر این شکلی هست: راهکارهای ایندکس صفحات در گوگل + سریعترین راه برای ایندکس شدن صفحات جدید – جلال ترابی
3. تنظیم قالب عنوان دسته ها، برچسب ها و صفحات

استفاده از یک عنوان در دو صفحه

مربوط به (۱)

رایج ترین و حتی مهم ترین اشتباهی که باعث عدم ایندکس صفحات در گوگل میشه، استفاده از یک عنوان به صورت عینا در دو یا چند صفحه سایت هست. مثلا فرض کنین یه پست با عنوان ” دانلود آهنگ جدید ” دارین که داخلش بروزترین آهنگ های روز رو به صورت پشت سرهم با پلیر قرار دادین، حالا یه برچسب هم دارین که بروزترین آهنگ هاییکه رو سایت میره رو داخل این برچسب قرار میدید و یه برگه به همین اسم دارین که به صورت خیلی شیک طراحی شده.

حالا گوگل با سه صفحه با یک عنوان عینا مشابه رو به رو میشه که محتوای متفاوتی دارن:

1. پست که آخرین آهنگ ها رو با پلیر داره نشون میده
2. برچسب ها که لینک آخرین آهنگ ها داخلش هست
3. برگه که احتمالا صفحه اصلی سایت هست

چه اتفاقی میوفته؟ وقتی گوگل با این سه صفحه رو به رو میشه، احتمال داره یکی از این صفحه ها بیاد بالا و بقیه صفحات رو اصلا توی نتایج نشون نده! و اینجاست که ممکنه روی یک صفحه سرمایه گذاری زیادی از لحاظ تبلیغات و سئو بکنین اما اون صفحه به هیچ عنوان نتیجه مطلوبی نده و یک صفحه که اصلا نمیخواین توی گوگل بیاد بالا، ایندکس میشه و ورودی میگیره!

تو این مورد چکار کنیم؟

در این مواقع پیشنهاد میشه صفحاتی که مشابه بهم هستن رو با محتوای صفحه تارگت (صفحه ای که میخواین توی گوگل بیاد بالا و مهم هست) یکی بکنین و سعی کنین اون صفحه رو از لحاظ UI/UX و محتوا بهبود بدید. سایر صفحات مشابه رو در صورتیکه رتبه توی گوگل ندارن میتونین حذف و ریدایرکت ۳۰۱ به صفحه مهمتر بکنین. یا اگه وجود اون صفحات (صفحات مشابه با صفحه مهم) براتون اهمیت داره، میتونین عنوان صفحات رو با استفاده از ابزارهای آنالیز بررسی و تغییر بدید تا روی نتایج و عنوان های دیگه بالا بیاد.

استفاده اشتباهی از برچسب به جای دسته بندی

مربوط به (۱)

این مورد هم خیلی رایجه و خیلی هم دیدم که تو سایت های مختلف این اشتباه رو میکنن. ذات برچسب یا Tag ها بد نیست و یه جور دسته بندی به حساب میان ولی استفاده از اونها در سایت های با مقیاس کوچیک (زیر ۱۰۰۰ صفحه) کمی با دقت باید باشه و اگه از قوانینش آگاهی ندارین بهتره از همون دسته بندی استفاده کنین و اصلا سراغ برچسب نرین.

استفاده از برچسب درکنار دسته بندی مشکل مشابه با یک یا چند عنوان عینا مشابه رو به وجود میاره و ممکنه برچسب به جای دسته بندی اهمیت پیدا کنه و تو گوگل بیاد بالا!

عدم استفاده از ریدایرکت ۳۰۱ برای مطالب مشابه بهم

مربوط به (۱)

وجود مطالب مشابه باعث میشه تا گوگل در ایندکس کردن و نمایش صفحه در نتایج گوگل تا حد زیادی اشتباه کنه. اگه چند تا مطلب با عنوان یکسان دارین یا حتی درباره یک موضوع چند پست مختلف نوشتین، این امکان وجود داره که گوگل یکی از این مطالب رو بشناسه و بالا بیاره.

برای اینکه جلوی چنین اشتباهی گرفته بشه باید اون مطلبی که در بین مطالب مشابه هست و نسبت به بقیه کاملتره رو مطلب اصلی قرار بدید و محتوای مطالب دیگه رو که داخل مطلب اصلی نیست قرار داده، حالا مطالب غیر مهم رو ریدایرکت ۳۰۱ کنین به مطالب اصلی. اینطوری مشکل ایندکس مطلب حل میشه.

عدم استفاده از تگ Canonical در صفحات مشابه بهم

مربوط به (۱) و (۲)

به طور خلاصه از تگ کنونیکال زمانی استفاده میشه که یک یا چند صفحه با مطلب مشابه بهم وجود دارن و برای هدایت صحیح ربات گوگل به مطلب اصلی استفاده میشه. تگ کنونیکال به ربات گوگل کمک میکنه تا مطلب اصلی رو بین مطالب مشابه بهم به راحتی پیدا کنه و رتبه و ایندکس اصلی رو برای صفحه اصلی قرار بده و از ایندکس کردن صفحات غیر مهم جلوگیری کنه.

سعی کردم مهم ترین اشکالاتی که ممکنه براتون ایجاد بشه رو بررسی کنم. توی مطلب اشتباهات سئو و بهینه سازی سایت به یکسری اشتباهات مهم دیگه هم اشاره کردم که خوندن این مطلب خالی از لطف نیست.

سریعترین راه برای ایندکس شدن صفحات جدید

تا اینجا به بررسی هم ترین مشکلات موجود در ایندکس صفحات در گوگل پرداختم و راه حل هاشو بهتون گفتم. حالا میخوام به سریعترین راه برای ایندکس شدن صفحات جدید بپردازم و بهتون بگم چطوری میتونین یه مطلب جدید رو سریعتر تو گوگل ایندکس کنین:

استفاده از URL Inspirection

وقتی مطلب خودتون رو منتشر کردید، به سرچ کنسول سایت مراجعه کنین و توی آدرس بار بالای صفحه لینک مطلب جدید خودتون رو وارد کرده و Enter رو بزنین. حالا وقتی صفحه زیر باز شد روی Test Live بزنین. (در این حالت ممکنه ۱ تا ۲ دقیقه طول بکشه)

بعد از اینکه بررسی انجام شده و همه موارد تیک خورد (اگه مشکلی توی بررسی فرآیند توسط گوگل بود باید کنین و بعد درخواست بدید) روی Request Index کلیک کنین تا پنجره زیر باز بشه:

حالا با اینکار ربات گوگل متوجه مطلب جدید شما شده و مطلب رو در صف بررسی قرار میده.

سوشیال سیگنال و لینکسازی

قبلا جمله بیل گیتس که میگفت محتوا پادشاهه، کاربرد خیلی زیادی داشت اما الان محتوا به تنهایی پادشاه نیست و باید دنبال کانتنت مارکتینگ (بازاریابی محتوایی) باشین تا دیده بشه. پس بعد از اینکه مطلب منتشر شد حتما در شبکه های اجتماعی مختلف اون رو قرار بدید و برای دیده شدن مطلب خودتون وقت بذارین. این نکته رو از من داشته باشین که هرجایی تو شبکه های اجتماعی بتونین لینک بذارین و کاربر رو دعوت به خوندن مطلب سایت بکنین، حتما این کار رو انجام بدید.

اگه نمیدونین سوشیال سیگنال چیست و درباره اون اطلاعاتی ندارین، درباره سوشیال سیگنال قبلا توضیح دادم و لیست شبکه های اجتماعی مهمی که توی سیگنال گرفتن برای سایت تاثیر دارن رو بهتون معرفی کردم.

بروزرسانی مطالب قدیمی و صفحات بی کیفیت

این مورد درباره مطالب جدید نیست اما کمک به ایندکس صفحات جدید میکنه. شما میتونین مطالب قدیمی یا بی کیفیت خودتون رو از لحاظ فاکتورهای زیر بررسی کرده و تبدیل به یک مطلب جدید و با کیفیت بکنین:

1. بررسی باکیفیت بودن عکس شاخص و عکس های داخل مطلب
2. بررسی تیترهای داخل مطلب و رعایت H2 و H3 بودن و حل مشکلات آنها
3. لینک دادن به مطالب مشابه و حتی مطلب جدید در صورتیکه مشابهت موضوعی دارن

جمع بندی

تو این مقاله سعی کردم به صورت ریشه ای و ریزبینانه به مواردی که ممکنه توی ایندکس صفحات در گوگل تاثیرگذار باشه باهاتون صحبت کنم. این موارد فرقی نمیکنه توی سایت های وردپرسی باشه یا سایت های دارای سیستم اختصاصی یا هر سیستم مدیریت محتوای دیگه، استاندارد یکی هست و باید توی هرسایتی این موارد رعایت بشه. پس سعی کنین آیتم هاییکه تو این مطلب گفتم رو حتما به دقت چند بار بخونین و حتما توی سایت خودتون پیاده سازی کنین.

مطلب رو برای کسانیکه این مشکل رو دارن ارسال کنین تا اونها هم استفاده کنن. نظر شما درباره ایندکس صفحات در گوگل چیست؟ آیا نکته دیگه ای هست که اشاره نکرده باشم؟ توی کامنت ها برام بنویسین.