ایندکس گوگل

موتورهای جستجو چگونه کار می کنند
به طور کلی، عملکرد موتورهای جستجو مانند گوگل دارای 3 مرحله کلی هستند:
خزیدن: در این زمینه می توان گفت که مهمترین منطقه برای موتورهای جستجو، ربات هایی هستند که به خزنده یا عنکبوت معروف هستند که وب سایت شما را می خزند.
نمایه سازی: در مرحله دوم، هنگامی که خزنده های گوگل محتوا و صفحات سایت شما را بررسی کردند، موتور جستجو آنها را ایندکس می کند و در پایگاه داده خود ذخیره می کند، حتی اگر کاربر اطلاعاتی نداشته باشد، آن را نشان دهد. .
رتبه بندی: در مرحله نهایی، موتور جستجو بهترین و مناسب ترین نتایج را برای کاربر از اطلاعات ثبت شده نشان می دهد. این مرحله بهترین محتوا را برای کاربران به شما نشان می دهد که یکی از معیارهای اصلی رتبه بندی صفحات وب سایت شماست.

ایندکس گوگل
ایندکس گوگل در واقع همان پایگاه داده ای است که محتوا را برای پردازش الگوریتمی ذخیره می کند.
هنگامی که یک ربات خزنده به محتوای شما دسترسی پیدا می کند و صفحه محتوای شما را می خزد، محتوا در فهرست Google گنجانده می شود.
بنابراین، اکنون متوجه شدید که چرا اولین مرحله از هرم سئوی مزلو، خزیدن سایت توسط موتورهای جستجو است.
البته لازم به ذکر است که می توانید از موتورهای جستجو بخواهید که محتوای وب سایت شما را ایندکس نکنند. ممکن است تعجب کنید، اما این یک استراتژی سئو برای وب سایت های جدید است که حاوی محتوایی نیستند.

موتورهای جستجو چگونه کار می کنند
به طور کلی، موتورهای جستجو مانند گوگل دارای 3 مرحله کلی هستند:
خزیدن: در این زمینه می توان گفت که مهمترین منطقه برای موتورهای جستجو، ربات هایی هستند که به خزنده یا عنکبوت معروف هستند که وب سایت شما را می خزند.
نمایه سازی: در مرحله دوم، هنگامی که خزنده های گوگل محتوا و صفحات سایت شما را بررسی کردند، موتور جستجو آنها را ایندکس می کند و در پایگاه داده خود ذخیره می کند، حتی اگر کاربر اطلاعاتی نداشته باشد، آن را نشان دهد. .
رتبه بندی: در مرحله نهایی، موتور جستجو بهترین و مناسب ترین نتایج را برای کاربر از اطلاعات ثبت شده نشان می دهد. این مرحله بهترین محتوا را برای کاربران به شما نشان می دهد که یکی از معیارهای اصلی رتبه بندی صفحات وب سایت شماست.
ایندکس گوگل
فهرست گوگل در واقع همان پایگاه داده ای است که محتوا را برای پردازش الگوریتمی ذخیره می کند.
هنگامی که یک ربات خزنده به محتوای شما دسترسی پیدا می کند و صفحه محتوای شما را می خزد، محتوا در فهرست Google گنجانده می شود.
بنابراین، اکنون متوجه شدید که چرا اولین مرحله از هرم سئوی مزلو، خزیدن سایت توسط موتورهای جستجو است.
البته لازم به ذکر است که می توانید از موتورهای جستجو بخواهید که محتوای وب سایت شما را ایندکس نکنند. ممکن است تعجب کنید، اما این یک استراتژی سئو برای وب سایت های جدید است که حاوی محتوایی نیستند.

صفحاتی را که نمی خواهید ایندکس شوند مشخص کنید
هر وب سایتی صفحاتی دارد که کاربر هرگز به دنبال آنها نخواهد بود. برای مثال می توان به صفحه سبد خرید مراجعه کرد. فرض کنید دیجی کالا را جستجو کرده اید و دومین لینک در صفحه نتایج سبد خرید دیجی کالا است. البته شما به عنوان یک کاربر جدید نیازی به رفتن به این صفحه ندارید اما از طرفی این صفحه اجباری است.
برای اتصال از Robot.txt استفاده کنید
برای جلوگیری از نمایش این صفحه در نتایج جستجو، باید از فایلی به نام robot.txt استفاده کنید. این فایل حاوی کدی است که به گوگل می گوید کدام صفحات را نخزد.
فایل robot.txt را در دایرکتوری اصلی صفحه قرار دهید. با این حال می توانید محل این فایل را خودتان حدس بزنید. (yordomain/robot.txt)
تصویر زیر را ببینید. در این تصویر فایل robot.txt سایت دیجی کالا را مشاهده می کنید.