طراحی سایت و نقش روبوت در سئو

طراحی سایت و سئو دارای گزینه های مختلفی است که باید رعایت شود. بدون رعایت این نکات، سایت شما در موتور های جستجو دیده نمی شوند. یکی از همین گزینه ها robots است که ویژگی هایی از سایت شما را به گوگل اعلام می کنند.

روبوت چیست؟

روبوت اطلاعاتی در مورد ایندکس شدن صفحات را به موتور های جستجو اعلام می کند. یعنی تعیین می کند که کدام صفحه باید ایندکس شود و کدام صفحه نباید ایندکس شود. ایندکس کردن به معنی ثبت صفحه مورد نظر در دیتابیس گوگل است. وقتی کرولر موتور جستجوی گوگل ( خزنده) در سایت ها به دنبال صفحات و مطالب جدید می گردد، از این گزینه برای ایندکس کردن یا نکردن صفحه استفاده می کند. خزنده گوگل، صفحات جدید را از روی پیوندهایی که در صفحات شما وجود دارد پیدا می کند. در روبوت گزینه دیگری غیر از ایندکس وجود دارد که مشخص می کند که موتور جستجو پیوندهای این صفحه را دنبال کند یا خیر. اگر در روبوت مقدار فالو قرار گیرد، بغضی موتور های جستجو پیوندهای صفحه را دنبال می کنند و اگر نو فالو قرار داده شود به معنی این است که پیوندهای صفحه توسط کرولر دنبال نشوند.

استفاده از روبوت در وب سایت

از روبوت در دو بخش از وب سایت می توان استفاده کرد. یکی بصورت فایل و یکی در هد صفحات. برای استفاده از روبوت به روش های زیر می توان عمل کرد:

Sitemap:http://yourdomain/sitemap.xml

User-agent:*

Disallow:/engine/

خط اول نقشه سایت xml وب سایت را مشخص می کند و موتور جستجو از طریق آن به نقشه سایت دسترسی دارد. خط دوم مشخص می کند که چه کاربرانی به سایت دسترسی دارند، علامت * به معنی همه کاربران است. در سطر سوم اگر قرار نیست موتور جستجو بخشی از سایت را ایندکس کند، آن بخش مشخص می شود. اگر کل سایت باید ایندکس شود، خط سوم نیاز نیست.

2- در هد هر صفحه می توانید از متال زیر استفاده کنید

ادامه در لینک زیر:

https://webever.ir/bloginfo/%D8%B7%D8%B1%D8%A7%D8%AD%DB%8C-%D8%B3%D8%A7%DB%8C%D8%AA-%D9%88-%D9%86%D9%82%D8%B4-%D8%B1%D9%88%D8%A8%D9%88%D8%AA-%D8%AF%D8%B1-%D8%B3%D8%A6%D9%88