Cyletech
Member
روبات اینترنت چیست: روبات یک برنامه خودکار هست که با گردش در وب و بازیافتن سند کار می کنه.
داشتن یک فایل robots.txt اجباری نیست چون بجاش چندین متاتگ هم وجود داره. اما کار این فایل چیه؟ این فایل امکان کنترل کردن روبات ها را توسط خودتون میده و داشتنش هم جز اینکه خوب هست، گوگل بازدید های بیشتری از وب سایت شما می کنه.
در این فایل یک سری کد ها قرار میگیرند که کارشون + کد هاشون رو در زیر نوشتم.
کد های دیگه ای هم هستند مثل، تاریخ ورود روبات یا خروج روبات و ... اما استفاده از این ها بشدت رتبه شما را کاهش می دهد.
حالا متاتگ هایی که برای روبات ها هست. البته پیشنهاد می کنم که اگه خواستید استفاده کنید قفط از آموزش اول (فایل robots.txt) استفاده کنید.
نویسنده: علیرضا اسکندرپور
داشتن یک فایل robots.txt اجباری نیست چون بجاش چندین متاتگ هم وجود داره. اما کار این فایل چیه؟ این فایل امکان کنترل کردن روبات ها را توسط خودتون میده و داشتنش هم جز اینکه خوب هست، گوگل بازدید های بیشتری از وب سایت شما می کنه.
در این فایل یک سری کد ها قرار میگیرند که کارشون + کد هاشون رو در زیر نوشتم.
PHP:
1- عدم دسترسی Disallow: /
2- دسترسی کامل Alow: /
3- تمام روبات ها User-agent: *
4- فقط یک روبات User-agent: BadBotکد های دیگه ای هم هستند مثل، تاریخ ورود روبات یا خروج روبات و ... اما استفاده از این ها بشدت رتبه شما را کاهش می دهد.
حالا متاتگ هایی که برای روبات ها هست. البته پیشنهاد می کنم که اگه خواستید استفاده کنید قفط از آموزش اول (فایل robots.txt) استفاده کنید.
PHP:
1- عدم ایندکس کردن <META NAME="ROBOTS" CONTENT="NOFOLLOW">
2- ایندکس کامل <META NAME="ROBOTS" CONTENT="NOINDEX">
3- عدم دسترسی سبک قدیمی و مضر rel="nofollow"
4- عدم پیروی <META NAME="ROBOTS" CONTENT=" NOFOLLOW">نویسنده: علیرضا اسکندرپور
حق تألیف و تصنیف تنها با گروه ایران PHP می باشد
