robots.txt.dist چیست ؟

امتیاز موضوع:

0 رأی - میانگین امتیازات: 0
1
2
3
4
5

حالت موضوعی | حالت خطی

robots.txt.dist چیست ؟

۲۰-۴-۱۳۹۵, ۰۶:۵۶ صبح

ارسال: #2

Reza Ganji آفلاین

رضا گنجی

ارسال‌ها: 11,309
تاریخ عضویت: ۲۴ آذر ۱۳۸۹
اعتبار: 646

سپاس ها 17972
سپاس شده 19052 بار در 8086 ارسال

RE: robots.txt.distچیه؟

این همون robots.txt که تغییر نام داده شده و در اصل یک نمونه از فایل robots.txt است که شما بتونید برای نمونه استفاده کنید و میتونید حذف کنید.
فایل robots.txt برای این هست که ربات ها بدونند مجاز هستند چه پوشه هایی رو ایندکس کنند و چه پوشه هایی رو مجاز نیستند ایندکس کنند.
بهتره robots.txt رو حذف نکنید.

امضاء Reza Ganji

انجمن پارس جوم