loading...
قالب وبلاگ
برای کاربران
تست منو وسط بالا 2
تستس منو وسط بالا
تست منو وسط بالا 1
آخرین ارسال های انجمن
امیر بازدید : 450 جمعه 27 بهمن 1391 نظرات (0)

فایل robot.txt چیست و چرا باید از آن استفاده کرد ؟
 

 

 

موتورهای جستجو همانند گوگل ، یاهو و بینگ مایکروسافت برای برای یافتن و ایندکس کردن صفحات مختلف وب و سایت های موجود از روبات های جستجو که به spider , robot و یا crawler معروف هستنداستفاده می کننید . این روبوت ها با پیمایش خودکار در صفحات وب اطلاعات مربوط به صفحات رو بدست میارند و اونها رو به موتور جستجوی مربوطه ارسال میکنند . معمولا بر اساس اینکه یک سایت چند مدت به چند مدت آپدیت میشه تعداد دفعاتی که این روبات های جستجوگر در روز به سایت مراجعه می کنند متفاوته .
صفحات موجود در سایتهای مختلف از لحاظ امنیتی و درجه حساسیت متفاوت هستند و شاید شما دوست نداشته باشید بعضی از صفحات (مثل صفحات مدیریتی و ادمین سایت) در موتورهای جستجو ایندکس بشه و آدرسش در این موتورها در اختیار عموم باشه . برای اینکه به موتورهای جستجو بگید چه صفحات یا فولدرهایی در سایت رو پیمایش و ایندکس کنه و اینکه چه صفحاتی رو ایندکس نکنه می تونید از یک فایل با نام robot.txt در ایندکس هاستینگ سایتتون و یا در پوشه ای خاص استفاده کنید تا به موتورهای جستجو بگید جا مجازید پیمایش کنید و کجا مجاز نیستید :

ادامه در ادامه مطلب...

 

 

منوی اول پایین
تست منو وسط پایین 2
منوی دوم پایین
تست منو وسط پایین 1
درباره ما
Profile Pic
درباره
اطلاعات کاربری
  • فراموشی رمز عبور؟
  • نظرسنجی
    نمره شما به رعایت کپی رایت در رزبلاگ!!!
    منوی اول راست
    تست منو سمت راست 4
    منوی دوم راست
    تست منو سمت راست 3
    محل تبلیغات شما
    تست منو سمت راست 2
    برای کاربران
    تست منو سمت راست 1
    آمار سایت
  • کل مطالب : 1518
  • کل نظرات : 757
  • افراد آنلاین : 7
  • تعداد اعضا : 6279
  • آی پی امروز : 311
  • آی پی دیروز : 295
  • بازدید امروز : 2,314
  • باردید دیروز : 4,337
  • گوگل امروز : 3
  • گوگل دیروز : 0
  • بازدید هفته : 9,988
  • بازدید ماه : 25,841
  • بازدید سال : 368,034
  • بازدید کلی : 5,109,695
  • کدهای اختصاصی
    اسکریپت های اختصاصی :
    تست
    تست منو سمت چپ 3
    منوی اول چپ
    تست منو سمت چپ 2
    منوی دوم چپ
    تست منو سمت چپ 1