close
تبلیغات در اینترنت
robot.txt چیست؟اهمیت استفاده ازrobot.txt =

دیردانلود,دیر دانلود

 موتورهای جستجو همانند گوگل ، یاهو و بینگ مایکروسافت برای برای یافتن و ایندکس کردن صفحات مختلف وب و سایت های موجود از روبات های جستجو که به spider , robot و یا crawler معروف هستنداستفاده می کننید . این روبوت ها با پیمایش خودکار در صفحات وب اطلاعات مربوط به صفحات رو بدست میارند و اونها رو به موتور جستجوی مربوطه ارسال میکنند . معمولا بر اساس اینکه یک سایت چند مدت به چند مدت آپدیت میشه تعداد دفعاتی که این روبات های جستجوگر در روز به سایت مراجعه می کنند متفاوته .صفحات موجود در سایتهای مختلف از…

**
==
جستجوگر پیشرفته



آخرین ارسال های انجمن
2222
عنوان پاسخ بازديد آخرين ارسال
شبکه جدید قاصدک (  کارتن  ) در هاتبرد درحال پخش بااین فرکانس شبکه جدید قاصدک ( کارتن ) در هاتبرد درحال پخش بااین فرکانس 3 7609 7070
عکس های عجیب زنی با سه سینه عکس های عجیب زنی با سه سینه 0 3369 admin
پرت شدن دختر 16 ساله از بالای پل مدیریت در تهران  تصویر=امروز پرت شدن دختر 16 ساله از بالای پل مدیریت در تهران تصویر=امروز 0 1714 admin
عکس های فوق جالب و خنده دار عکس های فوق جالب و خنده دار 0 601 admin
جدیدترین مدل کفش های 2014 خانم ها Gucci جدیدترین مدل کفش های 2014 خانم ها Gucci 0 481 majidsat
جسجو و چک کردن سایت تان درلیست سیاه گوگل { google } همراه تصاویر جسجو و چک کردن سایت تان درلیست سیاه گوگل { google } همراه تصاویر 0 330 majidsat
بردن مطالب سایت شما به صفحه اول گوگل ( google )روزی 20 مطلب یا بیشتر بردن مطالب سایت شما به صفحه اول گوگل ( google )روزی 20 مطلب یا بیشتر 0 232 majidsat
بازگشت فصل دوم سریال ستایش به شبکه 3 بازگشت فصل دوم سریال ستایش به شبکه 3 0 372 majidsat
دختری در کرج کشف حجاب کرد+تصویر دختری در کرج کشف حجاب کرد+تصویر 0 1772 admin
دانلود رایگان نرم افزارپاکسازی رایانه از تروجان هاLoaris Trojan Remover 1.3.0.6 دانلود رایگان نرم افزارپاکسازی رایانه از تروجان هاLoaris Trojan Remover 1.3.0.6 0 393 admin
فرکانس جدید pn TV و طپش در ماهواره یاه ست فرکانس جدید pn TV و طپش در ماهواره یاه ست 0 1963 majidsat
دانلود آخرین مرورگرفارسی محبوب موزیلا فایرفاکس26  Mozilla دانلود آخرین مرورگرفارسی محبوب موزیلا فایرفاکس26 Mozilla 0 587 majidsat
شبکه جدید حوادث و ایجاد ان شبکه جدید حوادث و ایجاد ان 0 449 majidsat
 استعلام  تخلفات رانندگي استعلام تخلفات رانندگي 0 726 majidsat
بهترین رژ لب های با 12 رنگ برای پوست های روشن بهترین رژ لب های با 12 رنگ برای پوست های روشن 0 397 majidsat
تاثیر عجیب 7میوه بر پوست صورت تاثیر عجیب 7میوه بر پوست صورت 0 433 admin
موضوع مهم :تایپک مخصوص: دانلود آهنگ های کرمانجی موضوع مهم :تایپک مخصوص: دانلود آهنگ های کرمانجی 19 3803 admin
قاتلی که سهیلا خانوم و کشت فرار کرد(دختری که در بیمارستان جان دادبعداز سه بارزنگ زدن) قاتلی که سهیلا خانوم و کشت فرار کرد(دختری که در بیمارستان جان دادبعداز سه بارزنگ زدن) 0 405 admin
دانلودنرم افزار مدیریت سرمایه شخصی-icash v7.4.6 دانلودنرم افزار مدیریت سرمایه شخصی-icash v7.4.6 0 332 admin
خوش رنگ کردن موهای تان با گیاهان طبیعی خوش رنگ کردن موهای تان با گیاهان طبیعی 0 447 admin
[Forum_Post_Title] صفحه اول انجمن | [Forum_Post_Title] ثبت نام در انجمن | [Forum_Post_Title] ورود به پنل کاربری
 موتورهای جستجو همانند گوگل ، یاهو و بینگ مایکروسافت برای برای یافتن و ایندکس کردن صفحات مختلف وب و سایت های موجود از روبات های جستجو که به spider , robot و یا crawler معروف هستنداستفاده می کننید . این روبوت ها با پیمایش خودکار در صفحات وب اطلاعات مربوط به صفحات رو بدست میارند و اونها رو به موتور جستجوی مربوطه ارسال میکنند . معمولا بر اساس اینکه یک سایت چند مدت به چند مدت آپدیت میشه تعداد دفعاتی که این روبات های جستجوگر در روز به سایت مراجعه می کنند متفاوته .
صفحات موجود در سایتهای مختلف از لحاظ امنیتی و درجه حساسیت متفاوت هستند و شاید شما دوست نداشته باشید بعضی از صفحات (مثل صفحات مدیریتی و ادمین سایت) در موتورهای جستجو ایندکس بشه و آدرسش در این موتورها در اختیار عموم باشه . برای اینکه به موتورهای جستجو بگید چه صفحات یا فولدرهایی در سایت رو پیمایش و ایندکس کنه و اینکه چه صفحاتی رو ایندکس نکنه می تونید از یک فایل با نام robot.txt در ایندکس هاستینگ سایتتون و یا در پوشه ای خاص استفاده کنید تا به موتورهای جستجو بگید جا مجازید پیمایش کنید و کجا مجاز نیستید :

http://www.7learn.com/wp-content/uploads/Robot-txt-300x169.png

http://www.7learn.com/wp-content/uploads/serobots.gif
همونطور که در عکس بالا میبینید ، در سایتی که از فایل robot.txt استفاده نشده باشه روبات های موتورهای جستجو همه ی صفحات رو ایندکس می کنند در صورتی که با استفاده از این فایل میشه این ایندکس شدنها رو برای پوشه های مختلف کنترل کرد ! از این فایل همچنین برای جلوگیری از ایندکس شدن تکراری صفحات با url های مختلف استفاده میشه .
:: خوب حالا که فهمیدید دلیل استفاده از فایل مهم robot.txt چی هست نظر یادت نره

t
t
:: امتیاز: نتیجه : 0 امتیاز توسط 0 نفر مجموع امتیاز : 0

:: بازدید : 174
:: ارسال شده در: توسعه / توسعه وب , زبان برنامه نویسی ,

نویسنده
نویسنده : ADMIN
تاریخ : [شنبه 16 آذر 1392 ] [ 7:19]
تاریخ
ارسال نظر برای این مطلب

نام
ایمیل (منتشر نمی‌شود) (لازم)
وبسایت
:) :( ;) :D ;)) :X :? :P :* =(( :O @};- :B /:) :S
نظر خصوصی
مشخصات شما ذخیره شود ؟ [حذف مشخصات] [شکلک ها]
کد امنیتیرفرش کد امنیتی
آخرین مطالب ارسالی
ارتباط با مدیر
user33
progress عضو شويد

نام کاربری :
رمز عبور :

progress فراموشی رمز عبور؟

progress عضویت سریع
نام کاربری :
رمز عبور :
تکرار رمز :
ایمیل :
نام اصلی :
کد امنیتی : * کد امنیتیبارگزاری مجدد
نرم افزارها
اینترنت
کاربردی
گرافیک
مالتی مدیا
امنیتی
اداری و دفتری
توسعه / توسعه وب
دیسک
دسکتاپ
سیستم عامل
ماهواره
ریسور
مبایل
بازی
دانلود اهنگ های شاد محلی کرمانجی استان خراسان شمالی
مطالب عمومی سایت
داستان و حکایات و معمای بسیار جالب
خبرهای اقتصادی و ثبت نامی
55 بازدید سال بازدید سال : 5,473
بازدید کلی بازدید کلی : 536,609

اطلاعات شما اطلاعات شما
آِ ی پیآِ ی پی : 54.162.239.233
مرورگر مرورگر :
سیستم عامل سیستم عامل :
پشتیبانی:دانلود اهنگ کرمانجی
==