ورود

View Full Version : اموزش ساخت robots.txt


phpeproject.ir
دوشنبه 09 اردیبهشت 1392, 14:01 عصر
سلام دوستان اموزش robots.txt برای سایت رو میخوام کسی میتونه توضییح بده
mehbod.rayaneh
دوشنبه 09 اردیبهشت 1392, 14:27 عصر
سلام
از این استفاده کنید!
http://www.mcanerin.com/EN/search-engine/robots-txt.asp
ولی اصولا توی مدیریت محتوا ها افزونه هایی برای ساختش هست!
مثلا وردپرس :
http://wordpress.org/extend/plugins/wp-robots-txt/
phpeproject.ir
دوشنبه 09 اردیبهشت 1392, 15:00 عصر
داداش اینجوری خوبه
User-agent: *
Allow: /
soroush.r70
دوشنبه 09 اردیبهشت 1392, 16:02 عصر
فایل robots.txt چند پارامتر ساده داره

اولی User-agent: * که چون جلوش ستاره می ذاریم به همه موتورهای جستجو می گه سایت رو آنالیز کنید
بعدی allow اجازه دسترسی به فایل یا پوشه خاص یا به همه چیز
بعدی disallow عدم اجازه دسترسی به پوشه یا فایل خاص
Sitemap: آدرس نقشه سایت خودتو با پسوند xml می دی

یه نمونه robots خود گوگل http://www.google.com/robots.txt (http://www.google.com/robots.txt)