robots.txt رو بزارم یا نه؟

[.fatemeh]

سلام.
توی یه مقاله خوندم چون اسم فایل های امنیتی که موتور جستجو اجازه دسترسی نداره توی این صفحه
مشخص می شه و با لینک www.site name/robots.txt میشه به این فایل دسترسی پیداکرد،گذاشتنش
مشکل امنیتی داره.
به نظردوستان اگر فایل رو بردارم و با

<meta name="robots" content="noindex,nofollow">

اجازه دسترسی صفحات رو ببندم بهتره یا بزارم باشه؟
نبود این فایل به رتبه توی گوگل صدمه نمی زنه؟
یا اینکه توی robots.txt اجازه دسترسی بدم بعد با تگ متا جلوی ایندکس شدن رو بگیرم؟
چه کارش کنم؟؟؟

[soroush.r70]

به نظر من بذاری باشه بهتره خودم از این فایل استفاده می کنم و صفحات و پوشه هایی که نیاز به فهرست شدن ندارند رو Disallow می کنم فایل مفیدی برای موتور های جستجو هستش تا محتویات وب سایت را فهرست بندی کنند.

[tehro0n]

استفاده از robots.txt برخی اوقات جستجوگرایی مثل گوگل به حرفشان گوش نمی کنند، بنابراین بهتره تو هر صفحه و یا برخی لینک ها نشون بدی که صفحه دنبال و ایندکس بشه یا نه