در مورد مخفی کردن بخشی از محتوا برای موتور های جستجو

[hueman]

ظاهرا برای جلوگیری از ایندکس شدن قسمت هایی از محتوای یه وبسایت فقط دو راه هست:
1 - استفاده از robots.txt
2 - استفاده از meta tag
حالا سوالات من اینه که:
1 - آیا راه دیگه ای هم هست؟
2 - به دلیل امکان دیده شدن فایل robots.txt توسط کاربر (محتملا هکر) آیا راهی برای حلوگیری از دسترسی مستقیم به این فایل هست؟
3 - استفاده از robots.txt و meta tag در عمل کاراییشون مثل همه؟
ممنون میشم تجربیاتتون رو در این باره بهم بگین

[persian_bigboy]

سلام دوست من . البته یک راه هست ، آن هم اینه که در robot.txt آدرس یک پوشه رو بن کنی و آدرس فایل ندی .
تنها راهش همینه . در گوگل سرچ کنی بهتره . مرسی

[emad_67]

1 - آیا راه دیگه ای هم هست؟
همین 2 راه معمولا استفاده میشه + اینکه قسمت هایی که بر روی اون هم پسورد گذاشته بشه هم قابل دسترس نیستند(مثل فولدر admin)


2 - به دلیل امکان دیده شدن فایل robots.txt توسط کاربر (محتملا هکر) آیا راهی برای حلوگیری از دسترسی مستقیم به این فایل هست؟
فکر نمی کنم، چون اگر اونو محدود کنی ربات گوگل هم نمیتونه اونو ببینه. البته مشل خاصی هم ایجاد نمی کنه اگر بر فرض یه هکر هم اونو ببینه.

3 - استفاده از robots.txt و meta tag در عمل کاراییشون مثل همه؟
برای جلوگیری از ایندکس شدن بله، اما meta tag فقط برای یک صفحه کاربرد داره، اما با robots.txt می تونی یه فولدر یا رنج خاصی از url ها رو کلا غیر قابل دسترس کنی.