Sitemap.xml [بایگانی] - برنامه نویس

olampiad

یک شنبه 03 خرداد 1394, 18:17 عصر

سلام و خسته نباشید به دوستان عزیز
اروری که سئو از سایت من گرفته نداشتن فایل های Sitemap.xml و Robots.txt می باشد.
این فایل ها باید چ محتوایی داشته باشن؟
خیلی ممنون

H:Shojaei

یک شنبه 03 خرداد 1394, 18:26 عصر

sitemap یه فایل xml هست که لینکهای اصلی و شاخه ها و زیر شاخه های سایت رو داخلش باید بذارید مثلا این یک نمونه سایت مپ (http://www.sitemappro.com/google-sitemap.html) و یه نمونه از گوگل (https://support.google.com/webmasters/answer/183668?hl=en)
فایل robots.txt هم که واسه تعیین اینه که کراولر ها کدوم دایرکتوری ها یا صفحات رو میتونن سر بزنن و کدوم ها رو نباید سر بزنن مثلا بخشهای مدیریت رو باید مشخص کنید تو این فایل که کراولر اونها رو ایندکس نکنه که نیازی نیست این کارو بکنه و اینطور مسائل...
مثلا میتونید بگید کراولر ها به دایرکتوری admin دسترسی نداشته باشن:

User-agent: *
Disallow: /admin

اینم سایت منبع خود robotstxt (http://www.robotstxt.org/robotstxt.html)