گفتگو: بحث در مورد نحوه کار این سایت(مطالب سایت بصورت اتوماتیک از سطح اینترنت و سایت های دیگر دریافت میشود) [بایگانی]

marjan_gh

پنج شنبه 02 مرداد 1393, 16:19 عصر

مطالب سایت بصورت اتوماتیک از سطح اینترنت و سایت های دیگر دریافت میشود

جمله بالا رو تو یه سایتی دیدم و برام سوال شد که چه جوری این امکان وجود داره؟

SA_Developer

پنج شنبه 02 مرداد 1393, 16:45 عصر

سلام
این همون کاریه که گوگل و دیگر موتورهای جست و جو با استفاده از برنامه ای به نام Web Crawler انجام میدن.
کار Crawler اینه که بصورت اتوماتیک مطالب رو از سایت ها جمع اوری کنه و دنبال لینک های اون صفحه بره و مطالب اون صفحه رو هم جمع آوری کنه و به همین ترتیب برای بقیه صفحه ها.

حالا Crawler این سایتی که شما دیدید احتمالا خیلی ساده تر نوشته شده یا شایدم با استفاده از RSS سایت ها مطالب رو جمع اوری میکنه.

اطلاعات بیشتر
http://en.wikipedia.org/wiki/Web_crawler
http://www.wpthemesplanet.com/2009/09/how-does-web-crawler-spider-work/