PDA

View Full Version : crowler وب


hamed_bostan
چهارشنبه 25 مهر 1386, 13:52 عصر
چطور میتونم یه crowler وب بنویسم که سایتهای مختلف رو به صرت هوشمند جستجو کنه و ایندکس گذاری کنه؟
abadanboy
چهارشنبه 25 مهر 1386, 15:40 عصر
فکر کنم سایت parseek یه همچین سایتی هست
مدیرش آقای شیرازی هست ازش بپرسی شاید جوابتو بده
http://shirazi.blogfa.com
hamed_bostan
چهارشنبه 25 مهر 1386, 16:10 عصر
مقاله ای چیزیندارین . واسه ایشون هم ایمطل میزنم ممنون
abadanboy
چهارشنبه 25 مهر 1386, 21:35 عصر
چیزه خاصی درموردش به فارسی نیست ولی باید دنباله انگلیسیش بگردم اگه چیزی پیدا کردم خبرت میکنم شما هم اگه چیزی دستگیرت شد بگو چون خودمم چند وقته تو کفم ولی سرم شلوغه وقت نکردم روش کار کنم
donia ghasvari
جمعه 16 مرداد 1394, 19:28 عصر
چطور میتونم یه crowler وب بنویسم که سایتهای مختلف رو به صرت هوشمند جستجو کنه و ایندکس گذاری کنه؟
سوال دیگه بنده در پیرو این سوال این هست که چطوری میتونم بصورت هوشمند دیتاست یک شبکه اجتماعی مانندtwetter رو هر روزه بصورت بروز شده دریافت کنم؟؟؟
anvar
شنبه 17 مرداد 1394, 09:18 صبح
هر کتابی در مورد http بخونید در این مورد کمکتون می کنه (چند سال یه کتابی دیدم که بصورت تخصصی http رو در C# اموزش میداد اما متاسفانه اسمش به ذهنم نیومد)
این مقاله هم نگاه کلی از مسئله بهت میده

http://www.codeproject.com/Articles/13486/A-Simple-Crawler-Using-C-Sockets
anvar
شنبه 17 مرداد 1394, 09:23 صبح
سوال دیگه بنده در پیرو این سوال این هست که چطوری میتونم بصورت هوشمند دیتاست یک شبکه اجتماعی مانندtwetter رو هر روزه بصورت بروز شده دریافت کنم؟؟؟

شبکه های اجتماعی دارای یک سری API های اختصاصی برای توسعه دهندگان هستند که می تونید بصورت واسط از اونها استفاده کنید
https://dev.twitter.com/overview/documentation

اما احتمالا اون چیزی رو که شما دنبالش هستید فکر نکنم در دسترس عموم بذارن