حرفه ای: پردازش متن ! [بایگانی]

View Full Version : حرفه ای: پردازش متن !

Samsam2010

دوشنبه 22 اسفند 1390, 19:40 عصر

با سلام

دوستان من میخواستم یه سیستم طراحی کنم که مقالاتی درون دیتا بیس سیستم من هست
حالا من مقاله دیگری را که میخوام وارد سیستم بکنم این مقاله با مقاله های دیگر مقایسه بشه
و بگه این مقاله چند در صد شبیه کدوم مقاله هستش
یعنی یک پردازش متن قوی طلب میکنه
دوستان لطفا ایده بدهید
با تشکر

JaVa

دوشنبه 22 اسفند 1390, 20:12 عصر

یه ایده کوجولو: اگه بتونی پیاده سازیش بکنی!!!!!!!!!!!!!!!!!
:متفکر:
هنگامی که مقاله رو که می خوای وارد سیستم بکنی با استفاده "از نرم افزار مختصر نویسی " بکنی.
یه روز استادمون مفصل در این مورد صحبت کرد و الان بحث روی همین مطلبه.
امیدوارم مفید واقع شده باشه.

یه سئواله دیگه از چه نظر مقایسه بکنه؟
1-تعداد کلمات
2-نویسنده
3-عبارت ها ی شبیه به هم
4-سبک مقاله
و...

Samsam2010

دوشنبه 22 اسفند 1390, 20:50 عصر

با تشکر دوست من برای مختصر نویسی چه روش هایی عنوان کردن میتونید بیشتر توضیح بدید ؟

من میخوام از عبارت های شبیه به هم مقایسه بشه

این کاری که من در صدد هستم انجام بدم به نطر شما تو کدوم حوزه رایانه قرار میگیره ! هوش مصنوعی میشه ؟

JaVa

دوشنبه 22 اسفند 1390, 21:03 عصر

سلام...

بله درسمون در زمینه هوش مصنوعی بود که این مطلب رو گفت.
خودمم زیاد وارد نیستم ولی اگه عجله ای در کار نیست می تونم ازش بپرسم بعد بهت بگم.
ولی خودت سرچ کن شاید چیزی گیرت اومد.
دوست دار یو

kiarashk

دوشنبه 22 اسفند 1390, 22:11 عصر

به نظر من ابتدا مي اد و تمام كلامات رو جدا كنه بعد كلمات متداول مثل "از" "با" "اين" و... را از بين كلمات حذف كنه حالا كلمات باقي مانده حكم كلمات كليدي را دارند هر مقاله اي كه كلمات مشترك بيشتري داشته باشه اون مقاله به مقاله جديد نزديك تره

JaVa

دوشنبه 22 اسفند 1390, 23:01 عصر

دورود ...

فکر نکم موضوع به همین سادگی باشه...
آخه با حذف کردن "از""با""این""اگر"و... که مختصر نویسی نمیشه یک مقاله...
موضوع باید بیشتر از این حرفها باشه

kiarashk

سه شنبه 23 اسفند 1390, 07:59 صبح

دورود ...

فکر نکم موضوع به همین سادگی باشه...
آخه با حذف کردن "از""با""این""اگر"و... که مختصر نویسی نمیشه یک مقاله...
موضوع باید بیشتر از این حرفها باشه
خب اين يه ايدست اما فكر مي كنم بشه با حذف كلمات بيشتر به نتيجه رسيد اما شايد تحقيق در مورد روش كار متور حاي جستجو گر در بر خورد با كلمات كمك بزرگي باشه

Samsam2010

سه شنبه 23 اسفند 1390, 14:55 عصر

kiarashk

سه شنبه 23 اسفند 1390, 15:02 عصر

از شما دوستان ممنوم که با ایده های خودتون به من کمک کردید

دوست عزیز جناب kiarashk من با ایده شما موافقم و همچنین با حرف های جناب mrg_vb !

این روشی که جناب kiarashk میفرمایند خالص کردن متن با کلید واژه هاست
اما من خودم خیلی دوست دارم با یک الگوریتم درست حسابی این کار رو انجام بدم یه چیزی تو مایه های هوش مصنوعی

باز هم منتظر شنیدن ایده های خوبتون هستم
با تشکر

خواهش مي كنم. من در زمينه هوش مصنوعي تخصص ندارم اما هوش مصنوعي هم چيز عجيبي نيست فقط بايد يه ايده خوب داشته باشي و اون رو پرورشش بدي به هر حال ادامه بده بحث رو منم تا جايي كه بلد باشم كمك مي كنم

armin8651

سه شنبه 30 آبان 1391, 20:46 عصر

با روش های shingling, minhashing, LSH و چند روش دیگه این کار انجام میشه
به روش ها تسلط کافی دارم و دارم رو بهبودشون کار می کنم
اگه تمایل دارین پیاده سازیش کنیم (البته خودم یک مقداری شروع کردم)