متن کاوی و بررسی روشهای متن کاوی و ارزیابی این روشها

متن کاوی و بررسی روشهای متن کاوی و ارزیابی این روشها

دانلود تحقیق متن کاوی
فرآیند متن کاوی
مهمترین متد های متن کاوی
بررسی روشهای متن کاوی
ارزیابی روشهای متن کاوی
کاربردهای متن کاوی
روش های پیش پردازش کردن اطلاعات با متن کاوی
روش های پیش رده بندی اطلاعات با متن کاوی
روش های استخراج اطلاعات با متن کاوی

رفتن به سایت اصلی

 

متن کاوی و بررسی روشهای متن کاوی و ارزیابی این روشها

 

 

چکیده

    رشد فزاینده پایگاه داده ها در تقریبا هر ناحیه از فعالیت انسان باعث شده است که نیاز برای ابزارهای قدرتمند جدید برای تغییر دادن داده به دانش مفید افزایش یابد. برای برآوردن این نیاز محققان در ناحیه های مختلف مانند یادگیری ماشین ، شناسایی الگو، آنالیز داده آماری، بصری سازی داده ، شبکه های عصبی، اقتصاد سنجی، بازیابی اطلاعات، استخراج اطلاعات و….. روش ها و ایده هایی را کاوش کرده اند. ذات غیرساخت یافته ی این متون، اعمال همان روشهایی را که ما در مورد پایگاه داده های غیرمتنی بکار می بریم، غیر ممکن می سازد. بنابراین روش ها و الگوریتم-های پردازش (پیش پردازش)خاصی برای استخراج الگوهای مفید موردنیاز است. متن کاوی اطلاعات متنی غیرساختیافته را استفاده می کند و آنرا برای کشف ساختار و معناهای ضمنی پنهان در متن بررسی می کند. 

 

در این مقاله ما به بررسی یکی از جدیدترین زمینه-های مورد تحقیق در داده کاوی، متن کاوی می پردازیم. در این مقاله روش های موجود برای پیش پردازش کردن، رده بندی ، استخراج اطلاعات ، روش های یافتن روابط شرح داده می شوند در پایان هر بخش ارزیابی و مقایسه ای روی روش های بیان شده در آن بخش صورات می-گیرد و در پایان تعدادی از کاربردهای متن کاوی بیان می گردند.

 

 

کلمات کلیدی:

متن کاوی

داده کاوی

استخراج اطلاعات

یکپارچه  کردن داده کاوی

دسته بندی و مرتب سازی داده ها

 

 

 

مقدمه

   بخش قابل توجهی از اطلاعات قابل دسترس در پایگاه داده های متنی (یا پایگاه داده های سند ) كه شامل مجموعه بزرگی از اسناد منابع مختلف (مثلا مقالات خبری، paperها، كتاب ها، ایمیل ها و صفحات وب) ذخیره شده اند. پایگاه داده های متنی به علت افزایش مقدار اطلاعات موجود به فرم الكترونیكی سریع رشد می كنند. امروزه بیشتر اطلاعات در صنعت، کسب و کار  و سازمان های دیگر به صورت الكترونیكی و به فرم پایگاه داده متنی ذخیره شده اند.   داده های ذخیره شده در بیشتر پایگاه  داده های متنی، داده های نیمه ساختاریافته هستند چون نه به طور كامل غیرساختیافته هستند و نه به طور كامل ساختیافته هستند. 

 

برا ی مثال یك سند شامل تعدادی فیلد ساختیافته مانند عنوان، نویسندگان، تاریخ انتشار، رده  و ….. و از طرف دیگر شامل برخی كامپوننت های متنی غیرساختاریافته مانند چكیده و محتویات است. تكنیك های بازیابی اطلاعات مانند (متدهای ایندکس کردن متن ) برای هندل كردن سندهای غیر ساختاریافته ایجاد شده اند. تكنیك های بازیابی اطلاعات قدیمی برای مقدار زیادی داده متنی كه به طور فزاینده افزایش می یابند، ناكارآمد هستند. بدون دانستن محتویات سندها، فرمول بندی كردن Queryهای مناسب برای آنالیز كردن و استخراج كردن اطلاعات مفید از داده، مشكل است.

 

 كاربرها نیاز به ابزارهایی برای مقایسه سندهای مختلف، مرتب كردن سندها بر اساس موبوط بودن آن ها و یافتن الگوها دارند.  بنابراین یکی از جدیدترین زمینه های مورد تحقیق در داده کاوی، متن کاوی برای این منظور گسترش یافت. متن کاوی یعنی جستجوی الگوها در متن غیرساختیافته. متن کاوی برای کشف اتوماتیک دانش مورد علاقه یا مفید از متن نیمه ساختیافته استفاده می شود. چندین تکنیک برای متن کاوی پیشنهاد شده است عبارتند از ساختار مفهومی ،کاوش association ruleها درخت تصمیم گیری، روش های استنتاج قوانین ، همچنین تکنیک های بازیابی اطلاعات برای کارهایی مانند تطبیق دادن سندها، مرتب کردن کردن، کلاسترینگ و…..

 

 

فهرست مطالب

چکیده 

1 مقدمه

1.1 کشف دانش و ارتباط آن متن کاوی

2.1 تعاریف متن کاوی

3.1 ناحیه های سرچ مرتبط

2 روش ها پیش پردازش کردن متون

1.2 مدل فضای برداری

2.2 پیش پردازش زبان شناختی

3 روش های متن کاوی …

1.3 فازهای اصلی فرآیند کتن کاوی…

2.3 رده بندی …

1.2.3 انتخاب ترم ایندکس

2.2.3 رده کننده Naïve Bayes

3.2.3 رده بندی کننده نزدیکترین همسایه

4.2.3 درخت تصمیم گیری

5.2.3 متدهای هسته و SVM

6.2.3 ارزیابی رده بندی کننده ها

3.3  استخراج اطلاعات

1.3.3 رده بندی برای استخراج اطلاعات

2.3.3 مدل مارکوف پنهان

3.3.3 فیلدهای رندم شرطی

4.3.3 مقایسه روش های استخراج اطلاعات

2.2 پیش پردازش زبان شناختی

4.3 روش ها ترکیبی

1.4.3 روش های dicsotex

1.1.4.3 مقدمه

2.1.4.3 یکپارچه  کردن داده کاوی و استخراج اطلاعات

3.1.4.3 سیستم dicsotex

2.4.3روش textminer

1.2.4.3 مقدمه

2.2.4.3 استخراج اطلاعات

3.2.4.3 الگوریتم خوشه بندی

3.4.3 یافتن روابط

4.4.3 مقایسه روش های ترکیبی

4 کاربردهای متن کاوی

5 نتیجه گیری و کارهای آینده

6 مراجع

 

 

 

 

 

پرسشنامه سلامت عمومی فرزندان 12 سوالی با نمره گذاری، روایی و پایایی

پرسشنامه سلامت عمومی فرزندان 12 سوالی با نمره گذاری، روایی و پایایی کلمات کلیدی : پرسشنامه سلامت عمومی 12 سوالی پرسشنامه سلامت روان 12 سوالی پرسشنامه سلامت عمومي ghq-12 پرسشنامه سلامت عمومی فرزندان دانلود پرسشنامه سلامت عمومی 12 سوالی دانلود…

بررسی موانع و منابع پیاده سازی بانکداری الکترونیک در ایران

بررسی موانع و منابع پیاده سازی بانکداری الکترونیک در ایران eBanking بانکداری الکترونیک منابع بانکداری الکترونیک موانع بانکداری الکترونیک پیاده سازی بانکداری الکترونیک در ایران سیستم همکاری در فروش فایل همکاری در فروش فایل دالود تحقیق مدیریت فروش فایل فروشگاه…

بررسی حقوقی حریم خصوصی در ایران و حدود آن در سطوح بین الملل

بررسی حقوقی حریم خصوصی در ایران و حدود آن در سطوح بین الملل حریم خصوصی دانلود پایان نامه حریم خصوصی بررسی حقوقی حریم خصوصی حریم خصوصی در حقوق ایران حدود حریم خصوصی در سطوح بین الملل بررسی حقوقی حریم خصوصی…

مبانی نظری و پیشینه تحقیق مدیریت مشارکتی 89 صحه

مبانی نظری و پیشینه تحقیق مدیریت مشارکتی 89 صحه کلمات کلیدی : فصل دوم پایان نامه مدیریت مشارکتی مبانی نظری مدیریت مشارکتی پیشینه تحقیق مدیریت مشارکتی پیشینه داخلی مدیریت مشارکتی پیشینه خارجی مدیریت مشارکتی پیشینه پژوهش مدیریت مشارکتی پیشینه نظری…

مبانی نظری و پیشینه تحقیق جراحی زیبایی

مبانی نظری و پیشینه تحقیق جراحی زیبایی مبانی نظری جراحی زیبایی ادبیات نظری جراحی زیبایی چارچوب نظری جراحی زیبایی فصل دوم پایان نامه جراحی زیبایی دانلود مبانی نظری جراحی زیبایی پیشینه جراحی زیبایی پیشینه تحقیق جراحی زیبایی پیشینه داخلی جراحی…

ارکان اقدامات تامینی و تربیتی و بررسی شرایط اجرای آن

ارکان اقدامات تامینی و تربیتی و بررسی شرایط اجرای آن اقدامات تامینی و تربیتی اقدامات تامینی و تربیتی اطفال و نوجوانان تحقیق در مورد اقدامات تامینی و تربیتی ماهیت اقدامات تامینی و تربیتی اقدامات تامینی و تربیتی از دیدگاه اسلام…

ابزارهای کارآمد زن در تحکیم شخصیت و ازدیاد محبوبیت در نظام خانواده

ابزارهای کارآمد زن در تحکیم شخصیت و ازدیاد محبوبیت در نظام خانواده تفاوت ساختار جسمی و روانی زن و مرد ابزارهای زن در تحکیم شخصیت خانواده ابزارهای زن در محبوبیت نظام خانواده ازدیاد محبوبیت در نظام خانواده تحکیم شخصیت در…

پاورپوینت و ارائه کامل دیود (Diode)

پاورپوینت و ارائه کامل دیود (Diode) دانلود پاورپوینت دیود دانلود پاورپوینت Diode دانلود پاورپوینت دوقطبی الکتریکی دانلود پاورپوینت مدارات یکسو ساز پدیده های Diffusion و Drift تبدیل جریان متناوب به جریان مستقیم دانلود پاورپوینت و ارائه کامل دیود رفتن به…

بررسی نقش هوش معنوی و راهبرد های یادگیری خودتنظیمی بر عملکرد تحصیلی دانشجویان پسر دانشگاه فرهنگیان شهید بهشتی بندرعباس

بررسی نقش هوش معنوی و راهبرد های یادگیری خودتنظیمی بر عملکرد تحصیلی دانشجویان پسر دانشگاه فرهنگیان شهید بهشتی بندرعباس هوش معنوی راهبردهای یادگیری خودتنظیمی و عملکرد تحصیلی دانشجویان پسر دانشگاه فرهنگیان شهید بهشتی بندرعباس پایان نامه روانشناسی تعریف هوش دیدگاه…

طلاق به درخواست زوجه از دیدگاه فقهای اسلامی

طلاق به درخواست زوجه از دیدگاه فقهای اسلامی درخواست طلاق از طرف زن درخواست طلاق از طرف زن در فقه امامیه درخواست طلاق از طرف زن در فقه اهل سنت طلاق بر مبناي عسر و حرج ایات طلاق در قران…

مبانی نظری ارزیابی سطح چابکی سازمان با روش BSC

مبانی نظری ارزیابی سطح چابکی سازمان با روش BSC کلمات کلیدی : ارزیابی سطح چابکی سازمان چابکی سازمانی در سازمانهای دولتی مدل های دستیابی به چابکی سازمانی مدل اجرای چابکی از نظر شریفی و ژانگ چابکی سازمان با کارت امتیازی…

مبانی نظری و پیشینه تحقیق غنی سازی روابط زناشویی 81 صفحه

مبانی نظری و پیشینه تحقیق غنی سازی روابط زناشویی 81 صفحه کلمات کلیدی : فصل دوم پایان نامه غنی سازی روابط زناشویی مبانی نظری غنی سازی روابط زناشویی پیشینه تحقیق غنی سازی روابط زناشویی پیشینه داخلی غنی سازی روابط زناشویی…

پرسشنامه تاثیر استراتژی منابع انسانی بر ارزیابی عملکرد مدیران

پرسشنامه تاثیر استراتژی منابع انسانی بر ارزیابی عملکرد مدیران پرسشنامه استراتژی های منابع انسانی پرسشنامه استراتژی های منابع انسانی پرسشنامه استراتژی های منابع انسانی مدل SWOT پرسشنامه مدل achieve پرسشنامه بهره وری هرسی و گلداسمیت پرسشنامه بهره وری نیروی انسانی مدل…

تاریخچه ی حجاب

تاریخچه ی حجاب حجاب پوشش حجاب اسلامی حجاب در ادیان مختلف دانلود مقالات رشته معارف اسلامی تاریخچه ی حجاب دانلود مقالات معارف اسلامی سیستم همکاری در فروش فایل خرید مقالات معارف اسلامی رفتن به سایت اصلی دانلود مقاله رشته معارف…

مدیریت سیستمهای پاداش و عوامل اثرگذاری بر خط مشی های مدیریت پاداش در سازمان و رابطه آن با مفاهیم مختلف

مدیریت سیستمهای پاداش و عوامل اثرگذاری بر خط مشی های مدیریت پاداش در سازمان و رابطه آن با مفاهیم مختلف رابطه پاداش و انگیزش مبانی اعطای پاداش مدیریت سیستمهای پاداش ویژگیهای سیستم پاداش جایگاه نظام پاداش در مدیریت منابع انسانی…

مبانی نظری و پیشینه تحقیق سنجش مدیریت دانش در دانشگاه 108 صفحه

مبانی نظری و پیشینه تحقیق سنجش مدیریت دانش در دانشگاه 108 صفحه کلمات کلیدی : پیشینه تحقیق مدیریت دانش پیشینه پژوهش مدیریت دانش دانلود مبانی نظری مدیریت دانش مبانی نظری استقرار مدیریت دانش مبانی نظری و پیشینه تحقیق مدیریت دانش…

بررسی پروسه خط تولید کاشی و سرامیک

بررسی پروسه خط تولید کاشی و سرامیک کاشی و سرامیک تولید کاشی و سرامیک تولید انواع کاشی و سرامیک فرآیند تولیدکاشی و سرامیک دانلود تحقیق کاشی و سرامیک دانلود تحقیق تولید کاشی و سرامیک بررسی پروسه خط تولید کاشی و…

مدل مفهومی ارزیابی آمادگی سازمان برای پیاده سازی ERP

مدل مفهومی ارزیابی آمادگی سازمان برای پیاده سازی ERP مدل مفهومی erp مدل مفهومی برنامه ریزی منابع سازمانی مدل مفهومی عوامل حیاتی موفقیت پیاده سازی ERP مدل مفهومی عوامل کلیدی موفقیت پیاده سازی ERP مدل مفهومی پیاده سازی موفق سیستم…

فایل های درس رایانش تکاملی دکتر نوری مهر

فایل های درس رایانش تکاملی دکتر نوری مهر فایل های درس رایانش تکاملی دکتر نوری مهر رفتن به سایت اصلی فایل های درس رایانش تکاملی دکتر نوری مهر به تعداد 170 اسلاید قایل ویرایش   چکیده زنبور در طبیعت فلوچارت…

مبانی نظری توانمندسازی سکونتگاه های غیررسمی اطراف شهرهای بزرگ

مبانی نظری توانمندسازی سکونتگاه های غیررسمی اطراف شهرهای بزرگ کلمات کلیدی : سکونتگاه های غیررسمی مبانی نظری اسکان غیر رسمی مبانی نظری سکونتگاه های غیررسمی ویژگی های سکونتگاه های غیررسمی مبانی نظری توانمندسازی سکونتگاه های غیررسمی سکونتگاه های غیررسمی و…

پروپوزال پایان نامه سلامت روان سالمندان

پروپوزال پایان نامه سلامت روان سالمندان کلمات کلیدی : پروپوزال سلامت روان پروپوزال سلامت روانی نمونه پروپوزال سلامت روان پروپوزال در مورد سلامت روان پایان نامه سلامت روان سالمندان پروپوزال درباره سلامت روان سالمندان پروپوزال در مورد سلامت روان سالمندان…

بررسی سیستم عامل های ابری و ارائه راه حل هایی برای چالشهای پیش رو

بررسی سیستم عامل های ابری و ارائه راه حل هایی برای چالشهای پیش رو سیستم عامل های ابری چالش های سیستم عامل های ابری راهکارهایی برای چالش های سیستم عامل های ابری پایان نامه چالش های سیستم عامل های ابری…

پیشینه نظری و فصل دوم پایان نامه عزت نفس سازمانی

پیشینه نظری و فصل دوم پایان نامه عزت نفس سازمانی کلمات کلیدی : فصل دوم پایان نامه عزت نفس سازمانی مبانی نظری عزت نفس سازمانی پیشینه تحقیق عزت نفس سازمانی پیشینه داخلی عزت نفس سازمانی پیشینه خارجی عزت نفس سازمانی…

ماهیت فساد اقتصادی و بررسی نظریه های جرم شناختی آن

ماهیت فساد اقتصادی و بررسی نظریه های جرم شناختی آن فساد اداری و اقتصادی فساد اداری و اقتصادی در ایران جرایم اقتصادی در حقوق کیفری ایران جرایم اقتصادی در قانون مجازات جدید مفهوم و ماهیت فساد اقتصادی پایان نامه مفاسد…

مبانی نظری و پیشینه تحقیق سازگاری و ناسازگاری زناشویی 55 صفحه

مبانی نظری و پیشینه تحقیق سازگاری و ناسازگاری زناشویی 55 صفحه کلمات کلیدی : فصل دوم پایان نامه سازگاری و ناسازگاری زناشویی مبانی نظری سازگاری و ناسازگاری زناشویی پیشینه تحقیق سازگاری و ناسازگاری زناشویی پیشینه پژوهش سازگاری و ناسازگاری زناشویی…

پاسخی بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *