پروژه پایان نامه وب ماینینگ Web mining
90صفحه ورد قابل ویرایش
8000تومان
چکیده
در عصر حاضر وب ماینینگ[1] محیط اینترنت جهانی را تبدیل به محیطی کاربردی تر کرده است.که کاربران میتوانند سریعتر و راحتتر اطلاعات مورد نیازشان را پیدا کنند که شامل :کشف و تحلیل داده ، مستندات وmulti media از محیط اینترنت جهانی میباشد ,Web Mining از جزئیات سند ومحتویات سند و ساختار هایپر لینک[2] برای کمک به کاربر جهت مشاهده اطلاعات مورد نیازش استفاده میکند.
وب و موتورهای جستجو خودشان شامل اطلاعات ارتباطی درباره ی مستندات هستند و Web Mining این ارتباطات را کشف میکند و به سه بخش تقسیم بندی مینماید.
- در اولین بخش Web Content Mining، موتورهای جستجو محتویات را با کلمات کلیدی تعریف میکنندومی شناسند.پیدا کردن کلمات کلیدی محتوا و پیدا کردن یک ارتباط بین محتوای صفحه ی وب و محتوای سوال کاربر، Content Mining گفته میشود.
- Hyper Linksاطلاعاتی را درباره ی سایر مستندات روی وب که در سند دیگری مهم هستند تهیه میکند.این لینکها عمقی را به سند اضافه میکنند و حالت چند بعدی که از خصوصیات وب است ایجاد میکنند. کاوش این ساختار لینک دومین بخش یعنی Web Structure Mining است.
- در نهایت ارتباطی با سایر مستندات روی وب که بوسیله ی جستجوی قبلی شناخته شده اند، وجود دارد. این ارتباط در صفحه های جستجو (log) و دستیابی ذخیره میشود. کاوش این Log ها سومین بخش یعنی Web Usage Mining را تشکیل میدهد.
درک کاربر اغلب یک بخش مهم از Web Mining است. تحلیل جستجوهای قبلی کاربر ،شکلی که کاربر ترجیح میدهد اطلاعات پیدا شده را ببیندو سرعت در پاسخ ممکن است در پاسخ دادن به پرس و جوی کاربر موثر باشد.
Web Mining در ماهیت نظم خاصی دارد.پل زدن بین فیلدهایی مثل اطلاعات بازگشتی ،پردازش زبانهای طبیعی، استخراج اطلاعات ،Machine Learning، پایگاه داده ،داده کاوی ،ذخیره ی داده ، طراحی رابط کاربر و Visual کردن .
تکنیکهای Web Mining کاربردهای عملی در M-commerce ،E-commerce ، E-Government ،E-learning ، آموزش از راه دور ، آموزش سازمانی،تشکیلات مجازی ، مدیریت دانش و کتابخانه ی دیجیتال دارد.
در این تحقیق ما به بررسی جنبه های مختلف Web Data Mining میپردازیم.
فهرست مطالب
عنوان.........................................................................................................................................................................صفحه
فصل اول وب کاوی (web mining) ((
3- وب کاوی و زمینه های تحقیقاتی مرتبط... 5
3-2- وب کاوی و بازیابی اطلاعات... 6
3-3- وب کاوی و استخراج اطلاعات... 7
3-4- وب کاوی و یادگیری ماشین.. 8
1-6-1- انواع کاوش محتوا در وب... 12
6-1-3- سایر انواع کاوش محتوا در وب... 14
6-2- رویکردهای کاوش محتوا در وب... 14
6-3- الگوریتم های کاوش محتوا در وب... 15
فهرست مطالب
عنوان.........................................................................................................................................................................صفحه
6-3-3- سایر الگوریتم های کاوش.... 17
7-1- مدل های بازنمایی ساختار وب... 19
7-1-1- مدل های مبتنی بر گراف... 19
7-2- الگوریتم های کاوش ساختار وب... 21
7-2-3- الگوریتم جریان بیشینه. 25
7-3- کاربردهای کاوش ساختار وب... 27
7-3-1- تشخیص اجتماعات وب... 28
8-1- انواع داده های استفاده از وب... 30
8-1-1- داده های سرورهای وب... 30
8-1-2- داده های سرورهای پراکسی.. 31
فهرست مطالب
عنوان.........................................................................................................................................................................صفحه
8-2- پیش پردازش داده های استفاده از وب... 32
8-2-2- تشخیص و بازسازی نشست... 32
8-2-3- بازیابی ساختار و محتوا 33
8-3- روش های کاوش استفاده از وب... 35
8-4- کاربردهای کاوش استفاده از وب... 38
8-4-1- خصوصی سازی محتوای وب... 38
8-4-3- بهبود طراحی سایت های وب... 39
فهرست مطالب
عنوان.........................................................................................................................................................................صفحه
فصل دوم: کاوش پایگاه دادههای وب
2-2- جستجو در پایگاه دادةها در وب... 44
2-3 - داده کاوی شیئی – رابطهای.. 45
2-4- اشتراک داده در مقابل داده کاوی در وب... 45
2-5- کاوش پایگاههای دادة نیمه ساخت یافته. 46
2-7-Web mining و Meta data.. 48
1-10- متادیتا برای کاوش چند رسانهای.. 49
2-11- متا دیتا برای web mining.. 49
2-12- کاوش پایگاه دادههای توزیع شده، ناهمگن ، وراثتی و متحد در وب... 50
2-13- ماژولهایی از DP برای داده کاوی.. 51
2-14- داده کاوی روی پایگاه داده توزیع شده 51
2-16-کاوش interoperating و مخزن.. 52
فهرست مطالب
عنوان.........................................................................................................................................................................صفحه
2-17- همکاری میان عاملهای کاوش.... 52
2-18- واسط برای مجتمع سازی.. 53
2-19- معماریها وweb data mining.. 54
2-20- ماژولهای داده کاوی مثل اشیاء 54
فصل سوم: مدیریت اطلاعات و داده کاوی وب
3-2- همکاری بین عاملهای کاوش.... 57
3-3- مدیریت دانشها و داده کاوی وب... 58
3-4- مدیریت دانش و داده کاوی وب... 59
3-5- محاسبات بیسیم و داده کاوی وب... 60
3-6- کیفیت سرویس و داده کاوی وب... 61
3-8- اجتماع سرویسهای وب و داده کاوی.. 62
فصل چهارم: کاوش الگوهای کاربردی و ساختار روی وب
4-2- تحلیل الگوهای کاربردی و روندهای پیشبینی.. 64
فهرست مطالب
عنوان.........................................................................................................................................................................صفحه
4-3- خروجیها و تکنیکهای web usage mining.. 65
4-4- تحلیل web usage mining.. 66
4-5- انواع تحلیلCRM و کاربردهای تجارت هوشمند: 68
4-6- مدیریت ارتباط با مشتری ومحصولات... 73
4-7- web mining برای e-commerce.. 73
4-9- بازبینی web structure mining.. 74
4-10-خروجیهای web structure mining.. 74
4-11 - جمع بندی و نتیجه گیری.. 75
4-13- کارت گرافیک سه بعدی.. 78
4-14- کارت گرافیک سه بعدی.. 80
4-16- کارت گرافیک سه بعدی.. 83
فهرست اشکال
عنوان صفحه
شکل1-1مدل های گراف تک گره ای......................................................................................................................19
شکل2-1 مدل های گراف چند گره ای....................................................................................................................20
شکل1-3- مدل گراف وب...........................................................................................................................................21
وب ماینینگ Web mining