پروژه نرم افزار با موضوع ابهام زدایی مفهوم کلمات
عنوان انگلیسی این پروژه نرم افزار با موضوع ابهام زدایی مفهوم کلمات، Word Sense Disambiguation می باشد. این پروژه نرم افزار با موضوع ابهام زدایی مفهوم کلمات به صورت فایل Word برای دانلود از سایت گروه ترجمه تخصصی البرز ارائه شده است.
چکیده
در سالهای اخیر یکی از مسائلی که بسیار مورد توجه قرار گرفته است پردازش زبانهای طبیعی میباشد و آن بعلت گسترده شدن کلمه و مشکلات موجود در زبانهای طبیعی میباشد یکی از این مسائل، رفع ابهام مفهوم کلمات است. در زبان مردم هر کلمه در موقعیتهای مختلف دارای معانی متفاوتی میباشد. تشخیص مفهوم کلمه برای مردم کاری راحت، ولی برای کامپیوتر کار بسیار سخت و پیچیده است. زیرا علاوه بر اینکه بایستی موقعیت کلمه در جمله را متوجه شود بایستی مفهوم آن کلمه را براساس کلمه هایی که در اطرافش می باشند بدست آورد. زیرا بعضی از کلمه ها وجود دارند که در یک نقش دارای دامنه های معنایی متفاوتی میباشندکه این باعث پیچیدهتر شدن مسئله میگردد.
برای اینکه محققین راحتتر بتوانند به مفهوم کلمات دسترسی پیدا کنند و دیگر وقت خود را صرف جمع آوری اطلاعات در مورد مفاهیم کلمات نکنند، منابع خارجی توسط گروههایی بوجود آمده است که در آنها مفاهیم کلمه ها در نقش های متفاوت و همچنین در بعضی از این منابع تا حد امکان رابطه مفاهیم و کلمات با یکدیگر مشخص شده است. در این گزارش بعضی از معروفترین این منابع بررسی شدهاند.
فرآیند تشخیص مفهوم یک کلمه دارای مراحل کلی بصورت (1) پیش پردازش (2) استخراج مفاهیم از منبع خارجی (3) انتخاب مناسبترین مفهوم میباشد. هر کدام از این قسمتها خودشان با مشکلات بسیاری مواجه میباشد. در این گزارش، روشهای انتخاب مناسب ترین مفهوم بررسی و دسته بندی شدهاند.
فهرست مطالب
فصل اول : مقدمه
مقدمه
تاریخچه
فصل دوم : نیازها و پیشپردازشهای رفع ابهام
گزینش کردن مفهوم کلمه
پایگاه دانش خارجی
منابع داراي ساختار
منابع بدون ساختار
Wordnet
ارتباطلات واژهایی
ارتباطات معنایی
Semcor
Wikipedia
پیش پردازش های رفع ابهام
تفکیککردن
برچسب زنی نقش کلمات
ریشهیابی
ریشه یاب پورتر
ریشه یاب کاظم تقوی
قطعه بندی
تجزیه کردن
انتخاب متد کلاس بندی
فصل سوم : رفع ابهام با روشهای با ناظر
درخت تصمیم
یادگیری بیضی
نزدیکترین همسایه
فصل چهارم : رفع ابهام با روشهای بدون ناظر
کلاستربندی متن
کلاستر بندی کلمات
گرافهای رخداد باهم
فصل پنجم :رفع ابهام مبتنی بر پایگاه دانش
همپوشانی معانی
الگوریتم Lesk معمولی
الگوریتم Lesk با استفاده از Simulated Annealing
الگوریتم Lesk ساده شده
الگوریتم Lesk مبتنی بر پایگاه دانش
شباهت معنایی
سنجشهای شباهت معنایی
روشهای مبتنی بر گراف
الگورتیم ناویگلی و همکاران
الگوریتم میهالسا و همکاران
الگوریتم فوگاروللی
روشهای وزن دهی نودها در گراف
روشهای سنجش محلی
روشهای سنجش سراسری
فصل ششم : پیاده سازی
فصل هفتم : نتیجه گیری و کارهای آینده
مراجع