6742

مروري بر روش ها و چالش هاي بازنمايي واژه

1397

دكتر محمد طاهر پيله ور - دكتر صالح اعتمادي

امروزه كاربرد شبكههاي عصبي عميق در حوزه پردازش زبانهاي طبيعي، بهطور چشمگيري افزايش يافتهاست و در بيشتر زمينهها، همچون ترجمهي ماشيني، پاسخ به سوال، دستهبندي متون و غيره، روشهاي مبتني بر شبكههاي عصبي عملكرد با اختلاف بهتري نسبت به روشهاي ديگر دارند. همانطور كه ميدانيم، ورودي شبكههاي عصبي از جنس اعداد و ارقام ميباشد؛ بنابراين يكي از چالشها هنگام بهكارگيري شبكههاي عصبي در حوزه زبانهاي طبيعي، تبديل كردن اسنادي از جنس كلمات به وروديهايي عددي است. يكي از مشكلات اصلي در روشهاي اوليه مربوط به كلماتي با چندين معني مختلف ميباشد كه با وجود داشتن شكل نوشتاري يكسان، ميبايست به بردارهاي متفاوتي نگاشته شوند. در اين گزارش، ابتدا به بررسي اهميت اين موضوع در پردازش زبانهاي طبيعي ميپردازيم، سپس به بررسي روشهاي متعددي كه براي تبديل اسناد به بردارهايي از ارقام پيشنهاد شده و تكنيكهاي تبديل كلمات به ارقام موسوم به روشهاي جاسازي كلمات ميپردازيم. سرانجام به بررسي روشهايي كه براي رفع مشكل كلمات داراي چندين معني پيشنهاد شدهاند پرداخته ميشود. واژههاي كليدي: پردازش زبانهاي طبيعي، جاسازي كلمات

11/11/2019 12:00:00 AM

66353

1398/09/09