8464

توليد پاسخ در پرسش و پاسخ تصويري در حوزه پزشكي

كارشناسي

مهندسي كامپيوتر

1402

دكتر سيد صالح اعتمادي

دكتر احمد اكبري

1402/05/16

دانشكده مهندسي كامپيوتر

Generate Answer to Visual Questions in the Medical Domain

پرسش و پاسخ تصويري در سال هاي اخير به دليل طيف متنوعي از كاربردها بسيار مورد توجه قرار گرفته است. كاربردهاي اين مسئله فراتر از زمينه هاي عمومي گسترش يافته و شامل حوزه پزشكي نيز مي شود، جايي كه مي تواند براي پزشكان و بيماران مفيد باشد. پرسش و پاسخ تصويري در حوزه پزشكي اين توانايي را دارد كه به پزشكان در تصميم گيري آگاهانه كمك كند و به بيماران پاسخ هايي را به سؤالات مربوط به تصاوير پزشكي كه وضعيت سلامتي آنها را نشان مي دهد ارائه دهد؛ اما چالشي كه در كاربرد اين مسئله براي حوزه ي پزشكي وجود دارد، محدود بودن مجموعه داده ها به داده هاي مبتني بر كليدواژه، و در نتيجه محدوديت رويكردها به روش هاي دسته بندي است. به منظور نزديك تر ساختن سيستم هاي پرسش و پاسخ تصويري پزشكي به ارتباط انساني و همچنين افزايش قدرت استدلالي پاسخ ها، توليد پاسخ ها به صورت جمله ي كامل رويكرد مناسب تري مي باشد. در اين پژوهش، به توليد يك مجموعه داده پرسش و پاسخ تصويري پزشكي به همراه پاسخ هاي جمله كامل پرداخته شده، و با استفاده از مجموعه داده توليد شده، امكان پذيري حل مسئله ي پرسش و پاسخ تصويري پزشكي از طريق توليد جمله را بررسي كرده و به ارزيابي نتايج حاصل شده مي پردازيم.

پرسش و پاسخ تصويري , تصاوير پزشكي , توليد متن , توليد داده , پرسش و پاسخ