9039

تجميع نتايج مدل هاي زباني بزرگ براي بهبود عملكرد در زمينه روانشناسي

كارشناسي

مهندسي كامپيوتر

1402

دكتر صالح اعتمادي

1403/02/02

دانشكده كامپيوتر

Aggregating results from large language models to improve performance in psychology

اختلالات رواني نظير اضطراب و افسردگي در سراسر جهان در حال افزايش است و بر جوامع تأثيرات منفي گسترده اي مي گذارد. اين اختلالات مي توانند باعث كاهش عملكرد شغلي، افزايش مريضي، كاهش بهره وري و افزايش هزينه هاي بهداشتي شوند. همچنين، ممكن است منجر به افزايش خشونت و جرم شوند. عواملي مانند شرم از داشتن بيماري رواني و هزينه هاي بالا باعث مي شوند كه بسياري از افراد نيازمند به دريافت درمان مناسب محروم بمانند. كمبود متخصصان روان شناسي نيز اين مسئله را تشديد مي كند. چت بات ها مي توانند تا حدودي اين شكاف را پر كنند. در اين پروژه در ابتدا تلاش كرديم يك مدل ايجاد سوال را آموزش دهيم. براي اين منظور از مدل آموزش ديده T5-base استفاده كرديم. اين مدل، مدلي چندمنظوره است و در توليد متن نيز عملكرد مناسبي دارد. براي آموزش دادن آن، از مجموعه داده كه از پست ها و نظرات رديت 1بدست آورده بوديم، استفاده كرديم و آن را در سه حالت ارزيابي كرديم: حالت اول مدل ،T5-baseحالت دوم پس از تنظيم دقيق آن با مجموعه داده بدست آمده از API خود رديت كه از جمع آوري پست ها و كامنت هاي پنج زير گروه صورت گرفته بود و حالت سوم پس از تنظيم دقيق آن با مجموعه داده بدست آمده از آرشيو Torrentو فيلتر شده بر روي PHQ-143و در آخر نتيجه گرفتيم نتيجه حالت سوم از بقيه حالت ها بهتر است. همچنين، مدل BERTرا نيز با استفاده از مجموعه داده موجود از قبل در رديت بهبود داديم تا بتوانيم تكراري بودن سوال را ارزيابي كنيم. در نهايت، چت بات ما با استفاده از مدل ايجاد سوال، سوالاتي مرتبط با مشكل كاربر ايجاد مي كند و با استفاده از شاخص BLEURTسوال ايجاد شده را در مقايسه با پرسشنامه PHQ-9ارزيابي مي كنيم. سپس سوالي كه بيشترين امتياز را دارد، به مدل بررسي سوال داده مي شود تا بررسي كند آيا سوال به درستي پاسخ داده شده است يا خير. اگر سوال جواب داده شده است، از مدل ايجاد سوال مي خواهيم كه دوباره سوال جديدي ايجاد كند. و اگر سوال پاسخ داده نشده باشد، از كاربر سوال را ميپرسيم. اين روند را تا زماني كه به تمامي سوالات پرسشنامه PHQ-9پاسخ داده شود، تكرار مي كنيم

پرسشنامه -PHQ-9 , چت بات , مدل ايجاد سوال , مدل بررسي سوال