8000

طراحي چارچوب زمان بندي هوشمند ناوگان پايش پهپادي با استفاده از رهيافت يادگيري تقويتي

كارشناسي

مهندسي كامپيوتر

1401

دكتر ابوالفضل ديانت

1401/07/17

مهندسي كامپيوتر

پرنده هاي هوايي هدايت پذير بدون سرنشين از راه دور )پهپاد ،( در دهه گذشته به طور فزاينده اي مورد توجه صنعت و پژوهشگران قرارگرفته است. افزون بر كاربرد هاي پيشين نظامي، امروزه پهپاد ها در كاربردهاي مختلف از جمله توسعه شهرهاي هوشمند و نظارت و پايش مورد استفاده قرار مي گيرند. با رشد و پيشرفت روزافزون هوش مصنوعي مي توان اين قدرت را به پهپادها داد تا به صورت خودمختار بتوانند با يادگيري از محيط پيرامون، كنش هاي مناسبي داشته باشند. در اين پروژه، به ارائه ي چارچوبي براي زمان بندي پهپادها به صورت خودمختار و بدون داشتن مركز كنترل با استفاده از رهيافت يادگيري تقويتي پرداخته شده است. چارچوب طراحي شده، پهپادها را قادر مي سازد تا به صورت خودمختار بتوانند مسيله ي زمان بندي نظارت را انجام داده و توانايي بروزرساني زمان بندي را هنگام وقوع رويدادهاي اضطراري و غيرمترقبه نيز دارد. براي اين منظور، در اين چارچوب، رهيافت يادگيري تقويتي و الگوريتم يادگيري Qمورد استفاده قرار گرفته است. تابع پاداش عوامل هوشمند، بر مبناي محدوديت هاي ظرفيت محدود باتري پهپاد، پنجره هاي زماني و تاخيررسيدن پهپادها براي نظارت بررويدادها توسعه داده شده است. نتايج شبيه سازي، توانايي روش پيشنهادي را براي مديريت هوشمند مسيله ي زمانبندي تاييد مي كند

،شبكه هاي پهپاد يار , شهر هوشمند , يادگيري تقويتي , شبكه هاي نسل آينده