8295

استفاده از يادگيري تقويتي عميق براي مسيريابي در شبكه هاي نرم-افزار محور

كارشناسي

مهندسي كامپيوتر

1401

دكتر وصال حكمي

دكتر وصال حكمي

1401/11/12

مهندسي كامپيوتر

Deep RL applied on software defined networks routing

شبكه تعريف شده نرم افزار )SDN( محور يك فناوري شبكه نوظهور است كه صفحه كنترل يك دستگاه شبكه )به عنوان مثال، سوئيچ / روتر( را از صفحه داده آن جدا مي كند. كنترل كننده SDN كنترل متمركز كل شبكه را دارد و به عنوان يك سيستم عامل شبكه عمل مي كند. كنترلر به دلايل زير استقرار هوشمند را فعال مي كند. اول، از آنجايي كه كنترلر يك نماي كلي از شبكه دارد، مي تواند اطلاعات شبكه جامعي را براي الگوريتم هاي مسيريابي جمع آوري كند. دوم، كنترل كننده مي تواند به سرعت منابع شبكه را با نصب قوانين حمل و نقل در سوئيچ هاي تحت كنترل خود پيكربندي و مديريت كند. اگرچه SDN فرصتهاي جديدي را براي جمعآوري دادهها و مديريت منابع به ارمغان ميآورد، اما حل كارآمد مشكل مهندسي ترافيك TE) SDN( از نظر توان عملياتي و تاخير همچنان چالش برانگيز است. اين به اين دليل است كه با توسعه سريع دستگاههايي مانند گوشيهاي هوشمند، اينترنت اشياء و غيره و فناوريهاي شبكه مانند محاسبات، ترافيك داده به طور تصاعدي رشد ميكند. در نتيجه، مديريت ترافيك تعداد زيادي از دستگاه ها و منابع شبكه چالش برانگيزتر از هميشه مي شود. رويكردهاي سنتي كه عمدتاً مبتني بر مدل هستند، فرض ميكنند كه ترافيك شبكه و تقاضاهاي كاربر ميتواند به خوبي مدلسازي شود. با اين حال، مدل سازي و پيش بيني شبكه هاي ارتباطي دشوار است، زيرا آنها بسيار پيچيده و پويا شده اند. از اين رو، استقرار عوامل هوشمندتر در شبكه ها براي بهينه سازي منابع شبكه ضروري است. يك مشكل مهندسي ترافيك يافتن مسيرهايي است كه به طور موثر ترافيك داده را از يك سوئيچ منبع به تمام سوئيچ هاي مقصد قابل دسترسي منتقل مي كند. هدف، به حداكثر رساندن توان سوئيچ منبع و به حداقل رساندن تاخير ارتباطي 1 است. روشهاي ساده و پركاربرد الگوريتمهاي مسيريابي Open Shortest Path )First (OSPFو كمترين بارگذاري )LL( هستند. با اين حال، آنها هم حريصانه هستند و هم بر اساس وضعيت فعلي شبكه تعهد مي كنند.

يادگيري تقويتي عميق , SDN