[صفحه اصلی ]   [Archive] [ English ]  
:: صفحه اصلي :: درباره نشريه :: آخرين شماره :: تمام شماره‌ها :: جستجو :: ثبت نام :: ارسال مقاله :: تماس با ما ::
:: دوره 10، شماره 2 - ( مجله کنترل، جلد 10، شماره 2، تابستان 1395 ) ::
جلد 10 شماره 2,1395 صفحات 35-43 برگشت به فهرست نسخه ها
یک الگوریتم تکراری برای حل مسایل کنترل بهینه تصادفی با استفاده از زنجیر مارکوف
دکتر بهزاد کفاش* 1، خانم زهرا نیکویی نژاد2، دکتر علی دلاورخلفی3
1- استادیار دانشگاه اردکان
2- دانشجوی دکتری دانشگاه یزد
3- دانشیار دانشگاه یزد
چکیده:   (1987 مشاهده)

در این مقاله، یک روش عددی برای حل مساله کنترل بهینه تصادفی با استفاده از زنجیرهای مارکوف ارائه شدهاست. بدین ترتیب که، ابتدا فرایند پخش کنترلی وضعیت سیستم با استفاده از یک زنجیر مارکوف کنترلی روی یک فضای وضعیت متناهی تقریب زده میشود. سپس تقریبی از تابع هزینه اولیه با استفاده از این زنجیر مارکوف تقریبی، بهدست میآید. برای اثبات همگرایی روش و یافتن یک زنجیر مارکوف تقریبی مناسب برای فرایند پخش، باید دو معیار مورد بررسی قرار گیرد. به عبارتی باید امید ریاضی و کوواریانس شرطی تغییرات وضعیت زنجیر مارکوف با میانگین و کوواریانس موضعی فرایند پخش اولیه متناسب باشند. با استفاده از تقریبات تفاضلات متناهی میتوان احتمالات انتقال و بازههای زمانی تغییر وضعیت زنجیر مارکوف را به گونهای تعیین کرد که زنجیر مارکوف در دو ویژگی سازگاری موضعی فوق صدق کند. در ادامه معادله برنامهریزی پویا با زنجیر مارکوفی که بدین ترتیب بهدست آمده و دارای این ویژگیهای میباشد، تقریب زده میشود. نهایتاً، با میل دادن پارامتر گسسته سازی زنجیر مارکوف به صفر، مشاهده میشود که جواب مسئله کنترل تصادفی تقریبی زنجیر مارکوف، به جواب مسئله کنترل بهینه تصادفی اولیه همگرا میباشد. در پایان یک الگوریتم تکراری برای حل مساله کنترل بهینه تصادفی پیشنهاد شده و از آن برای حل یک مثال استفاده شده است.

واژه‌های کلیدی: مساله کنترل بهینه تصادفی، زنجیر مارکوف، روش عددی، الگوریتم تکراری.
متن کامل [PDF 1541 kb]   (677 دریافت)    
نوع مطالعه: پژوهشي | موضوع مقاله: تخصصي
دریافت: ۱۳۹۴/۶/۲۹ | پذیرش: ۱۳۹۵/۹/۲۴ | انتشار: ۱۳۹۵/۹/۲۴
ارسال پیام به نویسنده مسئول

ارسال نظر درباره این مقاله
نام کاربری یا پست الکترونیک شما:

کد امنیتی را در کادر بنویسید >


XML   English Abstract   Print


Download citation:
BibTeX | RIS | EndNote | Medlars | ProCite | Reference Manager | RefWorks
Send citation to:

Kafash B, Nikoeenezhad Z, Delavarkhalafi A. An iterative algorithm for solving stochastic optimal control via the Markov chain approximation. JoC. 2016; 10 (2) :35-43
URL: http://joc.kntu.ac.ir/article-1-291-fa.html

کفاش بهزاد، نیکویی نژاد زهرا، دلاورخلفی علی. یک الگوریتم تکراری برای حل مسایل کنترل بهینه تصادفی با استفاده از زنجیر مارکوف. مجله کنترل. 1395; 10 (2) :35-43

URL: http://joc.kntu.ac.ir/article-1-291-fa.html



دوره 10، شماره 2 - ( مجله کنترل، جلد 10، شماره 2، تابستان 1395 ) برگشت به فهرست نسخه ها
مجله کنترل Journal of Control
Persian site map - English site map - Created in 0.05 seconds with 31 queries by YEKTAWEB 3667