در این مقاله، یک روش عددی برای حل مساله کنترل بهینه تصادفی با استفاده از زنجیرهای مارکوف ارائه شدهاست. بدین ترتیب که، ابتدا فرایند پخش کنترلی وضعیت سیستم با استفاده از یک زنجیر مارکوف کنترلی روی یک فضای وضعیت متناهی تقریب زده میشود. سپس تقریبی از تابع هزینه اولیه با استفاده از این زنجیر مارکوف تقریبی، بهدست میآید. برای اثبات همگرایی روش و یافتن یک زنجیر مارکوف تقریبی مناسب برای فرایند پخش، باید...

ما در این مقاله نرخ انتروپی نسبی تیسالیس بین یک زنجیر مارکوف همگن و زنجیر مارکوف پنهان را مورد مطالعه قرار می‌دهیم که این زنجیر مارکوف پنهان از مشاهده‌های خروجی یک کانال تصادفی، با ورودی زنجیر مارکوف مانای همگن با فضای حالت متناهی، تعریف شده است. برای رسیدن به این هدف، ابتدا انتروپی نسبی تیسالیس بین دو زیر دنباله‌ی متناهی از زنجیرهای مذکور را توسط تعریف انتروپی نسبی  تیسالیس بین دو متغیر تصادفی...

یک کلاس مهم از فرایندهای نقطه ای فضایی کلاس فرایندهای نقطه ای مارکوف است. از آنجا که ثابت نرمال کننده ی چگالی های این فرایند های نقطه ای نامعلوم است، استنباط پارامتری برای این مدل ها با استفاده از روش های معمول امکان پذیر نیست. یک مورد خاص زمانی است که بخواهیم براوردگر بیزی پارامترهای این مدل ها را به دست آوریم. مولر و همکاران (2004) یک روش زنجیر مارکوف مونت کارلوی جدید برای نمونه گیری از توزیع...

هدف از این پایان نامه مطالعه روشی عددی برای حل مسئله انتخاب سبدسهام بهینه با محدودیت های کراندار می باشد که ماکزیمم امیدریاضی تابع مطلوبیت را نتیجه دهد. ایده اصلی این روش تقریب با استفاده از زنجیرهای مارکوف می باشد. در روش تقریب با زنجیر مارکوف، فرآیند کنترل شده اصلی با یک زنجیر مارکوف کنترل شده مناسب روی فضای حالت متناهی تقریب زده می شود، که احتمالات انتقال این زنجیر مارکوف با استفاده از اصل ب...

This article has no abstract.

چکیده ندارد.

چکیده ندارد.

در این مقاله کاربرد توزیع‌های فاز- نوع در مدل‌بندی نرخ¬های مرگ‌ومیر بررسی شده است. متغیر تصادفی فاز- نوع همانند زمان تا لحظه جذب (نقطه پایانی) در زنجیرهای مارکوف پیوسته تعریف شده است. در این مقاله، به جای سن واقعی از سن فیزیولوژیکی استفاده کرده‌ایم که به عنوان شاخص سلامتی تعریف شده است. این سن با توجه به بافت‌ها و ارگان‌های بدن فرد تعیین می‌شود. هر موقعیت زنجیر مارکوف یک سن فیزیولوژیکی درنظرگرف...

چکیده ندارد.

چکیده ندارد.