دراین تحقیق با توجه به ارتباط نزدیک عوامل هواشناسی و نحوه پخش موادآلوده کننده در هوا، ابتدا هواشناسی آلودگی هوا مورد بررسی قرار گرفته است. سپس در ادامه مسئله ، کنترل دینامیک آلودگی هوا در شهرهای بزرگ به صورت یک مسئله تصمیم گیری مارکوف فرمولبندی شده و روش تکرار سیاست هاوارد برای حل این مسئله ارائه می شود . در پایان کاربرد مدل در کنترل میزان آلودگی هوای شهر تهران نشان داده می شود.