TY - JOUR T1 - Fusion of Thermal Infrared and Visible Images Based on Multi-scale Transform and Sparse Representation TT - ادغام تصاویر مرئی و مادون قرمز حرارتی بر اساس تبدیلات چندمقیاسی و نمایش پراکنده JF - kntu-jgit JO - kntu-jgit VL - 8 IS - 3 UR - http://jgit.kntu.ac.ir/article-1-582-fa.html Y1 - 2021 SP - 39 EP - 59 KW - Visible image KW - Thermal infrared image KW - Image fusion KW - Multi-scale transform KW - Sparse representation N2 - با توجه به تفاوت طیف مرئی و مادون قرمز حرارتی، ترکیب این دو نوع تصویر منجر به درک بهتر مشخصات عوارض و محیط می­گردد. تصاویر مادون قرمز حرارتی، برای تشخیص اهداف از پس زمینه آنها بر اساس تفاوت تابش حرارتی در هر شرایط آب و هوایی و در طول روز یا شب و همچنین محاسبه دمای سطح زمین اهمیت فراوانی دارند. این باندها توان تفکیک مکانی پایینی داشته و تشخیص عوارض در آنها با سختی همراه است. یکی از روش های مفید برای تولید تصاویر حرارتی با توان تفکیک مکانی بالا، ادغام این تصاویر با تصاویری با رزولوشن مکانی بالاتر نظیر باندهای مرئی می­باشد. بنابراین، با ادغام این تصاویر می­توان از اطلاعات تابش حرارتی در تصاویر مادون قرمز حرارتی و جزئیات مکانی در تصاویر مرئی به صورت همزمان بهره برد. تبدیلات چند مقیاسی (MST) و نمایش پراکنده(SR) به طور گسترده برای ادغام تصاویر استفاده می­شوند. به منظور بهبود عملکرد ادغام تصاویر، این روش­ها با یکدیگر ترکیب می­شوند. در روش ترکیبی، ابتدا تبدیل چندمقیاسی بر روی هر یک از تصاویر اولیه از قبل هم مرجع شده اعمال می­شود تا ضرایب پایین گذر و بالاگذر آنها بدست آید. سپس، تصاویر پایین گذر با روش ادغام بر مبنای نمایش پراکنده و تصاویر بالاگذر با استفاده از مقادیر مطلق ضرایب ترکیب می­شوند. در نهایت تصویر ادغام شده با استفاده از تبدیل معکوس چند مقیاسی بر روی ضرایب ادغام شده به دست می­آید. در این مقاله، نه روش ادغام تصاویر بر مبنای تبدیلات چندمقیاسی و تئوری نمایش پراکنده شامل تبدیل هرم لاپلاسی (LP)، نسبت هرم پایین گذر (RP)، تبدیل ویولت (Wavelet)، تبدیل ویولت مختلط دوگانه درختی (DTCWT)، تبدیل کرولت (CVT)، تبدیل کانتورلت بدون کاهش بعد (NSCT)، روش نمایش پراکنده (SR)، ترکیب هرم لاپلاسی با روش SR (LP-SR) و ترکیب تبدیل کانتورلت با روش SR (NSCT-SR) را با استفاده از تصاویر FLIR و تصاویر ماهواره­ای لندست 8 مورد ارزیابی قرار می­دهیم. برای ارزیابی کارآیی روشهای مختلف ادغام از سه معیار ارزیابی کمی شامل آنتروپی (EN)، اطلاعات متقابل (MI) و معیار ادغام بر مبنای گرادیان (QAB/F) استفاده کردیم. با وجود فقدان پوشش طیفی میان باندهای مرئی و مادون قرمز حرارتی تصویر لندست 8، تصاویر ادغام شده به روش ترکیبی LP-SR بالاترین مقادیر معیارهای کمی را داشته (EN=7.362, MI=2.605, QAB/F =0.531) و از نظر بصری نیز کیفیت بهتری دارند. این بدان معنی است که همزمان با بهبود جزئیات مکانی، اطلاعات تابش حرارتی نیز به خوبی حفظ شده است. با مقایسه مقادیر معیارهای کمی، روشهای RP ، LP و NSCT در رتبه های بعدی قرار دارند. در تصاویر FLIR نیز نتایج مشابهی حاصل شده است. M3 10.52547/jgit.8.3.39 ER -