نوآوری جدید اپل در بهبود کیفیت تصاویر با نور کم تأثیرگذار است

تصاویری که در شرایط نوری ضعیف ثبت می‌شوند، معمولاً با نویز دیجیتال مواجه هستند؛ این معضل هنگامی به وقوع می‌پیوندد که حسگر تصویر نتواند نور کافی را دریافت کند. شرکت‌هایی چون اپل در گذشته به‌منظور غلبه بر این مشکل از الگوریتم‌های پیچیده پردازش تصویر بهره جسته‌اند، اما متاسفانه این روش‌ها غالباً منجر به ایجاد تصاویری نرم و نزدیک به آثار نقاشی رنگ روغن می‌شود که در آن جزئیات ظریف تصویر محو گردیده و عناصری از محتوا به‌سختی قابل تجزیه و تحلیل یا خواندن خواهند بود.

بر اساس گزارش ایتنا، برای برطرف کردن این محدودیت‌ها، پژوهشگران اپل به همراه دانشگاه پردو مدلی به نام «DarkDiff» را طراحی کرده‌اند. در این تکنیک، به‌جای اتکاء به هوش مصنوعی در مرحله پس از پردازش، مدل متن باز «Stable Diffusion» که بر میلیون‌ها تصویر تمرین دیده، به شیوه‌ای هدایت می‌شود تا بتواند جزئیات واقعی در نواحی تاریک تصویر را شناسایی و دوباره سازی کند و این فرآیند به‌طور مستقیم در خط پردازش سیگنال تصویر ادغام می‌شود.

 

در این متد، هوش مصنوعی به لحاظ بازسازی محتوا به‌طرزی جامع تصویر را دگرگون می‌سازد، در حالی که واحد پردازش تصویر (ISP) دوربین هنوز مسؤول پردازش اولیه داده‌های خام حسگر، شامل تراز سفیدی و حذف تداخل رنگی، می‌باشد. پس از آن، «DarkDiff» تصویر RGB خطی را پردازش، نویز آن را حذف کرده و به‌طور مستقیم نسخه نهایی sRGB را تولید می‌نماید.

علاوه بر این، «DarkDiff» از روشی به نام مسیریابی بدون طبقه‌بندی‌کننده استفاده می‌کند که تاثیرگذاری مدل را در روند بازسازی تصویر نسبت به چارچوب‌های بصری از پیش آموزش‌دیده کنترل می‌کند. کاهش جهت‌گیری منجر به تولید الگوهای نرم‌تری و افزایش آن به خلق بافت‌های شفاف‌تر و جزئیات دقیق‌تر می‌انجامد، گرچه این امر ممکن است ریسک ظهور بخش‌های ناخواسته یا تولید محتوای جعلی را نیز به همراه داشته باشد.

قابل ذکر است که در این پژوهش اشاره‌ای به زمان ارائه فناوری «DarkDiff» برای گوشی‌های آیفون نشده است.