हेफ़ेई इंस्टीट्यूट ऑफ फिजिकल साइंस (एचएफआईपीएस), चाइनीज एकेडमी ऑफ साइंसेज (सीएएस) में प्रोफेसर झी चेंगजुन और एसोसिएट प्रोफेसर झांग जी के नेतृत्व में शोधकर्ताओं की एक टीम ने फूरियर-आईएसपी का अनावरण किया, जो रॉ-टू-एसआरजीबी के लिए एक नया डीप-लर्निंग आधारित ढांचा है।छवि रूपांतरण.

में प्रकाशन हेतु इस दृष्टिकोण को स्वीकार कर लिया गयाएसोसिएशन फॉर द एडवांसमेंट ऑफ आर्टिफिशियल इंटेलिजेंस (AAAI) की 2024 की कार्यवाही.

RAW छवियों को sRGB छवियों में परिवर्तित करने से स्मार्टफोन फोटोग्राफी की दृश्य अपील और उपयोगिता बढ़ जाती है।हालाँकि, वर्तमान विधियाँ रंग और स्थानिक संरचना सटीकता के साथ संघर्ष करती हैं, विशेष रूप से रिज़ॉल्यूशन और छवि प्रकार भिन्नताओं के साथ।रंग मानचित्रण का संयोजन औरस्थानिक संरचनाके बीच जटिल परस्पर क्रिया के कारण उप-इष्टतम परिणाम उत्पन्न करता हैशैलीऔर छवियों के भीतर संरचना।इन चुनौतियों से पार पाने के लिए टीम ने एक उपन्यास विकसित किया है

रूपरेखाफूरियर-आईएसपी कहा जाता है।इमेज सिग्नल प्रोसेसिंग पाइपलाइन से प्रेरित होकर, यह दृष्टिकोण फ़्रीक्वेंसी डोमेन के भीतर छवि की शैली और संरचना को अलग करता है।

टीम के सदस्य झांग जी ने कहा, "इसने स्वतंत्र अनुकूलन को सक्षम किया।"

फूरियर-आईएसपी में तीन उप-नेटवर्क होते हैं: एक संरचनात्मक विवरणों को परिष्कृत करने के लिए, दूसरा सटीक रंग सीखने के लिए, और तीसरा इन तत्वों को सहजता से मिश्रित करने के लिए।शैली और संरचना का यह पृथक्करण छवि रूपांतरण में बेहतर प्रदर्शन को सक्षम बनाता है, जिससे तेज और अधिक सटीक रंग और संरचनात्मक विवरण तैयार होते हैं।

विभिन्न डेटासेटों में व्यापक मूल्यांकन इस बात की पुष्टि करते हैं कि फूरियर-आईएसपी गुणात्मक और मात्रात्मक मूल्यांकन में अत्याधुनिक परिणामों का एहसास करता है, जो सटीक और विस्तार से पुनरुत्पादन में मौजूदा तरीकों को पार करता है।यह संरचनात्मक और शैली की जानकारी दोनों को संभालने में मजबूत हस्तांतरणीयता और प्रभावशीलता को प्रदर्शित करता है, जिससे बेहतर रंग प्रजनन और बनावट संरक्षण सुनिश्चित होता है।विशेष रूप से, फूरियर-आईएसपी ने ZRR डेटासेट में 0.17dB का प्रभावशाली PSNR सुधार हासिल किया।

टीम के अनुसार, यह ढांचा छवि प्रसंस्करण के क्षेत्र में एक नवीन अंतर्दृष्टि प्रस्तुत करता है, जो विशेष रूप से मोबाइल फोटोग्राफी में उच्च-निष्ठा छवि रूपांतरण प्राप्त करने में शैली-संरचना डिकॉउलिंग की क्षमता को प्रदर्शित करता है।

कागज हैउपलब्धपरarXivप्रीप्रिंट सर्वर.

द्वारा उपलब्ध कराया गयाहेफ़ेई भौतिक विज्ञान संस्थान, चीनी विज्ञान अकादमी