Вчені з японського Університету Васеда створили на базі надточних нейронних мереж систему штучного інтелекту, здатну розфарбовувати чорно-білі фотографії без втручання людини.
Як зазначає N + 1, головна проблема розфарбовування фотографій полягає в тому, що штучний інтелект часто не може домогтися правдоподібного кольору без участі людини. Однак японським вченим вдалося досягти серйозного успіху в цій галузі.
Розроблена дослідниками система вміє самостійно аналізувати чорно-біле зображення і вибирати відповідні кольори для його розфарбовування. Система складається з чотирьох пов'язаних компонентів: мережі функцій низького рівня, мережі функцій середнього рівня, мережі глобальних функцій і розфарбовувати мережі.
В ході роботи дослідники тренували нейромережі за допомогою 2,5 млн фотографій з бази даних класифікованих зображень. Вчені перетворювали кольорову картинку в чорно-білу, завантажували її в систему, а потім вираховували среднеквадратическую помилку при обробці зображення і давали зворотний зв'язок. В результаті їм вдалося добитися натуральності кольору оброблених кадрів в 92,6% випадків.
На першому етапі роботи в мережу завантажується чорно-біле зображення. Як відзначають дослідники, воно може бути будь-якого розміру, але найкраще обробляються фотографії з дозволом 224 * 224 пікселів. Потім нейросеть ідентифікує його тип. Так, якщо вона визначає, що знімок був зроблений в приміщенні, то при розфарбовуванні не використовуватимуться кольору неба або трави. Крім того, нейросеть визначає об'єкти в кадрі і підбирає характерні для них кольору.
Розробка японських учених також може використовувати дані одного зображення для розфарбовування іншого, що дозволяє переносити стиль на фотографію, але для цього бажано, щоб два зображення були подібні за змістом.
Головне обмеження роботи штучного інтелекту полягає в тому, що він може розфарбовувати лише ті зображення, які мають схожість з використаними в процесі для навчання.
N + 1 зазначає, що це не перша розробка такого роду. Раніше дослідники з Каліфорнійського університету в Берклі створили програму, здатну реалістично розфарбовувати чорно-білі фотографії. При оцінці результатів її роботи респонденти в 20% випадків порахували, що знімки були розфарбовані людиною.