Нейросеть поможет обрабатывать фотографии в реальном времени

Ученые из Массачусетского технологического института, совместно со специалистами из Google, создали алгоритм для нейросети, который сможет ретушировать изображения в смартфонах мгновенно – в режиме реального времени. Технология будет показана на конференции по компьютерной графике SIGGRAPH 2017 в Лос-Анджелесе. Статья, где описываются возможности нового алгоритма, опубликована в журнале ACM Transactions on Graphics.

Такие технологии обработки фотографий с использованием нейросетей – не новинка. Однако, в отличие от предыдущих, новый алгоритм может обрабатывать фотографии в реальном времени, задействуя при этом мощность самого смартфона.

Почему использование нейросетей выгодно?

Разработки современных девайсов улучшают камеры, повышая качество линз или матриц. Однако такие усовершенствования не могут быть бесконечными: из-за маленького размера смартфонов подобные изменения обходятся дорого. По этой причине сейчас производители концентрируют внимание на развитии программной составляющей смартфонов, а не аппаратной. Так, Google включает в приложение для камер своих девайсов функцию HDR+.  С помощью нее можно объединить несколько снимков с различной экспозицией в один. Главный минус этого алгоритма в том, что его можно применять лишь к уже сделанным фотографиям.

Также специалисты Google в начале этого года придумали алгоритм для нейросети, способный улучшать разрешение изображений, например, с  8×8 пикселей до 32×32 пикселей.

Эра нейросетей в новом поколении смартфонов

Новый алгоритм нейросети дает возможность пользователям мгновенно оценить качество сделанной фотографии. В основе этого алгоритма лежит так называемая сверточная нейросеть. Пока что ученые используют уменьшенную копию фотографии, а затем результаты обработки переносят на исходную фотографию. По словам авторов технологии, такой алгоритм будет использоваться в смартфонах в обозримом будущем. Однако сейчас она пока еще не может быть внедрена из-за слабой мощности гаджетов.

[myexpertblock uphoto=»http://sciencepop.ru/wp-content/uploads/2017/03/Zajtseva-Aleksandra-Alekseevna.jpg» uname=»Александра Алексеевна Зайцева» uabout=»кандидат технических наук, старший научный сотрудник лаборатории автоматизации научных исследований Санкт-Петербургского института информатики и автоматизации РАН«]Я допускаю, что внедрение таких алгоритмов в смартфоны в обозримом будущем вполне возможно, но, безусловно, только на мощных смартфонах. Многие компании предлагают уже свои алгоритмы, может, не на нейронных сетях, но достаточно интересные для быстрого ретуширования фотографий. Если заглянуть немного дальше и подумать над тем, уйдут ли в прошлое фоторедакторы и Photoshop, на мой взгляд, отказаться полностью мы от них не сможем. Все будет зависеть от конкретного человека: кого-то будет устраивать этот способ ретуширования и обработки фотографий, а кому-то будет удобнее использовать стандартные программы под свои потребности.[/myexpertblock]

ПОХОЖИЕ СТАТЬИ

Новые статьи