Инженеры Apple, Adobe и учёные из Университетского колледжа Лондона разработали технологию, которая позволяет в реальном времени изменить освещённость на фотографии так, будто снимок был сделан в условиях идеальной освещённости.
В этой технологии задействована нейросеть, алгоритмы которой обучены анализировать фотографию и изменять её таким образом, чтобы основной объект был достаточно светлым. Обработка производится почти моментально, то есть снимок на выходе получается визуально более качественным и привлекательным, чем-то, что фотограф видит в видоискателе.
Нейросеть определяет на исходном снимке источники света и отбрасывающие тени объекты, чтобы на основе этих данных осветлить эти объекты, дорисовав новые тени и блики. Звучит как будто это очень просто, но для достижения естественности изображения требуются высокоточные вычисления, невозможные без нейронной обработки. Впрочем, инженеры столкнулись с проблемой анализа и модификации мелких объектов и прозрачных материалов — качество их прорисовки пока недостаточно высокое.
Специалисты отмечают, что подобный результат раньше можно было достичь путём склеивания нескольких снимков, сделанных почти одновременно с разными настройками, а новая технология позволяет обойтись всего одной фотографией, то есть экономит фотографу время и место в памяти устройства. Не исключено, что эта технология впоследствии будет использоваться в продуктах Adobe для обработки существующих фотографий и в устройствах Apple для получения более качественных фотографий и видеозаписей.