luckyea77 (luckyea77) wrote,
luckyea77
luckyea77

Адаптивная раздельная нормализация стала лучшим алгоритмом для превращения фото в комиксы



Польские программисты выявили лучший алгоритм, который переносит стиль с комиксов на снимки. Оказалось, что лучше всего с этим справляется алгоритм адаптивной раздельной нормализации, представленный в 2015 году учеными из Корнеллского университета. Статья опубликована на сайте arXiv.org, перевод материала сделали N+1.

Подход ученых из Германии основывался на работе сверточных нейросетей — они успешнее всего справляются с обработкой и анализом изображений. Именно на основе подобного алгоритма работает приложение Prisma.

Сверхточные нейросети обучали признакам исходного и целевого изображения, а также последующей генерации новой картинки при помощи белого шума. Главный недостаток метода — для него нужны огромные ресурсы. Для обработки изображения с разрешением 512×512 пикселей компьютеру с мощным графическим процессором придется потратить целую минуту.



Поэтому авторы исследования анализировали только алгоритмы, которые тратят на обработку не более двух секунд. Первый способ адаптивной раздельной нормализации (AdaIn, adaptive instance normalization) во многом основан именно на нем, но включает в себя также функцию потерь, за счет чего время работы удалось существенно сократить. Однако качество этого переноса оказалось сильно ограничено.

Улучшили метод китайские разработчики, которые за счет увеличения количества слоев научились отбеливать и раскрашивать изображения в целевой стилистике. Они назвали такой подход «универсальным переносом стиля» (UST-WCT, universal style transfer). В работе подхода участвуют четыре слоя и адаптивно раздельная нормализация.

Все рассмотренные подходы использовали на нескольких изображениях с разрешением 600×450 пикселей. В итоге несколько сотен изображений с комиксами дали посмотреть 100 людям. Почти треть из них назвали картинки, сделанные с применением адаптивно-раздельной нормализации, больше всего похожими на комиксы.

Tags: технологии
Subscribe

Posts from This Journal “технологии” Tag

promo luckyea77 june 21, 2015 20:04 27
Buy for 10 tokens
В этой записи я буду давать ссылки на посты с лекциями и уроками в этом блоге: Учебные материалы и тесты: Дистанционное образование Правила дорожного движения 11 ресурсов для бесплатного образования Сайты для обучения программированию Игры, в которых нужно писать код: Grid Garden, Elevator…
  • Post a new comment

    Error

    default userpic

    Your IP address will be recorded 

    When you submit the form an invisible reCAPTCHA check will be performed.
    You must follow the Privacy Policy and Google Terms of use.
  • 0 comments