Mail.ru Group выпустила уже второй клон Prisma на этой неделе. Новое приложение называется Artisto и обрабатывает с помощью нейронных сетей не фотографии, а видео (такая возможность была анонсирована разработчиками Prisma, но ещё не реализована). Вчера принадлежащая Mail.ru Group соцсеть «ВКонтакте» опубликовала в Google Play и Apple App Store приложение Vinci, с помощью которого можно стилизовать фотографии под рисунки и картины.



В настоящее время приложение Artisto доступно только на Android и размещено в Google Play Маркете через Craigpark Limited, неофициальный аккаунт Mail.ru Group, который используется холдингом для тестирования и экспериментов. По словам вице-президента Mail.ru Group Анны Артамоновой, приложение было разработано специалистами по машинному обучению всего за восемь дней, поэтому сейчас оно сырое и фактически находится в открытом бета-тестировании.



Анна Артамонова, вице-президент Mail.Ru Group, руководитель бизнес-подразделения «Почта и портал»:

«Технологии, связанные с нейронными сетями и машинным обучением, так или иначе применяются при создании практически всех наших продуктов, в том числе рекламы, антиспам-системы, поиска. После выхода Prisma нам, как и многим другим, стало интересно поэкспериментировать с возможностями нейросетей в области переноса стиля, и мы стали заниматься видео. Первый результат появился довольно быстро — всего за пару недель. То, что вы видите — тестовая версия, и сейчас мы собираем обратную связь. Проект развернут на инфраструктуре Mail.Ru Group».

После запуска приложение предлагает снять видео длиной не более четырёх секунд, а затем выбрать фильтр для его обработки (сейчас доступно 14 фильтров) и позволяет поделиться результатом с друзьями в соцсетях.

Приложение действительно сырое. Как показало тестирование, часть функций в нём не работает или работает неправильно: к примеру, не включается вспышка камеры (хотя кнопка для её включения есть в приложении), изображение с фронтальной камеры переворачивается вниз головой, а при отправке в соцсети видео поворачивается на 90 градусов. Кроме того, не работает обработка уже записанных видео — при выборе фрагмента записи из галереи появляется сообщение об ошибке кодирования.

Принцип работы Artisto, Prisma, Vinchi и большинства подобных сервисов основан на механизмах «генераторных сетей», которые были предложены в научной работе «Texture networks: Feed-forward synthesis of textures and stylized images». Авторы этой работы — Дмитрий Ульянов и Вадим Лебедев, занимающиеся исследованиями нейронных сетей и искусственного интеллекта в «Яндексе», а также Виктор Лемпицкий и Андреа Ведальди из Оксфорде. Весной 2016 года Ульянов и Лебедев запустили сервис LikeMo.net, который обрабатывал фотографии в стиле работ Моне, Ренуара, Ван Гога и других художников. Приложение Prisma, работающее по тому же принципу, стало эталоном, хотя и ему есть куда развиваться.