Lightricks, стартап из набора приложений для редактирования фотографий и видео, включая, прежде всего, селфи-редактор Facetune 2, использует свои возможности ретуширования для видео. Сегодня компания запускает Facetune Video, приложение для редактирования селфи, которое позволяет пользователям ретушировать и редактировать свои селфи и портретные видео, используя набор инструментов на базе AI.
В то время как на рынке есть другие редакторы селфи-видео, большинство из них в основном сосредоточены на редактировании, включающем фильтры и пресеты, виртуальное добавление макияжа или использование AR или стикеров для украшения вашего видео. В то же время Facetune Video фокусируется на создании фотореалистичного видео, предлагая набор функций, аналогичных тем, которые есть во флагманском приложении Lightricks Facetune. ,
Это означает, что пользователи могут ретушировать свое лицо с помощью инструментов для сглаживания кожи, отбеливания зубов и изменения формы лица, а также для улучшения цвета глаз, макияжа, маскировки, свечения и матовости. Кроме того, пользователи могут настраивать инструменты для общего редактирования видео, например регулировать яркость, контрастность, цвет и т. Д., Как позволяют другие приложения для редактирования видео. И эти изменения могут быть применены в режиме реального времени, чтобы увидеть, как они выглядят во время воспроизведения видео, а не по факту.
Кроме того, пользователи могут применять эффект только к одному кадру, а технология постобработки Facetune Video и нейронные сети будут одновременно применять эффект к одной и той же области каждого кадра на протяжении всего видео, что упрощает быстрое ретуширование проблемной области без необходимости идти кадр за кадром, чтобы сделать это.
«В Facetune Video 3D-модель лица играет важную роль; пользователи редактируют только один видеокадр, но мы за кадром автоматически проецируем местоположение своих правок на координаты сетки 2D лица, полученные из 3D-модели лица, а затем последовательно применяем их ко всем другим кадрам видео », Объясняет Лайтрикс соучредитель и CEO Зеев Фарбам. «Приложение Lightricks должно быть не только мощным, но и забавным в использовании, поэтому для нас очень важно, чтобы все это происходило быстро и без проблем», – говорит он.
Пользователи также могут сохранять свои любимые функции редактирования как «предустановки», что позволяет им быстро применять свои предпочтительные настройки к любому видео автоматически.
В будущей версии приложения компания планирует ввести функцию «исцеления», которая, подобно Facetune, позволит пользователям легко удалять пятна.
Кредиты изображений: Lightricks
Технология, которая делает эти селфи-видео редактирования, включает в себя глубокие нейронные сети Lightricks, которые используют обнаружение черт лица и геометрический анализ для ретуширования приложений. Эти процессы работают в режиме реального времени без предварительной передачи данных в облако. Также нет задержки или задержки при рендеринге файлов.
Кроме того, Facetune Video использует обнаружение черт лица вместе с искусственным интеллектом 3D моделирования лица, чтобы гарантировать, что каждая часть лица пользователя будет захвачена для редактирования и ретуширования, заявляет компания.
«То, что мы также делаем, – это использование легких нейронных сетей. Еще до того, как пользователь начал ретушь своего селфи-видео, алгоритмы на базе AI уже работают, поэтому пользовательский интерфейс быстрый и интерактивный », – говорит Фабрам.
Приложение также выполняет автоматическую сегментацию более сложных частей лица, таких как внутренняя часть глаза, волосы или губы, что помогает достичь более точного конечного результата.
«Он находит баланс между точностью в силе моделирования лица, которое мы используем, и скоростью», – добавляет Фабрам.
Одной из проблем здесь было преодоление проблемы дрожания эффектов, когда примененный эффект дрожит при воспроизведении видео. Компания не хотела, чтобы у ее видео получилась эта проблема, из-за чего конечный результат выглядит бесполезным, поэтому она работала над тем, чтобы устранить любые дрожащие эффекты и другие проблемы с отслеживанием лиц, чтобы в конечном итоге видео выглядели более отточенными и профессиональными.
Приложение основывается на существующем успехе компании и узнаваемости бренда с помощью Facetune. Например, в новом приложении алгоритмы ретуширования имитируют оригинальную версию Facetune 2, поэтому пользователи, знакомые с Facetune 2, смогут быстро освоить инструменты ретуши.
Кредиты изображений: Lightricks
Запуск нового приложения расширяет Lightricks в направлении видео, которое стало более популярным способом самовыражения в социальных сетях благодаря растущему использованию приложений, таких как TikTok, и таких функций, как Instagram Stories, например.
Ранее флагманским видеопродуктом Lightricks, однако, был Videoleap, который фокусировался на более традиционном редактировании видео, а не на селфи-видео, где можно было бы использовать ретушь лица.
Facetune стал настолько широко использоваться, его имя стало глаголом – как, например, «она переделывает свои фотоснимки». Но его также иногда критиковали за нереальные результаты. (Конечно, это больше на пользователях приложения, смещающих полосу сглаживания до конца.)
В его наборе приложений, который включает в себя оригинальное приложение Facetune (Facetune Classic), Facetune 2, Seen (для историй), Photofox, Video Leap, Enlight Quickshot, Pixaloop, Boosted и другие, включая недавно запущенный художественный редактор Quickart, Компания произвела более 350 миллионов загрузок.
Его приложения также теперь достигают почти 200 миллионов пользователей по всему миру. И благодаря своей модели подписки Lightricks теперь видит то, что Farbam описывает как доходы, которые «экспоненциально растут по сравнению с прошлым годом», но которые постоянно реинвестируются в новые продукты.
Как и другие приложения, Facetune Video будет монетизироваться посредством подписки. Приложение можно бесплатно использовать, предлагая VIP-подписку на дополнительные функции по цене 8 долларов в месяц, 36 долларов в год или разовую покупку в размере 70 долларов.
Подписчики Facetune 2 также получат скидку на годовую подписку. Компания также продаст приложение в своем наборе Social Media Kit в App Store, которое включает в себя Facetune Video, Facetune 2, Seen и в ближайшее время, нераскрытое четвертое приложение. Однако компания пока не предлагает единой подписки, которая обеспечивает доступ ко всем прилагаемым приложениям.