Слово «дипфейк» уже не удивляет активных пользователей Интернета. И то, что еще недавно казалось шуткой, сегодня кажется интересной и перспективной технологией. Дипфейком мы считаем некий чужеродный персонаж, внедренный искусственным образом в видео-ролик с помощью нейронных сетей и машинного обучения. Но смысл у этого явления намного более широкий.
💚 ПО ТЕМЕ: Levitagram, или как на iPhone создавать фото с эффектом левитации (полета).
Так, искусственное состаривание фотографий с помощью FaceApp тоже считается дипфейком. Эта технология постоянно находит новые сферы применения, еще год назад казавшиеся немыслимыми. Если раньше мы удивлялись тому, как оживала старая фотография, то сегодня можно заставить персонаж на снимке петь выбранную песню.
Наверняка вы помните, как в фильмах про Гарри Поттера фотографии на стенах оживали. Это казалось волшебством, пока в Интернете не появились сервисы с подобными возможностями. Снимки прогонялись через нейронные сети, а на выходе появлялся небольшой видеоролик. А ведь двигающийся человек мог жить в те времена, когда и кино снимать-то не умели.
💚 ПО ТЕМЕ: DMD Clone, или как создать двойника на фото (клонировать объекты) в iPhone.
Как анимировать фотографию и научить ее петь?
На просторах App Store и Google Play сейчас полно приложений, развивающих концепцию дипфейка, позволяя не просто оживлять фотографию, но и делать движения персонажа более активными, научив его петь выбранную песню.
Сразу стоит подчеркнуть, что если ваша цель – простая анимация фотографии, то лучше для этой цели выбрать специализированное приложение, к примеру, Deep Nostalgia. Если же нужна именно озвучка впридачу к фотографии, то мы предлагаем опробовать три бесплатных приложения:
«Avatarify: Оживи любое селфи» (скачать для iPhone / скачать для Android)
«Face Dance: Анимируйте фото» (скачать для iPhone / скачать для Android)
«Mimic — AI Photo Face Animator» (скачать для iPhone / скачать для Android)
Принцип всех этих приложений практически идентичен — сервис сам проделает основную работу. От пользователя требуется лишь загрузить фотографию и выбрать для нее композицию из списка.
1. Скачайте одно из приложений, указанных выше. В качестве примера рассмотрим использование приложения «Avatarify: Оживи любое селфи».
2. После запуска программы откажитесь от платной подписки, нажав на крестик в верхнем углу. Зачастую преимущества платной версии заключаются в удалении водяного знака на получившемся видео.
3. Предоставьте программе доступ к фотографиям на вашем устройстве.
4. Треки для исполнения разделены на группы, выберите подходящую категорию и песню. Персонажи анимируются по-разному, в зависимости от выбранной для них песни. И стилистика музыки напрямую влияет на манеру исполнения, в итоге она может значительно разниться.
5. Выберите готовый снимок из галереи или создайте новую фотографию для обработки. Лучше всего подойдут селфи-снимки, где человек смотрит прямо в кадр и по возможности видны зубы. Стоит подобрать максимально соответствующую этому критерию фотографию.
6. Просто дождитесь окончания обработки фотографии и ее переформатирования в видео.
7. Сохраните видео в галерею или поделитесь им посредством социальных сервисов.
Несколько примеров и Сети:
1人で観て
吹いてる😂
後ろのゴリスがアカン🤣#dbd
#DeadbyDaylight
#Avatarify pic.twitter.com/da5ftncuIK— yuunagi (@yuunagi9mama271) October 30, 2023
ターミネーターT-800も祝福🎉
久々に #Avatarify で歌わせてみた♪
💙ここね／キュアスパイシー💙
🎂お誕生日お祝い🎂#デパプリ #プリキュア #precure pic.twitter.com/0ERfoMSLnh— 上北ふたご (@kamikitafutago) March 13, 2022
The true use of Wombo is posthumously expanding someone’s taste in music. pic.twitter.com/Ur4SlUOV2d
— Sam Moore (@IAMSMOORES) March 11, 2021
This WOMBO AI is crazy lol pic.twitter.com/A7aVT4ISBN
— heyben10 (@HeyBen10_) March 10, 2021
I’m uncomfortable @WOMBO pic.twitter.com/6FERAp2zyB
— (trsh) birschbox (@birschbox) March 11, 2021
Всегда знала, что пчела из соседнего двора сильная женщина #wombo pic.twitter.com/YudhEnPviN
— Zoya Belova (@AliraSirin) March 12, 2021
💚 ПО ТЕМЕ: Color Accent: Как изменять отдельные цвета на фото на черно-белые в iPhone и iPad.
В заключение
Говоря о достоинствах подобных приложений нельзя не упомянуть о ключевой его возможности – поддержке липсинка. То есть происходит не просто анимация фотографии под музыку, но и рот человека открывается четко в такт, словно бы песня действительно исполняется. Достаточно ознакомиться с некоторыми примерами обработки нейросетью даже старинных фотографий, как будет видно различные движения губ и качественное попадание в слова. На некоторых песнях эффект проявляет себя особенно четко.
Пока говорить о качественном результате для всех фотографий и песен сложно – все же это забавный, но эксперимент. Впрочем, подобрав соответствующий снимок, можно добиться и лучшего результата. А представить в виде исполнителя вы можете не только себя или своих знакомых, но и публичные фигуры, политиков, и даже животных, мультперсонажей, скульптуры и другие неодушевленные предметы.
🔥 Смотрите также: