Интересно, но страшно. В TikTok появился фильтр на нейросети Deep Nostalgia, который «оживляет» фотографии

В TikTok появился фильтр на основе искусственного интеллекта, который позволяет «оживить» практически любую фотографию. Согласно мнению некоторых пользователей, «технология очень интересная, но страшная». 

Фильтр называется «Живое фото» и выполнен на основе нейросети Deep Nostalgia — технология машинного обучения, способная оживлять фотографии. Все что нужно, это запустить программу и навести камеру смартфона на фото. После применения фильтра люди на снимках начинают, например, моргать, двигать зрачками, головой или улыбаться — эффект непредсказуем.

 

Как работает Deep Nostalgia

Технология создает анимацию из статических изображений с помощью глубокого обучения. Затем система анимирует изображение с помощью так называемого «драйвера» — заранее определенная последовательность движения и жестов, таких как моргание, улыбка и поворот голов. Процесс полностью автоматизирован. Чтобы анимация была плавнее, сервис улучшает качество изображения.

Аналоги

Если хотите попробовать что-то похожее, в репозитории по ссылке найдете модель нейросети под названием First Order Model. Она решает задачу анимации изображения без предобучения на анимируемом объекте. Обучившись на множестве видеороликов, изображающих объекты одной категории (например, лица, человеческие тела), разработанная нейросеть позволяет анимировать все объекты, относящиеся к данной категории. 

Реакция пользователей на «Живое фото»

Люди по-разному отреагировали на новинку, но, большая часть мнений, склоняется к тому, что выглядит довольно крипово, особенно при использовании фильтра на фото с умершими. Для многих это сложное чувство, когда «в каком-то смысле получаешь то, за что отдал бы все. С другой стороны, это грубая реконструкция, которая никого не обманет».