Сначала анимация, теперь голос. Следующим шагом, видимо, будет возможность поговорить с «цифровым клоном» умершего родственника

Программа Deep Nostalgia, созданная MyHeritage ранее и позволявшая анимировать портреты умерших людей, стала вирусной, и с тех пор было создано более 100 миллионов анимаций. Теперь генеалогическая компания вернулась к программе LiveStory, которая добавляет вокальное повествование говорящему портрету.

Как и в случае с Deep Nostalgia, когда пользователи могли загрузить неподвижную фотографию и превратить ее в короткую анимацию с помощью алгоритмов глубокого обучения, в LiveStory планируется аналогичный функционал. Для этого MyHeritage объединила усилия с израильской компанией D-ID, чтобы говорящий портрет родственника рассказал историю своей жизни.

Как оживить портрет умершего человека

Конечно, сопровождающая звуковая дорожка не будет соответствовать реальному голосу вашего предка или родственника, но сервис предлагает более 140 голосов на 31 языке на выбор. MyHeritage надеется добавить пользовательские образцы голоса в качестве функции когда-нибудь в будущем.

Жизненные события, выделенные в видео-биографии, могут быть автоматически сгенерированы на основе информации, содержащейся в генеалогическом древе пользователя на MyHeritage, или с помощью текста от первого лица, введенного вручную в виде кратких разделов, называемых главами, а также дополнительных изображений, помогающих дополнить рассказ.

Затем инструмент сшивает изображения, преобразует текст биографии в речь, а затем применяет технологию видеовизуальной реконструкции для создания анимации и синхронизации губ лица и рта предка, чтобы рассказ «говорящей головы» выглядел более реалистично. Эта часть процесса может занять от 30 секунд до нескольких минут, в зависимости от длины повествования.

Сообщается, что LiveStory работает с черно-белыми фотографиями так же хорошо, как и с цветными или раскрашенными, и полученное видео можно воспроизводить как есть или редактировать дальше, а затем делиться им с друзьями и семьей. Кажется, будущее уже наступило.