全网火爆的AI“复活”已故老人,照片变视频,AI语音视频合成
最近各大短视频平台AI复活已故老人的视频火爆了,还上了热搜,今天就说一说这类短视频是如何做的?
原理如下:
老照片利用AI修复,使照片变得清晰
利用AI语音生成已故老人的语音
将修复的老照片与已故老人的语音用视频合成工具进行合成
一,修复老照片
之前分享过腾讯ARC的人像修复,主要还是免费的,有需求的可以去腾讯ARC官网体验
二,生成已故老人的语音
音频生成我们可以用百度飞浆,打开百度飞浆官网用百度账号登录(第一次登录可能需要填写点信息,按需填写即可)
登录成功点击搜索框-搜索有手就行,点击第一个项目
点击运行一下,CPU选择V100 32GB,点击确定进入项目
点击运行全部Cell,运行需要时间,等待即可
运行结束后双击右侧的untitled.streamlit.py,然后点击在浏览器打开
下拉点击Browse files上传音频
这里是需要准备至少一分钟的语音的,最好是wav格式的语音,文件名需要为数字,比如00001.mav,音频数量需要大于5条
上传成功后点击检验数据,确认数据数量是否足够
然后训练模型,第一次训练步骤选择1000次,效果不佳再增加,训练完成后到出模型
现在开始进行语音合成,选择刚才训练的模型进行合成
合成完成后下载,下载完成后不用记得停止哦~
三,将照片与语音进行视频合成
视频合成我们可以用D-ID,注册账户可以生成5分钟的视频,看不懂英文的可以翻译成中文
打开D-ID官网,注册账户登录(可以用邮箱注册,不过需要验证邮箱),点击Create Video
点击ADD上传已故老人的照片
点击右边的Audio上传生成的语音
最后点击GENERATE VIDEO生成视频即可