让蒙娜丽莎开口唱歌,让古人朗诵,让偶像和你说话都可以实现了。还能生成讲禅语的小和尚、思维老者、黑人版或俄罗斯版的哈利波特。很多人已经打造自己的书单账号、小红书账号了,只需上传图片和音频即可轻松完成。
方法很多,下面介绍用AI文生图、文生视频工具实现的方法,注意,无论是本地stable diffusion、SadTalker还是CrazyTalk的运行效率均依赖于电脑硬件性能。
方法一:Sad Talker插件实现,本地运行,免费
第一步,准备一张人像图,也可以借助AI工具生成一些人物图片,比如Dreamina、文心一格、通义万相、均可根据用户的想法轻松生成所需图片。
第二步,安装Sad Talker插件。SadTalker是一个让照片说话的模型,是由西安交通大学的研究人员提出的,它可以让照片里的人物跟随音频的输入动起来,且头部运动、面部表情比较真实。
第三步,将图片和音频拖拽到对应框框里,点击“生成”即可

sadtalker帮你一键生成开口说话的图片
方法二:SD+Sad Talker插件实现,本地运行,免费
第一步,准备一张人像图,也可以借助AI工具生成一些人物图片,比如Dreamina、文心一格、通义万相、均可根据用户的想法轻松生成所需图片。
第二步,本地安装Stable Diffusion。安装Sad Talker插件:打开并运行SD webui,然后选择“扩展”,在“从网址安装”里,输入以下地址https://github.com/OpenTalker/SadTalker,点击安装,需要等待3~5分钟。安装完成后,重启一下SD webui,即可在功能栏里看到“SadTalker”插件栏了。
第三步,将图片和音频拖拽到对应框框里,点击“生成”即可
方法三:CrazyTalk,本地运行,有试用期
第一步,准备一张人像图,也可以借助AI工具生成一些人物图片,比如Dreamina、文心一格、通义万相、均可根据用户的想法轻松生成所需图片。
第二步,下载CrazyTalk。
第三步,将图片和音频拖拽到对应框框里,点击“生成”即可