网站的功能和作用,阿里巴巴国际站可以做网站吗,合肥网站建设卫来科技,企业网站托管服务常用指南大家好#xff0c;我是风雨无阻。 前一篇#xff0c;我们详细介绍了使用 SadTlaker制作数字人视频案例#xff0c;感兴趣的朋友请前往查看:AI 绘画Stable Diffusion 研究#xff08;十三#xff09;SD数字人制作工具SadTlaker使用教程。 对于没有安装 SadTlaker 插件的朋友…
大家好我是风雨无阻。 前一篇我们详细介绍了使用 SadTlaker制作数字人视频案例感兴趣的朋友请前往查看:AI 绘画Stable Diffusion 研究十三SD数字人制作工具SadTlaker使用教程。 对于没有安装 SadTlaker 插件的朋友可以查看这篇文章AI 绘画Stable Diffusion 研究十二SD数字人制作工具SadTlaker插件安装教程 。 想必用过 SadTlaker 的朋友都知道目前使用 SadTlaker插件制作数字人说话的视频有两个不太理想的地方
1、 生成视频消耗的时间比较长。尤其是显卡和显存比较低的朋友想要制作一个长时间的视频效率更低。
笔者亲测使用3060 12G显卡制作一段15s 左右的视频需要10分钟左右。
2、目前的SadTlaker 图片人物只能使用正面照这样给人的感觉比较突兀。 那有没有其他方法制作数字人视频既能达到让数字人张嘴说话的效果 效率又更高还可以使用非正面图的方式呢
答案是有的那就是今天的主题 SD 图生图制作人物张嘴说话图剪映制作说话视频。 一、SD制作人物张嘴说话图 1、切换到SD 图生图-局部重绘界面 上传一张人物图片 2、反推正向提示词 3、改写正向提示词让人物张嘴 没安装提示词插件的朋友请查看这篇文章AI 绘画Stable Diffusion 研究六sd提示词插件有详细安装步骤。 1、我们使用提示词插件 在提示词处先输入中文 张嘴
提示词插件会自动将中文转换英文提示词。 如图 2、为了让人物张嘴效果更明显不被sd 忽略我们需要增加张嘴提示词的权重 选择张嘴提示词 会弹出权重操作按钮然后我们点击三次增加权重图标按钮此时提示词输入框内会自动增加提示词的权重。 如图 3、涂选重绘区域
在局部重绘界面右侧选择画笔ctrl鼠标滚轮可调整画笔粗细。 4、调整重绘尺寸 5、启用controlnet 保存人物姿势不变
启用controlnet控制类型选择openpose预处理器openpose_full模型control_v11p_sd15_openpose (6)、点击生成即可获得人物张嘴的图片
对比图如下 上面我们已经获得了人物张嘴的图片那么接下来我们使用剪映加上配音和字幕即可制作人物开口说话视频了。 二、剪映制作人物开口说话视频
1、准备工作 安装剪映具体的安装步骤这里就不再细说很简单请自行安装。 准备好人物张嘴和闭嘴的两张图 准备好音频文件
2、打开剪映点击开始制作 3、导入音频和图片
如图
qyDT-1692773049806)(assets/image-20230823003231110.png)] 4、将音频拖入下方音频轨道 5、生成字幕
依次点击菜单栏上“文本”按钮再点击左侧“智能字幕”按钮接着点击“开始识别”按钮生成字幕 字幕生成如下 6、将图片拖入轨道然后切换嘴型
1、怎么切换嘴型使其看上去像说话的效果呢 用过剪映的朋友肯定知道剪映 1s 是30帧 。
那么正常人说话大约1s 5 -6 个字。
因此我们可以计算出来大概 5帧 一个嘴型。
因此我们先使用闭嘴的图然后在5帧的地方切换张嘴的图即可实现。 2、制作步骤 step 1: 将张嘴的图和闭嘴的图分别导入到图片两个轨道上 step 2:将右侧轨道缩放拖到最右侧可以清晰看见轨道上的帧数 如1f \2f\4f\6f 如图 step 3: 将定位线移到 5帧处然后点击分割按钮将张嘴和闭嘴图都分割开
如下 step 4:处理闭嘴的图 分割后我们删除前5帧不用的闭嘴图
如下 step 5: 继续往后数5帧再分割 step 6: 删除张嘴、闭嘴图 多余的部分 step 7: 将张嘴、闭嘴拖入同一轨道并且打组 选中两个片段然后鼠标右键新建复合片段打组 现在的效果就是闭嘴、张嘴的一个片段 。
打组后如图 step 8: 复制粘贴多个片段直到一句说完话为止
然后将图片末尾和字幕对齐。
如图 step 9: 没说话的时候使用闭嘴的图
注意将图片末尾和空白处末尾对齐
如下 step 10: 继续处理后面说话的部分 重复步骤step 8直到每句话处理完毕 step 11: 调整视频比例9:16 再导出视频
右上角导出按钮导出即可。 好了这个视频制作就到此结束看看效果吧 SD 图生图剪映制作人物说话视频 说实话这个视频只是张嘴闭嘴的效果没有脸部表情变化确实显得比较生硬。
不过这里重点在于介绍制作思路和剪辑方法 对于感兴趣的朋友可以尝试玩一下。
