大家吼我是专注于AI的睡醒了叭我不是高手但是想和大家分享自己学到的好玩好用的工作流~大家有没有在某抖平台刷到过这样的萌宠摆摊视频真的很可爱了也有很不错的点赞量如果持续发涨粉肯定是没有问题的今天和大家分享如何通过工作流来生成类似的视频。工作流中会创建剪映草稿工作流完成后直接在剪映打开如果有不满意的地方在剪映中做一些调整就可以了~实打实的分享自己是跑了一遍全流程的有什么坑都会和大家说。先一起看看效果再上手01 效果展示小兔子炒面02 工作流截图节点看着多别怕有些都是一样的逻辑03 搭建教程3.0 流程思考【一定要先梳理一下流程不要想一步搭一步很容易漏流程】- 定义小动物需要制作的食物- 依据小动物与食物生成提示词与字幕- 生成静态场景首图- 参考首图生成视频- 设置背景音乐、字幕语音生成- 生成剪映草稿的前置处理--字幕、背景音乐、字幕音频时间线对齐- 创建剪映草稿添加字幕、背景音乐、字幕音频、视频- 结束3.1 搭建工作流登录网站https://www.coze.cn/按照图中的1、2、3、4的步骤创建。名称不能是中文嗷3.2 开始节点animal想要的动物形象goods食物比如炒饭、炒面、炒菜3.3 大模型节点-摆摊提示词与字幕生成器调用大模型节点生成摆摊场景的生图提示词并配合适的文案作为视频字幕调用开始节点的animal与goods变量系统提示词比较长放了部分截图有需要的同学留言俺发给你全部的用户提示词与输出变量。输出场景提示词与文案字幕即可3.4 提示词优化这个节点是一个优化模型不是必须的除了对文字内容优化也会将中文翻译为英文运行结果如下3.5 图像生成-人物场景图片生成调用图像生成节点注意要手动设定宽高输入中引用优化后的提示词3.6 视频生成与处理3.6.1 视频生成调用视频生成节点模型尽量选择最新的分辨率自行选择越高清晰度越好时长一般选择10s首帧图片选择3-图像生成的场景提示词选择优化后的数据后续剪映需要的是url格式而生成的视频是video类型需要格式转变使用到的工具有剪映小助手的get_url与str_to_list3.6.2 获取视频链接调用get_urlvideo转变为string3.6.3 视频格式转换调用str_to_list转变为string数组3.7 字幕音频生成与处理3.7.1 语音合成检索语音合成器命名为字幕音频合成器text需要配音的文字speed_ratio语速voice_id声音类型点击窗口进行选择后续调用的是data中的link链接为string类型3.7.2 字幕音频格式转换同样调用剪映小助手里面的str_to_list插件obj引用的变量值为字幕音频生成输出的data里面的link变量3.8 设置背景音乐检索搜索背景音乐插件变量值为检索的关键字我这里是摆摊更适合夜市类的音乐输出中后面会用到的是bgm_urls3.9 对齐处理作用是将字幕、音频、背景音乐和视频进度一致需要用到的剪映小助手的插件有3.9.1 字幕音频对齐检索并调用字幕音频对齐插件用于将输入的字幕和音频进行时间线一致就是说字幕与语音一致audio_url引用7-字幕音频生成器的data-linktext1-大模型的wenan3.9.2 获取时间线调用audio_timelines插件从字幕音频中获取时间线links格式转变后的字幕音频对齐链接3.9.3 字幕音频对齐时间线调用audio_infos将字幕语音与时间线对齐3.9.3 背景音乐对齐时间线调用audio_infos将背景音乐与时间线对齐3.9.3 字幕对齐时间线调用caption_infos将字幕与时间线对齐后面的参数其实都可以等生成后在剪映里面再处理比如设置一下字幕的进入方式3.9.4 视频对齐时间线调用video_infos将视频与时间线对齐3.10 剪映草稿生成在这一部分常用的插件有剪映小助手里面这些3.10.1 创建草稿调用create_draftheight和width可以不填自动会匹配3.10.2 添加音乐调用add_audio插件引用13-背景音乐与时间线节点的infos3.10.3 添加字幕音频调用add_audio插件引用12-字幕音频与时间线节点的infos3.10.4 添加视频调用add_video插件引用16-视频与时间线节点的infos3.10.5 添加字幕调用add_caption插件引用14-字幕与时间线节点的infos除了带*都可以在剪映中再设置问题不大3.11 结束节点引用创建草稿节点的draft_id就可以喽~至此工作流就搭建完成喽~ 刚开始略微有一点困难跑通流程后再搭建其他相关的工作流就会很顺手了04 工作流测试测试案例测试结果将output输入剪映小助手即可下载算是用了第三方工具哦下载完成打开剪映就能开看或者自己将文件夹导入到里面直接点击进入就能看到所有的轨道了有什么不满意的地方调整一下就好~05 后续碎碎念5.1 常错点引用错误因为节点和变量稍微多了一些些一定要看仔细。我刚开始搭建就搞了搞几次字幕和音频没有添加草稿成功浪费了很多资源5.2 逻辑学习当然也可以用提示词在对话流中直接生成视频但这种视频你只能一次生成完美视频可调性还是比较差的。工作流生成草稿后期空间比较大并且只要改变动物形象设定与场景设定提示词完全由大模型给你写就方便很多前期需要掌握的就是草稿生成的逻辑首帧图片-视频-时间线-所有轨道与时间线对齐-创建草稿-添加轨道今天的学习就结束啦辛苦了各位一起加油创作不易 可以给我点个赞嘛 ლ(′◉3◉ლ)
coze 实战：萌宠摆摊视频工作流，一键自动生成趣味短片
大家吼我是专注于AI的睡醒了叭我不是高手但是想和大家分享自己学到的好玩好用的工作流~大家有没有在某抖平台刷到过这样的萌宠摆摊视频真的很可爱了也有很不错的点赞量如果持续发涨粉肯定是没有问题的今天和大家分享如何通过工作流来生成类似的视频。工作流中会创建剪映草稿工作流完成后直接在剪映打开如果有不满意的地方在剪映中做一些调整就可以了~实打实的分享自己是跑了一遍全流程的有什么坑都会和大家说。先一起看看效果再上手01 效果展示小兔子炒面02 工作流截图节点看着多别怕有些都是一样的逻辑03 搭建教程3.0 流程思考【一定要先梳理一下流程不要想一步搭一步很容易漏流程】- 定义小动物需要制作的食物- 依据小动物与食物生成提示词与字幕- 生成静态场景首图- 参考首图生成视频- 设置背景音乐、字幕语音生成- 生成剪映草稿的前置处理--字幕、背景音乐、字幕音频时间线对齐- 创建剪映草稿添加字幕、背景音乐、字幕音频、视频- 结束3.1 搭建工作流登录网站https://www.coze.cn/按照图中的1、2、3、4的步骤创建。名称不能是中文嗷3.2 开始节点animal想要的动物形象goods食物比如炒饭、炒面、炒菜3.3 大模型节点-摆摊提示词与字幕生成器调用大模型节点生成摆摊场景的生图提示词并配合适的文案作为视频字幕调用开始节点的animal与goods变量系统提示词比较长放了部分截图有需要的同学留言俺发给你全部的用户提示词与输出变量。输出场景提示词与文案字幕即可3.4 提示词优化这个节点是一个优化模型不是必须的除了对文字内容优化也会将中文翻译为英文运行结果如下3.5 图像生成-人物场景图片生成调用图像生成节点注意要手动设定宽高输入中引用优化后的提示词3.6 视频生成与处理3.6.1 视频生成调用视频生成节点模型尽量选择最新的分辨率自行选择越高清晰度越好时长一般选择10s首帧图片选择3-图像生成的场景提示词选择优化后的数据后续剪映需要的是url格式而生成的视频是video类型需要格式转变使用到的工具有剪映小助手的get_url与str_to_list3.6.2 获取视频链接调用get_urlvideo转变为string3.6.3 视频格式转换调用str_to_list转变为string数组3.7 字幕音频生成与处理3.7.1 语音合成检索语音合成器命名为字幕音频合成器text需要配音的文字speed_ratio语速voice_id声音类型点击窗口进行选择后续调用的是data中的link链接为string类型3.7.2 字幕音频格式转换同样调用剪映小助手里面的str_to_list插件obj引用的变量值为字幕音频生成输出的data里面的link变量3.8 设置背景音乐检索搜索背景音乐插件变量值为检索的关键字我这里是摆摊更适合夜市类的音乐输出中后面会用到的是bgm_urls3.9 对齐处理作用是将字幕、音频、背景音乐和视频进度一致需要用到的剪映小助手的插件有3.9.1 字幕音频对齐检索并调用字幕音频对齐插件用于将输入的字幕和音频进行时间线一致就是说字幕与语音一致audio_url引用7-字幕音频生成器的data-linktext1-大模型的wenan3.9.2 获取时间线调用audio_timelines插件从字幕音频中获取时间线links格式转变后的字幕音频对齐链接3.9.3 字幕音频对齐时间线调用audio_infos将字幕语音与时间线对齐3.9.3 背景音乐对齐时间线调用audio_infos将背景音乐与时间线对齐3.9.3 字幕对齐时间线调用caption_infos将字幕与时间线对齐后面的参数其实都可以等生成后在剪映里面再处理比如设置一下字幕的进入方式3.9.4 视频对齐时间线调用video_infos将视频与时间线对齐3.10 剪映草稿生成在这一部分常用的插件有剪映小助手里面这些3.10.1 创建草稿调用create_draftheight和width可以不填自动会匹配3.10.2 添加音乐调用add_audio插件引用13-背景音乐与时间线节点的infos3.10.3 添加字幕音频调用add_audio插件引用12-字幕音频与时间线节点的infos3.10.4 添加视频调用add_video插件引用16-视频与时间线节点的infos3.10.5 添加字幕调用add_caption插件引用14-字幕与时间线节点的infos除了带*都可以在剪映中再设置问题不大3.11 结束节点引用创建草稿节点的draft_id就可以喽~至此工作流就搭建完成喽~ 刚开始略微有一点困难跑通流程后再搭建其他相关的工作流就会很顺手了04 工作流测试测试案例测试结果将output输入剪映小助手即可下载算是用了第三方工具哦下载完成打开剪映就能开看或者自己将文件夹导入到里面直接点击进入就能看到所有的轨道了有什么不满意的地方调整一下就好~05 后续碎碎念5.1 常错点引用错误因为节点和变量稍微多了一些些一定要看仔细。我刚开始搭建就搞了搞几次字幕和音频没有添加草稿成功浪费了很多资源5.2 逻辑学习当然也可以用提示词在对话流中直接生成视频但这种视频你只能一次生成完美视频可调性还是比较差的。工作流生成草稿后期空间比较大并且只要改变动物形象设定与场景设定提示词完全由大模型给你写就方便很多前期需要掌握的就是草稿生成的逻辑首帧图片-视频-时间线-所有轨道与时间线对齐-创建草稿-添加轨道今天的学习就结束啦辛苦了各位一起加油创作不易 可以给我点个赞嘛 ლ(′◉3◉ლ)
