如何用Coze把睡前故事变成皮克斯短片?分享我的制作流程与模板
上面就是整个工作流的全部拆解。大家可以根据文档自己试一试了,提示词里可以写你想要的绘本风格,绘本内容。所以发挥你的想象力和执行力,说不定下一个爆款就属于你。今天的分享就到这,如果觉得对您有帮助的话,记得。您的鼓励是我更新的动力。有问题也欢迎在评论区交流,大白会第一时间解答大家的疑问。🎯 获取完整资料。
自从学习AI智能体后,我经常去工作生活中挖掘智能体的场景和需求。家里刚好有个上一年级的小豆包,天天要做阅读作业。我想如果能把娃绘本故事通过智能体展现出来就完美了。这不,最近开发了一个皮克斯风格的立体书工作流。生成的视频娃非常爱看。因为娃爱在这个视频里“找茬”🤣,虽然还不是非常完美,但对于智能体生成的ai绘本是个很大的进步。
我们来看下生成的视频效果:
白雪公主
工作流讲解
01 工作流的截图如下

工作流分析:
1)生成封面图片
2)封面图片转封面视频;
3)生成正文文案和对应的图片;
4)生成语音、字幕、背景音乐等时间线数据;
5)创建剪映草稿,添加视频素材,返回草稿id
整体工作流大概30多个节点,大家可以跟着我的节奏一起练习一下。
02 工作流详细节点解读
2.1 开始
创建完工作流后,初始的工作流有开始和结束2个节点。开始节点配置如下:
-
bookname:书名
-
mihe_key: 米核的api_key;在工作流生成图片和生成视频插件中需要用到它。

mihe_key获取方法:通过链接http://miheai.com/?share_id=14987注册获取。
💡💡💡重磅福利!新用户专享!
通过上方链接注册,不仅秒得专属API key,还直接赠送7天vip。一口气狂领80个工作流,500条高质量提示词和10节智能体课程,轻松开启你的AI提效之旅!
登录后,在【个人中心】->【Api Key】一键复制即可使用!
2.2 生成封面图片

2.2.1 大模型根据书名生成封面图片提示词
-
大模型:豆包.1.6.极致速度.250828,模型也可以选deepseek 系列的。目前选豆包.1.6.深度思考.250715,大模型的output会有概率性返回失败。
-
输入:
book_name : 开始-> bookname

2.2.2 即梦4.0生成封面
【即梦图片生成】插件根据上面的图片提示词生成封面图片。配置如下:
模型选图片4.0,比例选竖屏9:16。

2.3 生成封面视频

2.3.1 生成封面视频提示词
大模型节点根据书名和封面图片生成封面视频提示词。
视觉理解输入选择封面图片,所以选择的大模型必须有图像理解的能力。

2.3.2 生成封面视频
【即梦视频生成】插件根据上面的提示词和封面图片,生成封面视频,时长10s。

2.4 生成正文文案和对应的图片

2.4.1 生成文案提示词
这里的提示词很关键,决定着文案内容生成的质量。大家如果对文案不满意,可以在这部分进行调优。可以提供一个示例让大模型学习,它就根据示例生成类似的文案。大模型的学习和仿写能力那是非常突出的。

2.4.2 对文案进行分割
使用【文本处理】节点对文案进行分割,分隔符设置如下:

2.4.3 生成图片提示词
上面每一句文案生成对应的3D立体童话风与皮克斯动画质感风格的图片提示词。

2.5 生成语音
使用【循环】节点把每一句文案生成对应的语音。

2.6 生成时间线数据

1)使用【剪映小助手】的audio_timelines方法,根据循环节点返回的语音音频列表生成音频时间线。
2)使用【剪映小助手】的timelines方法,创建1个时长为10s的时间线。也就是封面的视频时长。
3)代码节点根据前面2个时间线,进行数据整合,把其他素材比如正文图片,音频,背景音乐等时间线计算出来。这部分代码可以文末向我领取,直接复制使用,这里不再介绍。
2.7 根据时间线制作素材数据

2.7.1 根据主题搜索背景音乐
使用【背景音乐库】插件,根据关键字搜索背景音乐。
keyword:童话故事

2.7.2 根据时间线制作背景音乐数据
使用【剪映小助手】插件的audio_infos方法,根据上面返回的urls和音频时间线生成背景音乐数据。

2.7.3 其他素材的时间线数据

2.8 创建剪映草稿,并添加视频素材

2.8.1创建剪映草稿
这里填高1920,宽1080尺寸的竖屏比例。

2.8.2 添加背景音乐、音频、视频、图片到草稿
这里的方法都来自【剪映小助手】插件。相当于在模拟往剪映app里添加各种素材,制作完后,就全都自动化了,不需要手工剪辑视频了。
这里的audio_info 就是上面节点audio_info方法的返回,比如添加背景音乐add_audios 它的参数audio_infos选背景音乐audio_infos的结果,其余类似,大家理解后,就发现都是有规律的,不难理解了。

2.8.3 添加字幕到剪映草稿
添加字幕时需要设置字体、字号、字体颜色和字幕位置X,Y轴,如下配置:

2.8.4 结束节点返回草稿id

2.9 查看视频效果
工作流运行完,会生成一个草稿id,把这个草稿id复制粘贴到【剪映小助手】工具,等剪映草稿完成,打开剪映就能看到视频效果啦~

03 总结
上面就是整个工作流的全部拆解。大家可以根据文档自己试一试了,提示词里可以写你想要的绘本风格,绘本内容。
所以发挥你的想象力和执行力,说不定下一个爆款就属于你。
今天的分享就到这,如果觉得对您有帮助的话,记得关注+点赞+分享。您的鼓励是我更新的动力。有问题也欢迎在评论区交流,大白会第一时间解答大家的疑问。
🎯 获取完整资料
关注 + 点赞 + 收藏或评论 ➡️ 点击下面名片,扫码留言【童话立体书】,即可领取完整提示词!
火山引擎开发者社区是火山引擎打造的AI技术生态平台,聚焦Agent与大模型开发,提供豆包系列模型(图像/视频/视觉)、智能分析与会话工具,并配套评测集、动手实验室及行业案例库。社区通过技术沙龙、挑战赛等活动促进开发者成长,新用户可领50万Tokens权益,助力构建智能应用。
更多推荐
所有评论(0)