最近很火的AI视频,30秒展现一个人的一生,我们来看一下制作流程
包含以下知识点
- 安装ComfyUI + AnimeDiff插件
- 使用Prompt travel描述视频画面
在BatchPromptSchedule这个节点里描述出画面的内容,前面的数字代表对应的帧数
"0" : "a new born baby girl lying on a crib crying, top view",
"20" : "a new born baby girl lying on a crib crying, top view",
"40" : "a 5 years old toddler",
"60" : "a 5 years old toddler",
"80" : "10 year old girl running",
"120" : "10 year old girl running",
"140" : "20 year old woman graduates from college, on campus",
"160" : "20 year old woman graduates from college, on campus",
"180" : "25 year old woman working in office, professional suit",
"200" : "25 year old woman working in office professional suit",
"220" : "35 year old woman holding a baby, casual clothing",
"240" : "35 year old woman holding a baby, casual clothing",
"260" : "50 year old woman, looking at viewer, casual clothing",
"280" : "50 year old woman, looking at viewer, casual clothing",
"300" : "80 year old woman, looking at viewer, casual clothing",
"320" : "80 year old woman, looking at viewer, casual clothing",
"340" : "90 year old woman, top view, lying on death bed, hospital clothing, eyes closed",
"360" : "90 year old woman, top view, lying on death bed, hospital clothing, eyes closed"
第一次载入这个工作流之后,ComfyUI可能会提示有node组件未被发现,我们需要通过ComfyUI manager安装,它会自动找到缺失的组件并下载安装(!!需要网络通畅)。
点击ComfyUI Manager按钮打开组件管理
再点击Install Missing Custom Nodes安装组件
安装完成后要重启ComfyUI才能完成载入刚才缺失的组件。
如果网络状态不好,可能会导致下载组件失败,需要多试几次
下载模型DreamShaper 8。
将safetensors文件放入文件夹ComfyUI > models > checkpoints中。
刷新浏览器标签页。 找到节点“Load Checkpoint”。点击ckpt_name下拉菜单,选择dreamshaper_8模型。
下载VAE。将文件放入文件夹ComfyUI > models > vae中。
刷新浏览器页面。
在Load VAE节点中,选择刚刚下载的文件。
下载 AnimateDiff v1.5 v2 动作模型。
将其放入文件夹 ComfyUI > custom_nodes > ComfyUI-AnimateDiff-Evolved > models 中。
刷新浏览器页面。
在AnimateDiff Loader节点中,在model_name下拉菜单中选择mm_sd_v15_v2.ckpt。
这个工作流程使用了BadDream负面嵌入在负面提示中。
它是为Dream Shaper模型训练的负面嵌入。
下载BadDream嵌入文件。
将文件放入ComfyUI > models > embeddings目录中。
点击“Queue Prompt”开始生成视频。
进度条将出现在KSampler节点上。
当完成时,将在视频合并节点中看到视频出现。
写在最后
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。