很多人做AI动画卡在同一个地方:图能生成,但动起来不是糊就是跳,角色换个角度就换了张脸。这门课围绕 sd-webui 和 ControlNet 展开,把「让画面按指定轨迹动」这件事拆成可操作的步骤。如果你已经会写提示词、跑通过基础出图,但一动到视频就靠抽卡,这套内容正好补的是控制力这一环。

先说清楚它补的是哪个缺口

市面上的AI视频课大多分两类:一类讲工具怎么装,一类讲创意怎么想。真正难的是中间那段——怎么让模型听你的话。这门课的重心放在 ControlNet 上,涉及的模型包括 ip2p、depth、seg、openpose 这类控制方式,每一种对应一种约束手段:边缘、深度、分割、姿态。它们不是并列的选项,而是解决不同问题的钥匙。

如果你此前只靠提示词硬写,会觉得生成结果时好时坏;学完这部分,你应该能判断:这个镜头要锁住的是构图、是动作、还是景深,然后选对应的控制模型,而不是反复重跑。

看完应该能回答的几个问题

  • 同一段素材,用 depth 和用 openpose 做控制,出来的差别在哪,什么时候该叠加使用?
  • ip2p 这类模型适合改画面内容还是改风格,和纯图生图的边界在哪里?
  • 分段生成动画时,帧与帧之间的连贯性靠什么维持,控制权重调高调低各有什么代价?
  • 模型权重文件放哪、命名和版本不匹配时,界面报错该怎么排查?
  • 一段几秒的动画,从分镜到成片,哪些环节必须手工介入,哪些可以批量跑?

这些问题不是理论题,是你在实际操作中一定会撞上的。如果看完还回答不了,说明练习量不够,而不是课没讲。

配套练习建议这样安排

ControlNet 的学习曲线不在理解概念,在手感。建议不要一上来就做完整动画,按这个顺序推:先固定一张参考图,分别用不同控制模型各生成几张,对比差异;再拿一段现成视频抽帧,尝试用姿态或深度约束重绘,观察哪些帧会崩;最后才进入多帧连贯的尝试。

练习时记录两件事:控制权重和提示词强度的搭配,以及失败帧的共同特征。这两份记录比看十遍教程有用。课程里模型文件的体积不小,提前留出硬盘空间,也别在跑图时同时开太多任务,显存不够会直接报错,容易误判成模型问题。

适合谁,不适合谁

适合已经能独立出图、想往动态方向走的人,也适合做短视频想降低实拍成本、但不愿完全交给随机性的创作者。如果你的 sd-webui 还没装明白,或者对采样器、步数这些基础概念还陌生,建议先补基础再来,否则 ControlNet 的调试会让你更混乱。

另外要有个预期:这套方法产出的是可控的动画素材,不是一键成片。剪辑、配音、节奏这些仍然要你自己处理,课程解决的是画面生成环节的控制问题,不是整条流水线。

怎么用这份资料

别按目录顺序从头刷到尾。先挑一个你手上真实想做的镜头,带着它去对应章节找控制方案,做完再回头看其他模型能怎么用。工具类内容看一遍记不住,用一遍才留得下。学完这一轮,你至少应该能说清楚:为什么这个镜头要用这个模型,以及调哪个参数能让它更稳。

王桂红·Vince - 人工智能动画视频系统课程

动画视频制作AI工具与应用

编辑点评

课程内容丰富,涵盖多种AI动画视频制作工具,适合对AI动画感兴趣的学习者。

⭐ 编辑推荐

探索AI动画视频制作,学习使用sd-webui、controlnet等工具,打造个性化动画作品。

课程亮点

• AI动画视频制作工具学习
• 多种模型应用实践
• 个性化动画创作

课程目录

📁 sd-webui
📁     📁 controlnet
📁         📁 模型
            control_v11e_sd15_ip2p_fp16.safetensors  [689.1 MB]
            control_v11f1p_sd15_depth_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_seg_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_openpose_fp16.safetensors  [689.1 MB]
            control_v11f1e_sd15_tile_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_softedge_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_canny_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_normalbae_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_scribble_fp16.safetensors  [689.1 MB]
            control_v11p_sd15s2_lineart_anime_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_lineart_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_inpaint_fp16.safetensors  [689.1 MB]
            control_v11p_sd15_mlsd_fp16.safetensors  [689.1 MB]
            control_v11e_sd15_shuffle_fp16.safetensors  [689.1 MB]
    sd-webui资料.zip  [1.8 MB]
    sd-webui-aki-v4.7.7z  [6.7 GB]
    svd_xt_1_1.safetensors  [4.5 GB]
    启动器运行依赖-dotnet-6.0.11.exe  [54.6 MB]
📁 comfui安装包
📁     📁 20240121新版安装包-ComfyUI-aki
        20240121新版安装包-ComfyUI-aki说明.zip  [1.8 MB]
        ComfyUI-aki-v1.2.7z  [3.9 GB]
    comfui安装包文档.png  [493.5 KB]
📁 前置软件
    前置软件说明.png  [493.5 KB]
    EbSynth.zip  [16.4 MB]
    ffmpeg-6.0-essentials_build.zip  [81.5 MB]
    ffmpeg(Windows).7z  [47.2 MB]
📁 checkpoints大模型
📁     📁 真人模型
        真人模型必看.png  [493.5 KB]
        rel-majic_nwsj.safetensors  [2.2 GB]
        rel-majicmixRealistic_v7.jpeg  [181.2 KB]
        rel-majicmixRealistic_v7.safetensors  [2.0 GB]
        rel-majic_nwsj.jpeg  [31.0 KB]
📁     📁 sdxl模型
        sdxl模型说明.zip  [1.8 MB]
        gf-SDXL-Ronghua_v30.safetensors  [6.5 GB]
        gf-SDXL-Ronghua_v30.jpeg  [42.8 KB]
📁     📁 SD-官方模型
        SD-官方模型资料.zip  [1.8 MB]
        svd_xt.png  [289.0 KB]
        sd_xl_turbo_1.0_fp16.safetensors  [6.5 GB]
        svd_xt.safetensors  [8.9 GB]
        sd_xl_turbo_1.0_fp16.png  [2.2 MB]
📁     📁 国风模型
        国风模型资料.zip  [1.8 MB]
        sdxl-CounterfeitXL-V1.0.safetensors  [6.5 GB]
        sdxl-fenrisxl_V164fp16.safetensors  [6.6 GB]
        sdxl-realvisxlV20_v20Bakedvae.safetensors  [6.5 GB]
        gf-majicmixSombre_v20.jpeg  [47.4 KB]
        sd_xl_base_1.0.safetensors  [6.5 GB]
        sdxl-CounterfeitXL-V1.0.png  [3.4 MB]
        sd_xl_refiner_1.0.png  [5.1 MB]
        sd_xl_refiner_1.0.safetensors  [5.7 GB]
        sdxl-fenrisxl_V164fp16.png  [3.6 MB]
        sd_xl_base_1.0.safetensors.jpeg  [145.0 KB]
        gf-majicmixSombre_v20.safetensors  [2.0 GB]
📁     📁 二次元模型
        ton-ghostmix_v20Bakedvae.jpeg  [334.0 KB]
        ton-majicmixFantasy_v20.safetensors  [2.2 GB]
        ton-ghostmix_v20Bakedvae.safetensors  [2.2 GB]
        ton-majicmixFantasy_v20.jpeg  [54.7 KB]
📁 animatediff模型
📁     📁 AnimateLCM
        AnimateLCM说明.png  [493.5 KB]
        AnimateLCM_sd15_t2v_lora.safetensors  [128.4 MB]
        AnimateLCM_sd15_t2v.ckpt  [1.7 GB]
📁     📁 lightning
        animatediff_lightning_4step_comfyui.safetensors  [866.8 MB]
        animatediff_lightning_8step_comfyui.safetensors  [866.8 MB]
    mm_sd_v14.ckpt  [1.6 GB]
    mm_sd_v15_v2.ckpt  [1.7 GB]
    mm-Stabilized_mid.pth  [1.6 GB]
    v3_sd15_mm.ckpt  [1.6 GB]
    模型存放位置.txt  [244.0 B]
    sdxl_v10_beta.ckpt  [906.1 MB]
    sdxl-hotshotxl_mm_v1.pth  [905.4 MB]
    mm_sd_v15.ckpt  [1.6 GB]
📁 工作流
📁     📁 加餐1Lightning
        加餐1Lightning必看.png  [493.5 KB]
        workflow-animatediff-lightning.json  [12.0 KB]
        lightningt2v.json  [60.4 KB]
📁     📁 第九节ipadapter&蒙版
        第九节ipadapter&蒙版说明.png  [493.5 KB]
        ipadapter&mask_L9.json  [34.2 KB]
📁     📁 第五节AnimateLCM
        第五节AnimateLCM文档.zip  [1.8 MB]
        AnimateLCM.json  [15.3 KB]
📁     📁 第四节Prompt Travel
        keyframe_travel.json  [25.5 KB]
        prompt_travel.json  [13.9 KB]
📁     📁 第六节视频转绘_controlnet
        视频转绘_controlnet.json  [71.7 KB]
📁     📁 第八节Steerablemotion
        Steerablemotion_v1.json  [32.2 KB]
📁     📁 第十节dynamicrafter&tooncrafter
        tooncrafter.json  [50.7 KB]
        6月7日.mp4  [648.7 MB]
        dynamicrafter.json  [12.5 KB]
📁     📁 第七节视频转绘_ipadapter
        第七节视频转绘_ipadapter.json  [48.1 KB]
📁 Tooncrafter&dynamicrafter
📁     📁 主模型
        主模型必看.zip  [1.8 MB]
        dynamicrafter_1024_v1_bf16.safetensors  [4.9 GB]
        dynamicrafter_512_interp_v1_bf16.safetensors  [4.9 GB]
        tooncrafter_512_interp-fp16.safetensors  [4.9 GB]
📁     📁 clipversion
        CLIP-ViT-H-14-laion2B-s32B-b79K.safetensors  [2.4 GB]
📁     📁 clip模型
        model.safetensors  [1.3 GB]
📁 CN模型
    v3_sd15_sparsectrl_rgb.ckpt  [1.9 GB]
📁 ipadapter
📁     📁 clip_vision
        clip_vision必看.zip  [1.8 MB]
        CLIP-ViT-H-14-laion2B-s32B-b79K.safetensors  [2.4 GB]
        CLIP-ViT-bigG-14-laion2B-39B-b160k.safetensors  [3.4 GB]
📁     📁 loras
        ip-adapter-faceid-plus_sd15_lora.safetensors  [48.7 MB]
        ip-adapter-faceid_sd15_lora.safetensors  [48.7 MB]
📁     📁 ipadapter
        ip-adapter-faceid-plus_sd15.bin  [149.3 MB]
        ip-adapter-plus_sd15.safetensors  [93.6 MB]
        ip-adapter_sd15_light.bin  [42.6 MB]
        ip-adapter-plus_sdxl_vit-h.safetensors  [808.3 MB]
        ip-adapter_sd15.safetensors  [42.6 MB]
        ip-adapter_sd15_vit-G.safetensors  [44.1 MB]
        ip-adapter-faceid_sd15.bin  [92.3 MB]
📁 Deforum设定文档
    20240315120608_settings.txt  [10.0 KB]

适合人群

  • AI爱好者
  • 动画制作初学者
  • 视频制作从业者

学习收获

掌握AI动画视频制作流程
应用多种AI模型进行创作
提升动画视频制作技能

祝您学习愉快!

学有所成,前程似锦!