视频与三维生成

学习视频、三维资产和角色动作生成,适合媒体创作者与图形开发者。

16 条精选 · 入门 7 · 按推荐学习顺序:越基础、直观越靠前,越系统、深入越靠后

在 3D 图中查看
  1. 3入门
    项目发布 10-04
    GitHub

    openfilm/openfilm

    开源 AI 视频 Agent,把编码 Agent(如 Codex、Claude Code)变成视频 Agent。影片以 HTML 网页形式写成,由名为 Studio 的浏览器本地编辑器呈现并可手工或通过提问修改;每幕是一个用 frame(t) 函数绘制画面的网页,可组合动画网页、素材、图片和声音。

  2. 5入门
  3. 8进阶
    项目发布 10-03
    GitHub

    gatewai-dev/framefields

    一个以代码优先方式制作视频与图像的开源项目,基于 WebGPU 原生渲染。README 说明其把合成、动态图形与 3D 能力打包为一个 npm 包,面向由 AI 智能体用代码驱动的视频工作流,提供文档、示例与模型页面,许可证为 Apache-2.0,状态标注为 beta。

  4. 9进阶
    项目发布 10-10
    GitHub

    sitor-ai/frametell

    一个借助 AI 导演智能体把想法和素材转化为生动讲解视频的开源项目,主打本地优先、可搭配任意模型。README 说明用户可用一句话或笔记、文档、PDF、幻灯片、图片作为输入,由导演智能体先产出草稿;项目以 Electron 应用形式提供 macOS(Apple Silicon)下载,标签涵盖故事板、文本转视频、TTS 等。

  5. 10进阶
    项目发布 10-04
    GitHub

    shinshin86/mesh-avatar-studio

    一个把单张插画转成可动画 2D 网格化身(VTuber 风格)的工具:编码智能体从图片准备化身,用户在本地编辑器中带实时预览微调,化身可眨眼、说话、转头、呼吸和摆发。需要 Node.js 22.17+ 与 Git,可用 npx create-mesh-avatar-studio 试用,另有网页版 Player 用摄像头和麦克风驱动。仓库提供日文和简体中文 README。

  6. 12进阶
    项目发布 10-27
    GitHub

    patch-gg/anymove(单段 AI 视频驱动生物动作捕捉)

    patch-gg/anymove

    一个开源项目,可将一段 AI 生成的视频转换为任意带骨骼生物的动画,包含翅膀、尾巴和多足。做法是在同一画面中放置正面与侧面两个相机视角,使用 DINOv2 读取关节,在两视角中拟合骨架并输出 GLB 文件。项目页称每条动作视频成本约 0.26 美元,读取与拟合在一分钟内完成。

  7. 13进阶
    项目发布 10-25
    GitHub

    patch-gg/trompe(用图像模型为关卡贴图)

    patch-gg/trompe

    一个开源项目,用于从灰色灰模关卡生成完整贴图:规划玩家视角相机、由图像模型绘制各视角画面、将画面投影回关卡并烘焙成一张贴图。贴图在阴天光照下生成,作为反照率贴图,再由游戏引擎投射真实阴影。相机规划、投影与烘焙在浏览器 GPU 上运行,图像模型运行于 fal,输出 glTF 格式。

  8. 14深入
    项目发布 10-14
    GitHub

    QwenLM/BlenderWorld

    Qwen 团队发布的一个用于评估 3D 创作视觉智能体的基准,全称为“Benchmarking Visual Agents for 3D Creation from Real-World References”。基准包含 9 个类别、22 个子类共 223 个任务,智能体根据任务简报和参考素材在 Blender 中交付可编辑工程文件及指定导出物,可用 bw evaluate 进行评估;仓库提供论文、Hugging Face 与 ModelScope 数据集链接。

  9. 16深入
    项目发布 10-16
    GitHub

    推荐开源 Hi3D V1.0 三维生成模型

    这是 Hi3D v1.0 的官方 GitHub 仓库,提供推理代码、模型权重和文档,发布日期标注为 2026 年 10 月 23 日。据 README,该模型基于 Sparc3D 表示与细化架构,以同一物体的参考图像为条件把粗略网格细化为高分辨率几何,报告称训练使用约两百万个精选 3D 资产、细化分辨率达 1536³;仓库不含训练代码与论文评测工具。

多模态与领域探索的其他细分主题