智客 ZICQ
EN 登录 / 注册
智客前沿 智能体 #LiveAnimate #实时动画生成 #长时视频生成 #DiT模型 #PR-Sink

LiveAnimate发布:首个支持实时稳定长时生成的人体动画系统

Mr.Xu 的头像

文 / Mr.Xu 智客前沿编译 · 审校

发布时间: · 2 次阅读

中文阅读 (Chinese) English Version
共读互动 选中正文任意句子即可高亮划线、写下你的技术批注,或一键生成金句引用卡。 直达讨论区 ↓

摘要:LiveAnimate 是首个结合实时流式生成与稳定长时生成的人体动画系统,基于14B参数的视频扩散Transformer(DiT)构建。其创新点包括两阶段训练管道、Pose-Retrieval Sink Attention(PR-Sink)机制以及Ulysses序列并行处理等,能够在长时视频生成中保持稳定的感知质量和身份一致性,同时显著降低延迟。该系统为直播、远程呈现和虚拟化身等交互式应用提供了突破性技术支持。


技术亮点解析

  1. 实时流式生成与长时稳定性结合 LiveAnimate 是首个将实时流式生成与稳定长时生成相结合的人体动画系统,解决了传统扩散模型在长视频生成中延迟高、稳定性差的问题。

  2. 两阶段训练管道

    • Reference-Anchored Teacher-Forcing Adaptation:将预训练的DiT模型适配为块因果自回归生成器。
    • Block-wise Self-Forcing Distillation:通过自强制蒸馏技术,将采样预算减少到三步,大幅提升生成效率。
  3. Pose-Retrieval Sink Attention (PR-Sink) PR-Sink 是一种创新的KV-cache机制,通过静态锚点、动态锚点和滚动窗口的结合,在长时视频生成中保持外观一致性,同时避免存储整个序列,从而保持内存和延迟的恒定。

  4. Ulysses序列并行处理与算子融合 通过Ulysses序列并行处理和算子融合技术,LiveAnimate 在两台NVIDIA H100 GPU上实现了19.63 FPS的流式推理速度。

行业影响与开发者建议

  • 对交互式应用的影响 LiveAnimate 的发布为直播、远程呈现和虚拟化身等交互式应用提供了更高效、更稳定的解决方案,有望推动这些领域的快速发展。

  • 对AI动画生成的影响 该系统展示了在长时视频生成中保持高质量和一致性的可能性,为AI动画生成领域带来了新的技术突破。

  • 对开发者的建议 开发者可以关注LiveAnimate 的开源实现或API接口,将其集成到自己的应用中,以提升用户体验。同时,建议关注该系统在多模态交互和动态场景中的应用潜力。

结论

LiveAnimate 的发布标志着人体动画生成领域的一个重要里程碑,其创新技术为实时、长时、高质量的动画生成提供了新的可能性。

原文来源: Hugging Face Daily Papers


消息来源:Hugging Face Daily Papers (2026-08-13)

—— 完 ——

主题标签: #LiveAnimate #实时动画生成 #长时视频生成 #DiT模型 #PR-Sink

编辑部与事实核查说明:本篇专刊由智客前沿资讯管线根据官方技术公告、学术论文及开源工程文档整理编译,经算法实体核验与人工编辑审校后发布。若发现技术事实纰漏,欢迎依据勘误方针或一键向编辑部发送勘误反馈。

读完这篇,你的第一判断是?
🚀 去【作品】晒出你的相关实践

社区整体评论区

正在加载实时智能评论与划词标注…