让你喜欢的抖音小姐姐跳舞

magic-animate

想让你喜欢的抖音小姐姐为你跳舞么 like this

新加坡国立大学 Show 实验室和字节联合做了一项类似的研究。他们提出了一个基于扩散的框架 MagicAnimate，旨在增强时间一致性、忠实地保留参考图像并提升动画保真度。并且，MagicAnimate 项目是开源的，目前推理代码和 gradio 在线 demo 已经发布。

论文： https://arxiv.org/pdf/2311.16498.pdf

项目地址： https://showlab.github.io/magicanimate/

Github： https://github.com/magic-research/magic-animate

在线示例： https://huggingface.co/spaces/zcxu-eric/magicanimate

为了实现上述目标，研究者首先开发了一个视频扩散模型来编码时间信息。接着为了保持跨帧的外观连贯性，他们引入了新颖的外观编码器来保留参考图像的复杂细节。利用这两个创新，研究者进一步使用简单的视频融合技术来保证长视频动画的平滑过渡。

实验结果表明，MagicAnimate 在两项基准测试上均优于基线方法。尤其在具有挑战性的 TikTok 跳舞数据集上，本文方法在视频保真度方面比最强基线方法高出 38％以上，效果展示。

甚至是戴珍珠耳环的少女、蒙娜丽莎都做起了瑜伽。

这项技术也属于 AIGC 技术的一种,> 生成式人工智能AIGC（Artificial Intelligence Generated Content）是人工智能1.0时代进入2.0时代的重要标志。

AIGC

AIGC是一种新的人工智能技术，它的全称是Artificial Intelligence Generative Content，即人工智能生成内容。

人工智能生成内容（Artificial Intelligence Generative Content）是指利用人工智能技术生成文字、图片、视频等内容。人工智能生成内容的技术包括：

• 自然语言生成（Natural Language Generation）：利用人工智能技术生成文本内容。
• 图像生成（Image Generation）：利用人工智能技术生成图片内容。
• 视频生成（Video Generation）：利用人工智能技术生成视频内容。 人工智能生成内容的应用包括：
• 新闻生成：利用人工智能技术生成新闻内容。
• 广告生成：利用人工智能技术生成广告内容。
• 文案生成：利用人工智能技术生成文案内容。
• 视频制作：利用人工智能技术制作视频内容。 人工智能生成内容的优势包括：
• 内容质量高：人工智能生成的内容可以达到人类水平甚至更高。
• 内容生产效率高：人工智能生成的内容可以快速生成，大大提高内容生产效率。
• 内容成本低：人工智能生成的内容成本低廉，可以降低内容生产成本。 人工智能生成内容的挑战包括：
• 内容质量参差不齐：人工智能生成的内容质量参差不齐，需要人工进行审核。
• 内容伦理问题：人工智能生成的内容可能存在伦理问题，需要加强监管。
• 内容版权问题：人工智能生成的内容可能存在版权问题，需要加强保护。

人工智能生成内容是一项新兴技术，具有巨大的应用潜力。随着技术的发展，人工智能生成内容的质量和效率将进一步提高，应用范围也将进一步扩大。 人工智能生成内容的出现，将对传统的内容生产方式产生深远影响。传统的内容生产方式，需要大量的人工参与，成本高、效率低。人工智能生成内容可以解决这一问题，提高内容生产效率。此外，人工智能生成内容可以实现个性化定制，满足不同用户的需求。 人工智能生成内容的应用场景非常广泛。在新闻领域，人工智能生成内容可以帮助媒体快速生成新闻稿件；在广告领域，人工智能生成内容可以帮助广告主快速生成广告文案；在文案领域，人工智能生成内容可以帮助企业快速生成文案；在视频制作领域，人工智能生成内容可以帮助视频制作者快速制作视频。 人工智能生成内容是一项新兴技术，具有巨大的应用潜力。随着技术的发展，人工智能生成内容的质量和效率将进一步提高，应用范围也将进一步扩大。人工智能生成内容的出现，将对传统的内容生产方式产生深远影响。