AI 软件
近日,阿里、字节接连悄悄上线同类 AI 神器,现在借助 AI 工具, 只需要一张人物照片,再配合骨骼动画引导,就能生成自然的动画视频。阿里推出了 Animate Anyone,字节跳动则联合新加坡国立大学推出了 Magic Animate。大厂接连发布各自同类 AI 神器,AI 应用下一个焦点已现。
论文地址:https://arxiv.org/pdf/2311.17117.pdf
项目地址:https://humanaigc.github.io/animate-anyone/
GitHub:https://github. com/HumanAlGC/AnimateAnyone
阿里推出的 Animate Anyone,该项目由阿里巴巴智能计算研究院开发,你只需提供一个静态的角色图像(包括真人、动漫/卡通角色等)和一些动作、姿势(比如跳舞、走路),便可将其动画化,同时保留角色的细节特征(如面部表情、服装细节等)。
论文地址:https://showlab.github.io/magicanimate/
字节跳动则联合新加坡国立大学推出的 Magic Animate,同样是利用AI技术,将静态图像变成动态视频。只需要选择指定的图片和动作,就可以产出对应的动效短片。这时候发挥你的奇思妙想,许多名作的二创,又会因为你「无厘头」变得有趣起来。只需一张照片,让蒙娜丽莎做瑜伽、让TikTok小姐姐跳舞....
这些视频都可以由 MagicAnimate 生成,这把许多人想一夜学会做视频的「白日梦」带到了现实里:现在只需要提供一张照片,就能生成指定动画视频。字节方面表示,在挑战性极高的TikTok舞蹈数据集上,Magic Animate 生成的视频的真实度比最强基线提高了超过38%。
阿里团队的「Animate Anyone」通过程序算法提升模型在「时间」「空间」「交叉」维度上的注意力,以此达到逼真的成像效果。
从放出的宣传视频看阿里的 「Animate Anyone」感觉画质效果略优,但阿里尚未放出代码,字节已将代码同步到GitHub着实给力。
在图生视频项目上,阿里和字节齐头并进,几乎同一时间完成了论文发布、代码公开、测试地址公开这一系列操作,两者相关论文发布时间仅相差一天。这两者一起冲上热搜的,从其背后的创作团队看 —— 阿里、字节 ,就知道这是继大数据云计算、自然对话语言大模型后的,又一次大厂技术厮杀。
5