
自从 Sora 发布以来,AI 视频生成的热度不减,社区中涌现了大量类 Sora 的开源项目。今天给大家分享一款开源的视频生成模型,来自阿里云团队的EasyAnimate,它是阿里云人工智能平台PAI自主研发的DiT-based视频生成框架,它提供了完整的高清长视频生成解决方案,包括视频数据预处理、VAE训练、DiT训练、模型推理和模型评测等。在预训练模型的基础上,EasyAnimate可通过少量图片的LoRA微调来改变生成视频的风格,相比已有方案具有更好的扩展性和完整性。

EasyAnimate在人工智能平台PAI上进行了集成,供用户一键训练和部署,其支持以下功能:
最大分辨率768x768,最长144帧的视频推理 (512x512分辨率可在A10 24G上推理)
DiT 基线模型的训练
DiT LoRA模型的训练(512x512分辨率可在A10 24G上训练图片Lora)
VAE模型的训练和推理
视频预处理
GitHub:https://github.com/aigc-apps/EasyAnimate/ 在线体验:https://modelscope.cn/studios/PAI/EasyAnimate/summary