Open-Sora Open-Sora V1.1.0 Release
📍 Open-Sora 1.1 发布
- 🌠 模型权重可在[这里](https://github.com/hpcaitech/Open-Sora)获取。它在0秒到15秒、144p到720p、各种纵横比的视频上进行了训练。更多讨论请参见我们的[报告 1.1](https://github.com/hpcaitech/docs/report_02.md)。
- 🔧 数据处理管道 v1.1 发布。从原始视频到(文本,视频片段)对的自动[处理管道](https://github.com/hpcaitech/Open-Sora#data-processing)已提供,包括场景切割、过滤(美学、光流、OCR等)、字幕管理。有了这个工具,你可以轻松构建你的视频数据集。
- ✅ 改进的 ST-DiT 架构包括绳索位置编码、qk 规范、更长的文本长度等。
- ✅ 支持任何分辨率、纵横比和时长(包括图像)的训练。
- ✅ 支持图像和视频的条件生成和视频编辑,因此支持动画图像、连接视频等功能。
访问 [Open-Sora Gallery](https://hpcaitech.github.io/Open-Sora/) 查看更多示例。