为二次元爱好者设计！B站发布Index-AniSora开源顶级动画视频生成模型

B站开源的Index-AniSora模型是专为二次元风格动画视频生成而设计的顶尖技术工具，以下是关于该模型的详细介绍：

技术原理与架构

• 基于AniSora模型：Index-AniSora的技术原理基于B站提出的AniSora模型，该模型已被IJCAI2025接收。

• 强化学习框架：模型采用了专为二次元视频生成打造的强化学习技术框架，通过人类反馈对动画视频生成进行对齐优化，使生成内容更贴近人类偏好。

• 扩散生成框架与时空掩码机制：开发了统一的扩散生成框架，并引入时空掩码机制，灵活支持图生视频、插帧补全和局部控制等任务，能够实现对角色口型、动作乃至局部区域的精细控制。

数据集与评估体系

• 高质量奖励数据集：构建了首个面向动漫领域的高质量奖励数据集，包含30,000条人工标注的动漫视频样本，涵盖视觉平滑度、运动感、视觉吸引力、文本一致性、图像一致性与角色一致性等六个关键维度。

• AnimeReward奖励模型与GAPO算法：基于该数据集，设计了AnimeReward奖励模型，并提出差距感知偏好优化算法（GAPO），通过显式建模正负样本间的偏好差距，强化奖励信号，提升模型对齐性能。

• 专用评估基准：设计了首个面向动画视频的专用评估基准，涵盖多个二次元子类型，填补了现有自然视频评估体系的空白。

开源内容与版本

• AniSoraV1.0：基于CogVideoX-5B基座模型训练，支持视频局部区域引导控制、时序引导控制等，适合4090显卡部署，覆盖80%的应用场景。

• AniSoraV2.0：基于Wan2.1-14B基座模型训练，效果更稳定，覆盖90%的应用场景。采用蒸馏加速方案，提升推理性能，并支持国产芯片华为910B的高效分布式训练。

• 其他开源内容：包括训练数据集构建的全链路模型、基于动画数据优化的Benchmark系统、标准测试数据集，以及基于动画领域人类偏好强化学习模型及训练框架。

特点与优势

• 多种二次元风格支持：支持番剧、国创、漫改动画、VTuber、动画PV和鬼畜动画等多种二次元风格视频镜头的一键生成。

• 高效创作：用户只需输入简单的指令或提示词，即可快速生成高质量的动画视频，大大提高了创作效率。

• 符合ACG审美：通过定向优化，模型能够更好地理解动漫语境与ACG审美，生成更贴合创作者需求的动画内容。

使用场景与意义

• 创作者：帮助动画创作者快速生成高质量的动画视频，节省时间和精力。

• 开发者：为开发者提供了强大的技术工具，推动二次元内容创作的创新和发展。

• 二次元爱好者：让爱好者能够轻松将喜欢的漫画转化为生动的动画效果，支持多种小众画风。

Index-AniSora模型的开源为动画视频生成领域带来了新的技术突破，推动了二次元内容创作的进一步发展。