技术与艺术的结合，华为云去北影节搞了件大事
第十四届北京国际电影节首次开设「AIGC 电影短片单元」竞赛，作为全球第一个与 AI 共创的电影节，中国传媒大学动画与数字艺术学院联合华为云，创作 AIGC 动画短片，首次实现 AI 动画领域 5 大突破，并获《最佳影片奖》，以前一眼看穿的 AI 动画，以后可能看不穿了。
AIGC 内容一眼假，是因为AI创作确实有难题。
当前，开源 AI 模型生成的图片或视频，画面虽然惊艳，但生成内容要符合艺术家创作要求、符合人类对影片故事情节的需求，是一个非常具有挑战的事情。比如：你想要一个洛可可风格的短发女孩在跳舞，belike：
但 AI 反馈给你的，可能是这样：
生成失败的腿
错误的画风
错误的脸部细节
因此，直接使用 AI 开源模型生成的内容，就是一个关于确定性的「抽奖」活动，你永远不知道打开的是惊喜还是惊吓。
这支最佳影片凭什么？
5 大创新突破
本次获奖短片通过一段艺术性真人实拍短片转绘生成，在连续性、一致性、可控性、故事性、和细节 5 个方面均有重大突破，是一次艺术+技术的完美结合。
连续性突破：全片总时长超过 4 分钟，13 个分镜环环相扣，最长分镜长达 50 秒；
一致性突破：影片中有大量大幅度舞蹈动作，人物与镜头运动轨迹大，在业界首屈一指；
可控性突破：风格化幅度大，生成结果脱离原演员样貌，但始终保持前后是一个人；
故事性突破：演员表情细节、肢体动作细节要求严格，保证作品故事信息的传递；
细节突破：色彩及光照阴影精细化处理。
2 个核心技术方案
风格锁定：一只成功的片子，离不开风格的前后一致性，尤其是画面风格与人物风格。画面风格还相对比较简单，上传具有特定风格属性的原始数据，通过视觉生成式大模型微调形成一个生成式垂域模型，能同时满足特定艺术风格的画面生成和具体角色的形象植入。
一致性处理：这是最为关键的技术处理过程，必须保证影片整体画面稳定，角色、物品在大幅度运动状态下的一致性。比如人物正面、移动、侧面的面部轮廓变化，发型、体型的视觉效果得当；运动过程保持发型、面部、五官稳定生成，准确保留了角色面对「幼年自己」微笑到拥抱后「释然」的一个内心变化过程。
此环节需要引入基于生成式大模型的视频运动模块，来增强帧间的动态一致性，同时使用视频一致性后处理算法来消除生成视频的闪烁和抖动。
而此次碰撞创作成功的经验之谈是使用高效率的工具，相较传统工作流事半功倍。
在现阶段 AIGC 视频创作过程中，除了高质量的数据、更智能的模型之外，最大的需求点在效率，选择更佳创作工具，可以帮助艺术创作者高效率生成作品，极大节省创作时间。Zheli
本次创作基于华为云 MetaStudio 提供一站式云上数字内容生产平台，在云和 AI 的技术能力加持下，影片内容生产方式发生质的跃迁。
华为云视频风格化能力将真人转为数字人，自有黑科技精准控制形变，让人物随需而动。
华为云 MetaStudio 基于华为人脸识别算法精准模拟脸部深度信息，包括 276 个脸部特征点；然后，通过将基膜和面部分区，结合华为实验室资源的几何形变算法，采用包含 12 万个顶点加 12 万面片的高精度基础模型，基于 15 个面部分区，能够更加精准控制形变，自动进行材质适配，选取肤色、发型、眉毛、眼睛等等，生成风格化人物形象。
盘古多模态大模型精准保留人物信息，保证视频内容在物理世界合理性。
视频从一张张静态帧图片到动态画面动起来，需要保持前后连贯性和一致性。相较业界纯 CV（视觉）生成视频不理解物理世界轨迹的局限性，华为云 MetaStudio 基于盘古多模态大模型构建 CG+CV 能力，能精准保留人物信息，保证视频内容在物理世界的合理性。
在本片中，像舞蹈这种大幅度动作产生较大的运动轨迹时，视频生成容易出现合理性问题，用盘古 CG+CV 的视频生成技术，保证人物在大幅度运动时的面部轮廓、发型、体型等视觉效果都合理恰当，前后连贯；而基于可控视频生成的技术，才能满足真正的工业场景应用需求。
华为云 MetaEngine 云原生智能渲染引擎，节省 80% 工作量
通过将云、AI 和计算机图形学技术相结合，云上海量算力进行高清渲染，AI 离线渲染加速技术将 AI 与 CG 渲染算法相结合，确保同样清晰度又能大幅提升渲染效率，为本片制作节省 80% 工作量，为传统动画行业内容制作效率提升质的飞跃。
AIGC 技术的发展，让个人的电影梦想也变得触手可及，而在不久的将来，相信我们可以就能看到真正的 AI 影片；光影互鉴，同道相益，AI 之所至，无远弗届。
