AI技术如何赋能影视创作？
目前 AI+影视的 应用仍处早期摸索尝试阶段，重点在于完善技术以及探索需求，但随着 AI 生成视频领域不 断地取得技术突破，AI 技术将逐步赋能影视创作的各个生产环节。
我们认为，AI 在影视前期策划阶段将从两方面发挥作用：1）剧本生成：通过对海量剧本 进行学习，AI 可以自动生成批量化的剧本，并按照任务性格生成对话，激发作者创作灵感， 缩短创作周期。2）数据分析：通过对同类型电影、用户反馈、剧本内容等进行分析，AI 可预测票房回报等数据，为选择演员、拍摄地点、预算投入提供依据。
由 DeepMind 开发的应用语言模型 Dramatron 可根据用户提供的中心句生成标题、角色、 场景描述和对话。据 DeepMind 研发专家 PIOTR MIROWSKI、KORY W. MATHEWSON 在 2022 年 9 月 29 日发布的学术研究《Co-Writing Screenplays and Theatre Scripts with Language Models An Evaluation by Industry Professionals》，Dramatron 使用分层故事生 成（hierarchical story generation）方法生成脚本和剧本。从输入中心句（logline）开始， Dramatron 可以生成一个完整的剧本，包括标题、角色列表、情节、位置描述和对话，用 户可以在分层生成的任何阶段进行干预，实现人类和 AI 在交互过程中共同编写脚本。剧作 家们认为 Dramatron 可以为人类提供灵感、构建故事背景及生成内容，并可能用于文学分 析。
海马轻帆“剧本智能评估”功能可从剧情、场次、人物维度评估剧本。据海马轻帆，由海 马自主研发的“剧本智能评估”3.0 功能可对院线电影、网络电影、电视剧、网剧等影视 作品的剧本进行智能数据化分析。项目方上传剧本文档后，“剧本智能评估”可对影视剧 本从剧情、场次、人物维度提供 AI 自动化数据分析。1）剧情分析维度，该服务可智能生 成剧情曲线，展示对应剧本内剧情冲突的高低起伏，并借此分析剧情整体节奏、重要剧情 设置的合理性。2）场次分析维度，该服务能够识别重要场次及整体分布比例，从而判断 该剧本的文本结构、冲突节奏分布、重要角色场次排布的合理性。3）人物分析维度，该 服务可以按照剧本角色互动关系生成人物关系网，计算主要角色之间的互动及戏份占比情 况，并从人物命运转折维度分析人物成长性。
海马轻帆“剧本智能评估”功能对剧本可商业开发性提出建议。“剧本评估服务”还可应 用于剧本商业化测评、指导改编、指导开发、艺人筛选剧本等多个场景，帮助影视公司解 决剧本初期筛选工作的高耗时低产出、剧本可商业开发的标准判断与风险规避、剧本内容 质检与后期制作开发等问题。
在影视中期拍摄过程中，AI 能够帮助生成虚拟场景，同时在影视中引入虚拟人等，提升创 作效率，降低时间及人力成本。一方面，AI 可帮助生成动画中的场景，帮助完成高重复性 工作，或现实生活中难以实拍或成本过高的场景。另一方面，利用 AI 技术能够实现演员年 龄的跨越、重现已故演员及同台呈现 CGI 角色和真人演员。
AIGC 技术辅助商业化动画片的首支发行级别作品《犬与少年》开播。据 Netflix，2023 年 1 月 31 日，Netflix 与微软小冰、WIT STUDIO 共同创作的首支 AIGC 动画短片《犬与少年》 正式发布。《犬与少年》是一款典型的日式风格动画，主要讲述了一只机械狗与主人从幼 年到暮年，相互陪伴、相互守望的故事。在这部电影中，AI 主要负责部分动画场景的绘制。
AI 在动画制作中承担繁琐工作，提升动画创作效率。在动画结尾，制作团队展示了 AI 辅 助场景制作的过程，共分为布局（layout）、一次 AI 生成、二次 AI 生成、成稿（Final BG） 四步。画师先手绘大致的场景，然后交给 AI 进行 2 次生成，最后画师在 AI 生成内容的基 础上进行修改。其中，繁琐的第二步和第三步完全交由 AI 操作。《犬与少年》摄影导演田 中宏侍认为 AI 将提升动画创作效率，使用 AI 能为同时参与多部作品制作的创作者提供更 加充裕的时间。
CGI 技术在影视拍摄过程中广泛采用。目前 CGI（Computer-Generated Imaging，电脑生 成动画）已是影视作品中不可或缺的一部分，贡献出多个经典的角色。比如，《阿凡达》 里潘多拉星球的土著“纳美人”，漫威宇宙里作为强大战力输出的绿巨人，及《指环王》 中全 GC 角色咕噜。据《阿凡达》幕后制作纪录片，拍摄时演员穿着带有标记点的动作捕 捉服，头上佩戴配备摄像头的特殊装置进行表演，计算机能够实时创建演员的骨骼，用以 驱动 CG 角色的运动。演员头上离面部只有几英寸距离的微缩高清摄像头能够实时计算出 面部肌肉的走势和运动，以此得到最真实的面部细节和表情变化。
AI+后期制作：在画质增量、人脸替换等领域落地 后期制作阶段需完成对影视作品进行画面剪辑、配音或修音、特效制作、配乐创作、海报 及预告片宣发制作等环节，而我们观察到，AI 技术能够成熟地运用到配音、译制、剪辑、 修复、转制以及后续宣发上，实现后期制作阶段的降本增效。
1）画质修复及增强 。AI 能够修复还原受损的影视图像，进而保障影像资料的清晰度及画面质量。例如，由中影 基地与中科大共同研发的“中影·神思”人工智能图像处理系统，能够对影视项目的图像 视频素材进行去场纹、修复、超分增强等自动处理，相较于传统的处理方法，“中影·神 思”系统处理影像的效率及质量均更优。据中国电影网，中影基地使用“中影·神思”系 统后，仅在四个月内便处理了《厉害了，我的国》超过三十万帧的低清图像素材，电影成 片中共计去场增强画面 74 分 25 秒，完成了传统数字修复手段不可能实现的任务，为《厉 害了，我的国》成为国产纪录电影票房冠军提供了坚实的技术保障。
2）人脸替换及人声替换 。AI 能够辅助演员面部的识别匹配，助益后期制作。如果前期演员拍摄过程中有所不足需要 补拍，可以应用 AI 技术直接在后期弥补，避免重复工作。若视频中出现“劣迹艺人”等敏 感人员也可通过 AI 技术对视频进行编辑，进行“人脸替换”。例如，在《了不起的儿科医 生》拍摄完成后，扮演雷皓一角的演员由于陷入学历造假争议，全程被“AI 换脸”，继而 减少了影视剧制作方及投资方的损失。
同时，在后期制作流程时，AI 能够通过语音识别、语音合成技术来处理人声，辅助进行音 色微调或修音，也能够为影视作品合成配音。例如，科大讯飞采用智能语音及 AI 技术，通 过采集已逝的著名配音艺术家李易老师的声音资料，让李易老师的声音重现荧幕，完成了 纪录片《创新中国》的配音。我们认为，随着 AI 配音技术逐渐成熟，AI 有望替代部分配 音演员，实现高效的自动化配音，为电影制作省去一定的配音成本。
3）辅助创作影视配乐 。AI 音乐公司“AIVA”通过深度学习技术，能够对莫扎特、巴赫、贝多芬等名家作品进行学 习，提取出古典音乐特征，并进一步根据这些特征建立数学模型，来辅助创作丰富的乐曲， 用户只需选择预定义的样式或上传原始声音文件，即可在 AIVA 中生成音乐。我们认为， AI 音乐生成器将辅助影视配乐制作，能够按照预定风格批量化生成配乐，提高配乐创作效 率，缩短创作周期。
4）特效生成。 AI 能够辅助后期特效制作，不仅能够缩短特效场景的制作时长，也能够为影视剧带来更好 的视觉效果。例如，在科幻电影《瞬息全宇宙》中，视觉效果团队采取了 Runway 公司的 技术来创建特效镜头，在短时间内便尝试了多种特效效果，在特效制作过程中借助 AI 技术 实现了降本增效。
5）辅助后期视频剪辑 。AI 能够自动识别视频、填充或删除相关内容，辅助提升后期影视剪辑效率。例如，Adobe Premiere Pro 推出了 AI 文字编辑视频功能，允许用户通过修改自动生成的视频文本，匹 配特定的单词和短语来快速编辑视频，大幅提升了视频编辑效率和速度。
6）辅助影视内容由 2D 向 3D 转制 。传统的 3D 影视制作模式一般由实拍+后期合成，或者纯后期 2D 转 3D 而成，但实拍模式 成本高、制作流程复杂、人力消耗多、时间周期长，同时纯后期 2D 转 3D 工序对每一个 制作环节要求细致，也需耗费大量的人力及资金成本，而 AI 技术推出后，能够实现将影视 内容快速由 2D 向 3D 自动转制，大幅提升影视作品 3D 转制效率。例如聚力维度推出的人 工智能 3D 内容自动制作平台“峥嵘”，目前已在云端实现 2D 转 3D 功能，能够随时随地 将普通的 2D 图片、视频转制成影院级 3D 视效的图片、视频。据聚力维度官网，“峥嵘” 相比于人类立体设计师具备精确、高效、稳定的优势，在 3D 转制时效上，是人类立体设 计师的 1250 倍，仅用一周时间就能够独立制作一部 3D 电影，目前已成功转制了《狼图 腾》、《机械战警》、《饥饿游戏》等一系列影视作品。
7）辅助宣发环节的海报及预告片创作。 在影视剧宣发环节，AI 能够快速生成宣发所需的海报和预告片，提升素材产出及宣发投放 效率。例如，据《去你的岛》官网微博，《去你的岛》使用 Midjourney 及 Stable Diffusion 制作了宣传海报。据 IBM 官网博客，IBM 的人工智能系统 Watson 在学习了上百部惊悚预 告片的视听手法后，从 90 分钟的电影《Morgan》中挑出了符合惊悚预告片特点的 10 个 镜头，剪辑出了一段 6 分钟的预告片，将预告片的制作周期从一个月缩减至一天。