聚焦Sora热①｜AI如何冲击视频业？将替代哪些影视工种？
大众新闻客户端 师文静
2024-03-07 10:44:10原创
2023年大家见证了AI文生文、文生图的飞速进展后，近日OpenAI发布的文生视频模型Sora又给视频业带来强大冲击。只要给Sora输入一段文字指令，它就会轻松生成逼真、清晰的动态视频画面。Sora带来的大范围讨论中，AI将引发影视制作行业大变革也是焦点之一。
Sora和AI正在如何影响影视业？它将率先替代的工种是什么？影视制作者将如何应对更智能AI的来临？影视专业教学、人才培养应做哪些准备？AI时代面临哪些法律和伦理问题？
近日，记者采访AI应用者、影视制作者、高校影视专业研究者，一起去揭开AI影响下视频业面临的转变、机遇和挑战。
如何看待Sora？
“元宇宙”发展中的一环
很多人都看过“一个穿着皮衣的女性走在东京街头的视频”，这个逼真的模拟现实的视频就是视频生成模型Sora由文字生成。Sora最大的优势是生成的视频长达60秒，超当下的AI视频生成工具。同时，Sora生成视频的逼真度令人惊艳，比如视频中小猫的每一次跳跃、每一根毛发的飘动以及光影效果，都自然流畅、栩栩如生。
Sora经常被提到的强大功能是，它不仅能生成有故事性的场景，模拟复杂的场景变换、角色表情，还具有认识世界的逻辑。比如，它能理解和模拟运动中的物理世界，能理解杯子会摔碎、坦克撞毁汽车等规律。
假如有一天Sora模型可以面向普通大众公开使用，人们将会轻松应对短视频平台视频的创作，且可以根据用户的风格偏好进行定制式视频。
使用Runway、Kaiber等已有视频生成工具做动漫小说解说、创意短视频的小丁告诉记者，之前已有的AI工具需要匹配图片、视频数据库才能用，缺乏生成原创视频的能力，生成的视频连贯性和动作复杂性也有局限，只限于简单的微动作，如眨眼、缓慢的镜头移动，且持续时间一般不超过3秒钟。而这些方面，Sora则有强大优势。“不过，Sora也不完美。它在模拟物理动作，如玻璃碎裂，细节上仍有改进空间。”
（Sora生成的视频画面）
山东泉影空间影视传媒有限公司参与了《流浪地球》系列、《长津湖》等视效大片的后期制作，是业内资深特效公司。该公司总经理曹杰告诉记者，Sora这么快问世让人震惊，但也并不意外，这项技术迟早会出现。“单从画面来说，Sora确实很不错，原本需要在三维软件中花费大量时间去计算、解算的内容，它很快就生成了，真实程度也没有太大问题。”
山东工艺美术学院数字艺术与传媒学院副院长、教授张光帅，常年从事动画、影视、数字媒体艺术的研究和教学，经历对多媒体、数字媒体和交互新媒体、生成式人工智能整个过程的研究。张光帅认为，应该在人工智能发展框架中去认识Sora。“我在一些学术研讨中也表达过，人类认知和表达世界，是从文字到图像、再到影像、声音的一个过程。人依靠视觉、听觉、嗅觉、触觉等来呈现对自然界的认识。人类也带着这种认知方式进入数字世界、元宇宙。人工智能、数字内容建设，也是在一个虚拟空间又依次去调动人的这些感官。”张光帅称，以OpenAI发布的产品为例，从Chat GPT到DALL·E再到Sora，就是从文本模型到图像模型再到影像模型的演变，数字虚拟世界的生成，也遵从对文本的理解到对声音、图像的转化，再到第三个维度的影像时代，这样的一个过程。
张光帅告诉记者，Sora只是人工智能发展中一个突破环节，在未来，随着虚拟世界的纵深空间、交互空间不断演进，人工智能生成模型会更丰富，比如，能生成三维场景、虚拟替身等，完成更复杂的交互体系，而随着基础硬件的建设，人类将来会面对一个更好的元宇宙场景。
视频业对AI的应用现状如何？
短视频应用繁荣，中国首部AI动画片近日开播
目前，人工智能生成视频能影响到的领域包括用户生成内容，相对专业的游戏、动漫、电视剧，以及工业标准化的电影领域等。
在个人用户应用方面，大家能在网上看到大量AI生成的“动漫小说”视频画面、数字人等。针对这种现象，张光帅告诉记者，在视频时代，人人都是内容生产者，AI生成视频在娱乐、电子商务等短视频领域应用很繁荣，AI使用者可以大量生成图像、连接成短视频，快速发布，以获取流量。“这些领域对内容创意、内容质量要求低，应用范围很广。不过，随着网友逐渐审美疲劳，此类AI应用还要回归到优质内容、优质创意的方向上。”
（2月26日中国首部文生视频AI动画片《千秋诗颂》开播）
在相对专业的游戏、动漫、电视剧领域，AI生成视频应用正在不断萌发中。大家普遍知晓的AI换脸、换头，在真人电视剧中应用普遍。《流浪地球2》剧组不断训练AI模型，实现了AI换脸技术，和对演员李雪健声音的AI修复。去年，漫改剧《异人之下》出现了AI演员厘里饰演的角色，成为话题点。今年2月26日，央视制作的中国首部文生视频AI动画片《千秋诗颂》开播，引发大面积讨论。该动画汇集200多首诗词，内容皆是应用可控图像生成、人物动态生成、文生视频等新技术制作。AI生成视频在幼教、插画、出版等领域也比较深入，让内容生产快速高效……
近日，有博主发布4分钟AI生成短片《西游记》引发网友围观。该作品借助AI描绘出了花果山、仙宫、人间城池等场景和孙悟空等角色，相比于普通动画片，这个作品非常粗糙。这个短频由ChatGPT、Midjourney、Runway等工具制作，经历文字生成脚本、脚本生成分镜、分镜生成图画、图画生成视频等过程。依靠AI一个星期就完成人工需要渲染半年的剧情内容。
（3月6日，完全由AI制作的开创性长篇电影Our T2 Remake首映）
而在国外，据报道，3月6日一部“完全由AI制作的开创性长篇电影”在洛杉矶首映。作品是由50位AI领域艺术家创作的《我们的终结者2重制版（Our T2 Remake）》。该片内容上呈现了一个人类对抗ChatGPT统治的世界，探讨当代AI发展的影响。团队利用Midjourney、Runway、Pika、Kaiber、Eleven Labs、ComfyUi、Adobe等多个AIGC工具进行创作，确保所有内容均为原创。
超越以上AI工具，能生成持续1分钟1080P高清晰视频的Sora，如果放开始用，被认为给电影制作提供了前所未有的工具。
张光帅称，在工业标准化电影领域，特别是特效电影领域，AI的应用可能更多是前期和辅助，比如概念图生成、氛围设计、分镜头设计等，对于高品质电影对内容制作、画面润色、风格统一等高要求，现阶段AI难以胜任。“随着人工智能的发展，在未来，不管是不是Sora，更具稳定性的视频生成模型将有可能介入特效电影创作，大量生成电影级别画面，或许可以平替掉4K影像。”
山东泉影空间、东寰（济南）影业总经理曹杰告诉记者，虚拟拍摄与特效制作结合是当下影视制作的潮流，美剧《曼达洛人》是把这项技术运用到商业的成熟案例，虚拟拍摄不同于绿幕摄影+后期合成，虚拟场景本身就能实现真实演员和虚拟角色、场景的互动拍摄，而Sora这类AI的出现，让这项技术有了更多可能性。
AI将会替代哪些产业工种？
分镜师、动画预演等职业可能被淘汰
Sora推出第二天，一些主营图像处理、视频制作软件的数字公司股票应声下跌。很多观点认为，人工智能在视频内容生成领域的潜力，将重塑影视产业生态。自人工智能问世以来，关于“人工智能是否会抢夺人类工作”的辩论也愈演愈烈。在视效技术、特效制作越来越成为衡量电影、电视剧工业化水平的时代，Sora和其背后的AI如何影响视频业呢？
曹杰告诉记者，拿Sora来说，在短视频生成上，可以满足我们日常对视频画面的需求，但跟人工制作的视频还有差距，都体现在细节上，比如人物与模型的错位、光线的不一致等；目前Sora距离直接生成真正剧情向的作品差距很大，对于镜头表现手法的运用也较弱，短时间内没办法替代市场上的电视剧、电影制作，不过随着Sora的迭代更新，增强大模型训练，那时候真正会影响整个行业。
类似Sora这样的AI兴起，受影响的行业和工种有哪些？曹杰认为，首当其冲的行业可能是广告业。“当下的游戏画面已非常逼真，而且游戏更多是交互类、互动类，我认为短期内受AI影响不会太大。内容更灵活、多变的广告业可能是最先受影响的，其次就是短视频。就像剪辑软件出现后，剪辑、调色不再是剪辑师的专属一样，AI的出现会降低创作门槛，会让特效、拍摄、灯光等不再专属于专业人士。AI视频生成软件可以让人人能操作视频。”
对于电影、电视剧这类专业性很强的视频行业，曹杰感觉AI有冲击但不至于狂风暴雨，在很长一段时间依然是专业人员用专业的软件展开制作。“也不是没有影响。如果AI变得强大，最先受影响的影视业工种可能是分镜师、动画预演等。AI是更有效的工具，它会优化、提升工作效率，会淘汰一部分基础工作从业者。”
作为影视制作从业者，曹杰始终认为AI是有效的工具。“AI出现降低了影视制作门槛，但不代表降低水准，反而倒逼我们从业者不断提升自己。我们目前在人才需求方面，也开始倾向于掌握AI使用方法的人。我觉得只有掌握好技术，用好技术，顺应行业发展规律，才能在这个时代收获更多。”
（重工业电影有非常严格的制作高要求）
山东师范大学新闻与传媒学院副教授杨娟指出，尽管人工智能在影视制作中扮演的角色日渐重要，但目前的作品仍然面临着内容同质化的问题。她认为：“在当前阶段，让作品具有更多的人性和独特韵味，是影视传媒专业的学生应该抓住的核心竞争力。”
张光帅每年都带领学生团队外出调研，去年到北京“大厂”的调研，就涉及人工智能的应用和影响。他称，传统影视行业的特效制作，目前更依赖人工后期制作，AI不足以达到目前的影像标准；工业化标准体系下的游戏产业更容易接受人工智能，对AI的态度更开放。张光帅认为，Sora目前还是个概念，但类似的AI迭代超乎想象，未来对电影业的影响是绝对存在的。
畅想一下，AI迅速发展之后，将会让电影变成什么样子？张光帅告诉记者，影视业发展，从班底制实景拍摄，逐渐过渡到绿幕拍摄、动作捕捉等高科技应用阶段，下一步或将快速进入人工智能影响下的阶段，AI将带来电影新革命。张光帅称，在未来，AI能进行一些大体量、标准化生成，比如，可以快速便捷地将一部小说转化为剧本分镜头、草稿式动态镜头等，进而生成影像，极大降低电影制作门槛之余，这可以让更有想象力的内容，通过低投入生成为较高质量的影视作品。“AI对于电影存在形态和模式的影响可能超乎想象。电影有可能变成一种虚拟交互式场景电影，电影叙事是开放的、多元的，观众可选择角色和故事线。看电影也可以是体验电影，或许会出现线索式、轨道式看电影方式，人可以在行走中体验一个故事。”
在对视频产业影响方面，受AI迅速发展冲击，近日有科技公司宣称，AI技术将进一步降低创意实现的门槛，进一步减少虚拟拍摄前期工作的准备时间、成本投入，对行业带来的影响是，有望加速虚拟影棚从工业级大型专业影棚走向企业级中型影棚、民用级小型影棚。
（大众日报·大众新闻客户端记者 师文静 实习生 李明钰）
责任编辑：师文静