本期导读
2024-06-10
视频生成AI 大模型Sora 的推出,展示了AIGC 技术在电影领域应用的强大潜力,其可理解与电影摄制密切相关的画面风格、拍摄手法、镜头特点等,并能通过输入文本、图片、视频等信息智能生成最长时长为60 秒、分辨率为1080p 的高品质逼真视频,受到行业广泛关注。近年来传统计算机图形学(CG)方法与深度学习技术不断交汇融合,将现有语言、视觉、声音等AI大模型垂直应用于电影剧本和故事板、视觉预演、动作和表演捕捉、声音制作等工艺环节,已形成新技术、新算法、新应用与新实践。未来,该领域研究将持续关注多模态大模型、实时渲染和人机交互技术。人工智能技术已成为电影摄制创新升级的加速器,为电影摄制实践带来了创新性变革和革命性影响,并加快推进形成电影行业新质生产力。本期遴选虚拟数字人新范式、基于深度学习的电影智能化摄制技术、电影工业美学和技术美学、技术革新视野下动画媒介发展的机遇与挑战等论文,论述了电影行业与智能科技加速融合下的技术动向和行业生态。此外,全国农村电影管理平台数据可视化的研发与实现、基于计量电影学的电影色彩风格可视化方法,展示了数据可视化技术的电影行业实操应用;电影沉浸式音频码流规范及功能特性研究、沉浸式剧场实时粒子特效系统研究则展现了沉浸式视觉、听觉技术的最新研究与实践,欢迎感兴趣的读者予以关注。
——本期责编
虚拟数字人是计算机图形图像领域的研究热点,伴随智慧时代和元宇宙时代来临,在新一代信息技术和现代智能科技迅猛发展与广泛应用的背景下,虚拟数字人已成为影视传媒领域的应用热点。虚拟数字人的研究与实现关键在于对其几何造型、材质纹理、语义信息等进行精准描述和有效表征,其制作生成涉及扫描、建模、驱动、渲染等关键核心技术。从技术品质上看,电影级虚拟数字人既要在人物真实感方面突破恐怖谷效应,达到超写实水准,又要支持与真人和场景的智能实时交互与无缝虚实融合。伴随人类社会智能化升级的持续推进和不断深化,向AI 类人智能体(Agent)发展演进成为虚拟数字人迭代升级的重要趋势和必然要求。《虚拟数字人新范式:SIGGRAPH ASIA 2023 电影制作相关研究综述》一文结合电影制作发展需求分析总结了SIGGRAPH ASIA 2023 会议虚拟数字人的最新研究成果和技术发展趋势,从几何造型、运动控制、动作捕捉等方面细致阐述了虚拟数字人技术应用及其实现方法,并对虚拟数字人服务电影创作生产提出了有价值的深层次思考。虚拟数字人是数字经济时代的发展新动能,具有极其广阔的发展与应用前景。未来,虚拟数字人技术应充分汲取计算机图形图像和人工智能领域的融合创新成果,统筹提升真实感、智能化、交互性、鲁棒性、稳定性等技术性能,为服务电影制作创新升级和产业提质优化发挥积极作用。
——刘达,正高级工程师,中国电影科学技术研究所(中央宣传部电影技术质量检测所)总工程师,《现代电影技术》主编
当前,我国电影产业蓬勃发展,科技正在为电影产业的发展进步提供强大助力;深度学习技术在人类社会生产生活的各个领域得到广泛应用,且在效率和性能方面不断凸显优势,为深度学习技术在电影产业的应用提供了新思路。与此同时,电影工业也逐步进入转型阶段,进一步催生了深度学习与电影产业结合的需求。论文《基于深度学习的电影智能化摄制技术研究》以电影摄制流程为主线,介绍了深度学习技术在电影摄制领域的应用;从电影前期筹备、中期拍摄到后期制作,详细梳理介绍了当前电影智能化摄制的先进技术及应用情况,同时总结了电影智能化过程中面临的相关问题及技术挑战,并对深度学习与电影摄制结合的发展需求和未来趋势进行了分析与展望。论文通过介绍深度学习技术在电影摄制过程中的研究进展及应用,可以拓宽电影从业人员的技术视野;通过总结当前电影智能化摄制面临的技术挑战,可以为相关研究提供方向和重点,有助于进一步优化完善深度学习技术在电影领域的应用;其对于技术发展趋势的展望也有助于激发电影创新活力。
——季向阳,教授,清华大学自动化系脑与认知科学研究所所长,中国人工智能学会深度学习专委会主任
数据已成为数字经济时代的第五大生产要素,随着人工智能技术的飞速发展,数据的重要性愈发凸显。我国具有海量数据资源的独特优势,电影行业也不例外。影片从创作到放映的过程中,产生了大量图像、视频、音频、文本等非结构化数据和结构化数据。在此基础上,院线市场、二级市场、农村公益放映等电影多元化放映体系进一步提升了数据的多样性和海量性。通过对多源、异构、海量数据进行采集、清洗、预处理和挖掘,并结合数据可视化技术,利用图形、图表、地图等可视元素,将繁杂的数据以动态、实时、多维度、交互式的方式进行可视化展现,将有助于洞察数据规律与趋势,服务科学决策,推动产业提质升级增效。《全国农村电影管理平台数据可视化的研发与实现》一文基于我国农村电影公益放映实际需求,运用数据预处理、数据分析、可视化结果生成等技术实现全国农村电影公益放映数据的可视化展现,并利用异步通信、分步加载、渐进式渲染等方式解决了海量数据加载与更新问题,对于推动我国农村电影公益放映优化升级与高质量发展具有重要意义。
——王萃,正高级工程师,中国电影科学技术研究所(中央宣传部电影技术质量检测所)高新技术研究处副处长