德克斯特工作室获得基于AI的VFX(视觉特效)新专利,坚定了其在VFX制作效率和质量提升方面的技术创新意愿。
内容专业公司德克斯特工作室于28日宣布,已完成AI去衰老、超分辨率等共4项新专利的注册。
新注册的AI专利包括▲视频序列去衰老恒常性保持技术 ▲多层图像高质量超分辨率技术,结合深度学习基础的视频处理方式和高度化的算法,期待在提高制作效率的同时提升完成度。
AI去衰老技术的专利名称为“用于视频序列的去衰老恒常性保持的图像制作方法”。其特点是能够自动将去衰老效果应用于整个视频,而不是逐帧单独处理,同时实现自然且一致的外观。
通过对整个视频中表情、光线等大幅变化的“关键帧”进行深度学习的集中训练,将结果应用于具有相似结构的其他帧,从而实现连续帧之间一致的去衰老效果。此外,去衰老处理仅针对面部皮肤的颜色分布,与去衰老图像的颜色匹配,从而保留原始的氛围和皮肤色调,实现高一致性的去衰老效果。
通过个性化功能,能够识别年龄、性别等信息来调整去衰老强度,因此可以同时实现衰老(Aging)和去衰老(De-aging),能够应对年龄变化较大的场景。该技术已应用于全球OTT等项目,并可用于将拍摄演员的面部替换为其他演员的面部和表情的“面部交换(Face Swap)”。
专利名称“用于多层图像的高质量超分辨率的图像制作方法”是针对VFX和高分辨率内容制作优化的超分辨率技术。与传统的单一图像超分辨率方法不同,该方法将EXR(扩展范围)格式等多层图像的每一层(颜色、光照、深度、位置等)分离并独立进行超分辨率处理后再进行重构。在对需要保持各层特性数据的多层图像进行超分辨率处理时,也能在不损失数据的情况下,以高处理效率提升质感和细节。
此外,德克斯特还新注册了4项专利,包括利用全身扫描和动作捕捉制作3D身体轮廓、在虚拟制作环境中利用数字人进行拍摄系统的专利。基于AI深度学习的匹配技术、摄影测量拍摄自动化技术等多项新VFX技术也在申请专利中。德克斯特还运营着由AI艺术家和AI工程师组成的AI专门团队,专注于积累AI制作经验和开发生成型AI等新技术。
德克斯特研发研究所所长宋在元表示:“通过此次专利技术以及与VFX制作管道直接关联的多项AI技术,我们的工作效率持续提升,并在电影、电视剧、广告等多个领域扩大技术应用范围。”并表示:“通过最大化效率所获得的资源,正在投入到可用于主角级角色的基于深度学习的‘数字人面部系统’开发等独特技术优势的获取中。”