丨>>>> 【本期内容】 <<<<丨


❉英伟达基于GAN模型研发实现2D/3D转换的AI图像工具

❉荷兰3D角色技术服务商Xsens推出云端数据处理与共享技术平台

❉国产动画软件Animcraft 2.0灵活高效支持数字角色面部表情制作

❉深圳看到科技发布全球首款12K/3D专业VR摄影机



【点睛】


近年来,电影行业的专业化、云化和智能化进程积极推进。以云计算、分布式计算、机器学习、深度学习、虚拟现实、增强现实等为代表的高新技术在电影行业的发展与应用不断拓展和持续深化,不仅有效提升了电影的制作水平和技术品质,推动电影摄制流程创新升级,而且在推动电影软硬件系统升级换代、加快构建现代化工业化技术体系方面发挥了重要作用。


加强我国在电影高新技术研发与应用领域的顶层设计、规划布局和基层推进,加快推动电影高新技术实现自立自强,是新时代深化电影科技创新和推进电影强国建设的题中应有之义。



英伟达基于GAN模型研发实现2D/3D转换的AI图像工具


1623294370472786.jpg


近日英伟达(NVIDIA)开发出深度学习引擎GANverse3D,GANverse3D可作为英伟达Omniverse平台的扩展模块,在英伟达ARTX GPU上运行时,GANverse3D可将任何2D图像重建为3D逼真模型。


使用GANverse3D建模时,制作人员无需3D建模专业知识,也无需在渲染上花费大量预算。例如,单张汽车照片可转换为3D模型,该模型可在虚拟场景中行驶,并配有逼真的前灯、尾灯和转向灯。


由于当前从不同角度捕捉同一物体的真实数据集不足,所以大多数实现2D/3D 转换的AI 图像工具会使用ShapeNet等合成3D数据集进行训练。


为从真实世界数据中获得多视图图像,英伟达研究人员采用生成对抗网络(GAN)模型,修改深度神经网络层,将其转化为数据生成器,从多个角度描绘同一物体,这些多视图图像被插入到逆图形渲染框架中,即从2D图像推断3D网格模型的过程。多视图图像训练一旦完成,GANverse3D只需一个2D图像即可预测3D网格模型,该模型可与3D神经渲染器一起使用,使制作人员能够自定义对象和变换背景。



荷兰3D角色技术服务商Xsens推出云端数据处理与共享技术平台


1623294433526122.jpg


荷兰3D角色动画惯性运动跟踪技术服务商Xsens近日推出MotionCloud平台,提供基于云计算的快速处理功能和自动Xsens MVN报告。


使用MVN Analyze和MVN Animate的用户将能够直接把捕捉数据上传到云端,并与他人共享,多个用户可协作编辑多组运动数据,批量处理多个影像,从而节省时间和开支,如在伦敦拍摄捕捉镜头的创意工作室可使用MotionCloud高速处理数据,再与在洛杉矶的动画师共享数据,以便驱动CG角色运动。收集到云端的运动数据还可自动生成运动、健康和人体工程学应用报告,以便提供给全球动画师或数据分析师访问并使用。


MVN是Xsens开发的便携式全身动作捕捉解决方案,采用微型惯性传感器、生物力学模型和传感器融合算法,无需使用摄像机即可对人体动作进行捕捉,灵活性强,避免了信号阻挡或标记物混淆的问题,节省了捕捉数据清理时间,同时适用于室内和室外工作环境。



国产动画软件Animcraft 2.0灵活高效支持数字角色面部表情制作


1623294622142519.png


国产动画软件Animcraft近日发布2.0版,引入整套面部绑定与动画系统、通用表情库和相关工具链,包含面部捕捉、3D预览、表情库存储、重定向工具以及与3D Max/Maya/UE/Unity连接的所有插件。


Animcraft 2.0将全部工具完全打通,制作人员可通过Animcraft的任意入口制作数字角色的面部表情,支持在3D Max、Maya、UE、Unity或Animcraft主程序之间任意互导表情动画、转制面部绑定,并支持可互转的骨骼与Blendshape工作流。


Animcraft 2.0整体重写了动画场景编辑器,设计了多层非线性非破坏式动画编辑系统,且资产库新增了动画、表情、角色,可进行任意拼合,实现动画快速创作。


此外,使用基于苹果(Apple)深度相机的iPhone与iPad Animcraft APP,可在Animcraft主软件内无线捕捉表情数据,捕捉到的面部数据将存于Animcraft资源库,其后可进行实时预览、软件互导和非线性动画制作。


Animcraft是一个智能可协作的角色模型与动画资源库,其重定向功能可让角色动画在不同骨骼、绑定、身材、软件之间按照关键帧与控制器稳定互传。场景与动画编辑器可对动画资源进行编辑、物理解算和输出;还包含所有主流DCC软件与游戏引擎的便捷插件和数据接口,方便资源利用。



深圳看到科技发布全球首款12K/3D专业VR摄影机


1623294743949138.jpg


深圳看到科技(Kandao Tech)近日发布全球首款12K/3D专业VR摄影机Kandao Obsidian Pro,该摄影机支持拍摄12K×12K 30fps的3D全景视频,并支持60fps的超分12K×12K 3D全景视频制作。


搭载8个2400万像素APS-C传感器,拥有14档动态范围,感光度ISO可上至12800,即使在极限暗光场景下,也能清晰捕捉暗处画面和深度信息。


配备8颗定制超6K f2.8大光圈鱼眼镜头,每个镜头视场角达195°,保证360°每一处画面能同时被3个镜头采集,像场覆盖达300%,可满足全景拼接和3D视频渲染需求。


采用电动控制,支持“近距离”和“普通”两档对焦距离,满足大光圈下不同距离拍摄需求,实现精密景深控制、动态模糊创作。


支持12bit RAW视频与全I帧视频格式录制;一体化SSD模块,满足8镜头超高速数据存储。


为满足影视制作中移动拍摄需求,Kandao Obsidian Pro内置九轴陀螺仪,结合SuperSteady防抖算法,可避免果冻效应,实现影视级防抖画面。


此外,看到科技还启动了Kandao Obsidian Pro大使计划,在全球范围征集影视VR创作者,提供Kandao Obsidian Pro样机扶持,助力其拍摄专业VR影片。