3DCAT 二维码

扫一扫 立即咨询

行业资讯实时交互

【实时渲染】Houdini18.5于Unreal实时渲染
近两年对于Unreal做片子的话题在朋友圈传的很火, 实时渲染大幅节约人力成本,但如今在国内似乎很少看到已经产生商业价值的大作。也有很多朋友问我,做电影的适不适合学习Unreal,今天从技术角度给大家分析下Houdini18.5 于 Unreal实时渲染。 一、了解几个根本问题 1、做 CG电影的痛点在哪里? 不了解清楚这个问题,所有的决策都是在跟风。 渲染通常远没有模拟费时间。 我曾从事电影制作行业6年多,参与过数十部院线电影制作,经常镜头需要爆炸这类特效,700分辨率的烟火制作,如果需要10天,其中有2天在调整逻辑,6天在解算,2天在渲染。这个数据是将工作汇报给非常有经验的领导而言。如果视效总监总是告诉你,感觉不是很好看,我要看渲染最终效果,那制作周期将会长达20天,12天是用来给视效总监试错和学习的。总结而言,一个非常有经验的团队而言,渲染时间是完全可以忽略不计的。 渲染通常远没有模型制作费时间 这个必然不用多说,曾经遇到过一个宇宙飞船模型,5000个零件,打开 maya文件需要1个小时,渲染时间远低于模型设计的时间,给飞船做刚体破碎,光是将模型切开就需要几天时间,如果你觉得可以放到 Unreal渲染,先不谈动态的破碎问题要如何解决,你能不能将这个飞船和10个G的贴图资源载入你的显卡?或者,你是愿意承担人力成本还是愿意承担购买高端显卡。UE5听说能渲染巨量顶点,你可知,这种技术没有上百个人的开发团队支持,你真的寸步难行。 渲染通常远没有K动画费时间 有幸在刚入行的时候做过绑定,K过动画,我虽然不算是熟手,到业绩也相当不错,一天能K 1秒人的动作,质量不算团队中最高的。渲染则比K动画要轻松多了,又不用人每时每刻去耗费精力。 总结下就是 渲染几乎是从概念设计模型贴图动画特效中最不需要精力和时间的环节。当然对于没有经验的艺术家对于渲染过程的感受应该是相当痛苦的。对于有经验的人来说,通常都是盲操,毫无影响。 2、UE实时渲染痛点在哪里? 优化过程是一般美术掌控不了的 这是技术美术通常比较繁重的工作,几毫秒的优化,资源需要重做,uv需要重分,贴图需要重做,某效果需要砍掉。对于靠创作赚钱的制作公司,这种制作上的灵活性简直是一种毁灭。 实时渲染人力成本是你无法想象的 对于CG片子制作,高付出,低回报,最重要的痛点在于人力成本,对于 实时渲染人力成本没有3倍以上的付出,留不住人的,比如某电影公司特效组,被网易都挖空了。所有电影公司特效师能力只要稍微强一点,基本都去做游戏了。这里可能很多人没懂为啥去做手机游戏,画质这么渣,没啥技术的行业,但是你可知,整个互联网产业的核心技术基本都是靠游戏行业带动起来的,游戏是整个手机行业发展的催化剂,你的电脑CPU显卡这些伟大的硬件厂商都是围绕着游戏在测试,你的手机能从大哥大变成运算能力差点能赶上笔记电脑的这种技术演变,游戏是推动硬件发展的巨大动力。 隐形的开发成本是不懂技术的老板层面根本无法理解的 静态场景渲染是UE强项,只要但涉及到动态的东西,比如破碎一个房子,哪怕是稍微落点灰,破个小石头,飘点火,拉点烟,这些数据交换方式,渲染方式完全需要你自己开发的,还不涉及复杂点的刚体置换渲染,没有置换的刚体就是毛片,岩浆把温度用来控制渲染,这种乱七八糟逻辑不找一个年薪百万的团队来做,根本就是在开玩笑。 CG一直很难被实时的替代的最重要的原因是因为制作内容比较复杂,比如导演想要一缕青烟饶过我的头发,搅动我的头发飞舞,并由黑变红,还断了一些。这种东西用UE实现了实时渲染,将会轰动整个游戏行业。但是这种东西让一个实习生在Houdini实现,只需要2天。 再比如,一刀挥过了美女的裙子,裙子破裂,并大腿滋血冲来了裙子的裂口。如果实现了这种东西得 实时渲染模拟,无疑是颠覆了图形学行业。如果这种东西让一个稍微有经验的Houdini艺术家最多只需要3天,渲染代价基本不考虑。使用UE需要花费10人团队,300天为这个效果定制一个插件。换个效果又来300天,你是在搞科研。 总结就是 对于CG制作公司创作是生存的根本,制作的灵活性是节约成本最重要的途径,如果没有创作,根本没有竞争力,用户的眼睛已经容不得那些你都看不下去的东西了,你指望忽悠去让用户付款,那简直就是在更傻子硬刚。 制作上如果缺少灵活性你将花费巨大代价去做一些新手已经做烂了的事。 二、游戏公司用UE做宣传片 那个代价我看着都心疼,一批都快是专家的人了,用UE搞片子,做着电影行业新手的效果,几十个人,搞几秒,花费接近上千万人力成本,做着真的伤脑筋的画面,这成本差点可以用来做半个流浪地球了。在比如做个夜景,AI团队都用上了。 问他们为什么选择 UE,因为实时渲啊!!!如果不是因为游戏月流水几十个亿,估计这帮人早就被开除了。 三、一些有用的建议 对于小公司,用HoudiniGPU渲染,最新的karma,如果要快,用Houdini拍屏出片子也不是不可以。 渲染对于稍微有经验点的人来说,时间绝对不是问题,花时间的是设计,不要试图在设计上减少付出,如果要在UE做同样的效果渲染上要付出不可估量的代价,如果光 渲染草和树,那另当别论。 既然你能在渲染上节约时间,你能节约建模贴图特效模拟的时间吗?那些环节占用了百分之95,真的没必要用十倍以上的人力成本去优化这百分之5的还让整体灵活性降低百分之80。这百分之5中百分之70都还是电费,何必跟电费过不去。

2020-10-12

【像素流送】将高质量的UE4内容提供至任何地方
通过 像素流送你可以将最高质量的内容流送到所有平台——甚至包括移动设备上的几乎所有Web浏览器,而且没有任何下载和安装要求。对与会者而言,这并不比访问YouTube视频复杂。但是和YouTube不同的是,他们还可以即时通过键盘、鼠标、触摸事件或自定义HTML5用户界面与这些内容交互,并将这些响应发送回引擎。 像素流送使你能够向任何地方发送产品配置器、现场建筑设计评测或交互式培训等应用程序,只要现代化的Web浏览器能够运行就好。你只要分享一个链接就能让多名观看者在同一个会话中进行协作,或者你也可以向每一个连线的观看者发送独立的会话。 像素流送的工作原理是什么? 截至目前,最终用户用来消费你的实时内容的设备(无论是台式PC、主机、平板电脑,还是智能手机)通常都是运行Gameplay逻辑并将结果 渲染到屏幕上的设备的同类。因此,内容的性能和质量受限于设备的能力。 但是有了像素流送,你就可以在功能强大的远程计算机(在云端或者本地服务器)上运行你的 虚幻引擎应用程序,利用它的所有资源——CPU、GPU、内存,等等——实时执行游戏逻辑并 渲染每一帧画面。然后最终用户可以在他们自己的计算机、平板电脑或智能手机上使用标准的Web浏览器,通过一个轻量级Web服务堆栈连接到那个运行的游戏应用程序。 这里面有什么奥秘? 虽然功效强大,但典型的像素流送设置是十分简单的,只包括三个将虚幻引擎连接到查看平台的组件——任何人都可以在局域网中比较轻松地设置它。而它的功效足以供具有部署Web服务经验的团队用作创建自定义云托管平台的基础。 为了在查看者和虚幻引擎应用程序之间实现尽可能低的延迟,系统使用WebRTC点对点通信框架。 - 像素流送插件——此插件在虚幻引擎内部运行。它使用H.264视频压缩对渲染的每一帧最终结果编码,将这些视频帧与游戏音频一起压缩到媒体流中,发送到WebRTC代理服务器。 - WebRTC代理服务器——WebRTC代理服务器负责将像素流送插件产生的媒体流通过直接的点对点连接转发给多个查看者。 - 信令和Web服务器——信令和Web服务器负责在查看者与WebRTC代理服务器之间协商建立连接,并为查看者提供播放媒体流的HTML和JavaScript环境。 这种办法好在哪里? 这样一套系统的优点很多: 移动设备和轻量级Web浏览器可以显示工作站品质的3D图形——这样的图形品质大大高于不使用这套系统时所能达到的的水平。它们能够使用依赖强大GPU的渲染功能,以很高的帧率显示复杂的场景。 从加载网页到与体验交互的时间可以不到一秒钟(你可以用WebGL方法试试做同样的事)。众所周知,延迟是查看者放弃网页的主要原因(根据Kissmetrics的统计,40%的人会在延迟达到三秒或更长的情况下放弃)。 体验是可以预测的。你知道无论他们在什么设备上消费你的内容,看到的图像都会和你看到的一样。你不必担心视频驱动程序或GPU限制造成视觉效果问题。 这是一种“零安装”解决方案。最终用户不需要预先下载插件、大型可执行文件或内容文件,不需要安装任何东西。查看者所消费的仅仅是视频流——就和其他任何视频流一样。而且和WebGL不同的是,你的3D数据不在别人的硬盘里,也就没有某些公司可能担心的安全问题。 从开发者的视角来看,这种解决方案的支持难度远远低于将体验移植到所有可以想到的移动设备和浏览器配置。如果你需要进行更改该怎么办?只要在一个地方进行更改,所有人都会即刻获得新的体验。你只要针对Windows将你的应用程序打包一次,最终用户可以选择在任何平台上、用任何支持WebRTC连接模式的现代化浏览器体验你的内容,这包括台式机、iOS和Android上的Google Chrome和Mozilla Firefox。 如果你从来没有接触过虚幻引擎,可以进入3DCAT实时渲染云 www.3dcat.live进行体验。我们希望你发现像素流送功能很有用处,而且乐于使用。

2020-10-09

 云计算小讲堂 | 像素流送有什么优势?
随着5G的普及, 像素流送相关技术广泛应用于生活中。例如汽车展示、建筑漫游、工业仿真、游戏试玩、手办模型展示、艺术展览、医疗实训、智慧党建、智慧园区……那么 像素流送到底有哪些优势? 像素流送的优点 1.用户体验一致 即使是手机这种轻量化的终端也能体验到服务器级别的高端显卡带来的震撼效果,尤其是一些复杂的场景,以往在手机上是无法运行的,现在也能“连连看”了。除此以外,不管是PC还是手机,通过像素流送所看到的内容都是一致的,不存在设备降低画质也降低的现象。 2.更加易用,能更好地满足用户的体验 对于用户来说,体验像素流送只需要能够打开浏览器联网即可。现有的家庭网络条件加载网页的时间也是很短的,完全不需要下载、安装各种应用。 3.降低终端成本 既然终端的性能已经和体验脱钩,那么使用 像素流送自然无需再购置更加高端的芯片、显卡等设备,这样极大地降低了用户的体验成本。 4.内容更加安全 对于应用开发者来说,通过像素流送只需要把工程文件打包发布到 云端即可,用户访问的都是一帧一帧的画面,无法通过技术手段获得三维模型等原始素材,更加有利于知识产权的保护。 5.更新更加容易 对于应用开发者来说,使用像素流送技术,应用的发布和更新也都更加容易。云端一旦更新,所有用户访问的都是 实时刷新的内容,再也不用费心费力地让用户自行下载更新版本了。 像素流送技术的应用 通过这项技术的应用,用户可以更好的通过 在线平台体验。比如汽车、模型之类的可以进行多维度的展示用户想看哪一面就操作展示哪一面,游戏用户可以直接试玩体验,医疗实训演练也可以进行细致的分解说明、细节展示,可以为客户更好的展示应用效果等等。 实际应用以及如何体验? 当前市场上能提供关于 像素流送技术服务的公司不多,如果想知道什么是像素流送,文字看完还是一知半解,可以到 3DCAT实时渲染云平台进行体验。 3DCAT是 深圳市瑞云科技有限公司提供的三维应用实时渲染云服务。利用 云端的海量GPU算力处理繁重的图像渲染计算并串流同步输出到终端设备,从而实现终端设备的轻量化,让高质量三维图形应用变得无处不在。用户可以使用任何联网的普通设备,访问托管在3DCAT云中的 三维应用程序,同时无需下载安装应用。3DCAT支持能在Windows平台运行的几乎所有 渲染引擎,支持NVIDIA RTX实时光线追踪功能的开启。 3DCAT实时渲染平台,让三维应用触手可及,欢迎体验 https://www.3dcat.live/demo.html。

2020-10-05

云计算小讲堂 | 像素流送解决了哪些问题?
5G的到来不仅仅是网络的提升,它还解锁了人与人之间新的交互方式,就比如逐渐渗透到人们生活的仿真类VR、AR相关应用。这些应用的内容,通过云端资源进行渲染计算,然后搭载着 内容流送(Content Streaming)/像素流送(Pixel Streaming)这项技术通过网络,推送到各种终端上。 像 3DCAT实时渲染云平台就是通过 像素流送这项技术实现的。3DCAT可以让任意设备随时随地访问您的3D应用,无论通过PC还是移动端,皆可以体验试玩游戏、展示炫酷的汽车、体验艺术展陈、建筑漫游还有参与医疗实训等等。 其实,很多厂商在开发有交互的三维仿真应用时,制作和推广都面临一个不小的挑战。以设备适配问题来说,厂商开发交互 3D仿真应用,需针对市面上各式各样的系统和终端设备,进行对内容质量的适配开发,这其实就是一个不小的难题。通常的做法是设定一个最低匹配标准来适配各种设备,这样的缺点也显而易见——对于高端设备来说,体验的质量远远没有达到,对设备性能造成了浪费。另外一种做法是发布尽可能多的版本去适配尽可能多的系统或设备,这样做的代价就是工作量剧增。由此可见像素流送对三维仿真应用有关键的作用。 比如想要给用户多维度的展示一些精美的模型,云参观收纳各种精美藏品的博物馆,虚拟医疗实训……想要获得令人满意的效果和交互体验,首要的技术就是既不需要下载安装又不需要降低体验质量也就是像素流送。 像素流送帮我们解决了那些难题? 交互—— 像素流送不同于普通的视频流,仿真和虚拟现实类的应用都需要有各种交互功能。常用终端的鼠标、键盘或者触屏操作,都需要转换为信号通过网络传输到云端去,而云端也需要即时的响应这些信号实时地渲染新的画面,通过流的方式把结果推送回终端。 时延——根据kissmetrics的研究,当浏览网页时延时超过3秒,就会流失40%的用户。对于实时类的体验更是如此, 像素流送的时延必须控制在毫秒级。一般小于120ms的时延对于用户来说才是无感知的。 画质——好的画质是分辨率、帧率和码率三者之间的平衡。分辨率是单位英寸中所包含的像素点数;帧率(FPS),即每秒钟要多少帧画面;码率是编码器每秒编出的数据大小,单位是kbps,比如800kbps表示编码器每秒产生800kb的数据。帧率与画面流畅度成正比:帧率越大,画面越流畅;帧率越小,画面越有跳动感。如果码率为变量,则帧率也会影响体积,帧率越高,每秒钟经过的画面越多,需要的码率也越高,体积也越大。帧率就是在1秒钟时间里传输的图片的帧数,也可以理解为图形处理器每秒钟能够刷新几次。 分辨率影响图像大小,与图像大小成正比:分辨率越高,图像越大;分辨率越低,图像越小。在码率一定的情况下,分辨率与清晰度成反比关系:分辨率越高,图像越不清晰,分辨率越低,图像越清晰。在分辨率一定的情况下,码率与清晰度成正比关系,码率越高,图像越清晰;码率越低,图像越不清晰。如果不做码率大小上的限制,那么分辨率越高,画质越细腻;帧率越高,视频也越流畅,但相应的码率也会很大,因为每秒钟需要用更多的数据来承载较高的清晰度和流畅度。 像素流送解决了三维仿真应用的关键难题,这些应用才得以出现在大家生活中的方方面面。想体验这项技术的应用的小伙伴,可以去刚刚提到的 3DCAT实时渲染云平台哟。 3DCAT是 深圳市瑞云科技有限公司提供的三维应用 实时渲染云服务。利用云端的海量GPU算力处理繁重的图像渲染计算并串流同步输出到终端设备,从而实现终端设备的轻量化,让高质量三维图形应用变得无处不在。用户可以使用任何联网的普通设备,访问托管在3DCAT云中的 三维应用程序,同时无需下载安装应用。3DCAT支持能在Windows平台运行的几乎所有渲染引擎,支持NVIDIA RTX实时光线追踪功能的开启。欢迎到我们的demo体验页面进行体验: https://www.3dcat.live/demo.html,3DCAT实时渲染平台,让三维应用触手可及,欢迎体验了解像素流送。

2020-09-30

《赛博朋克2077》由四种光线追踪效果技术打造
By:Arti Sergeev、Nvidia 近期Nvidia分享了在游戏《赛博朋克2077》中 实时光线追踪效果的使用细节。两家开发公司Nvidia和CD Projekt合作,联手为《赛博朋客2077》的视觉世界添加了四种不同的光线追踪效果。该游戏还将增强了Nvidia的DLSS 2.0,团队的深度学习技术,将较低的基本分辨率图像升级到较高的屏幕分辨率。 首先,《赛博朋克2077》将使用光线追踪漫反射全局照明(Ray-Traced Diffuse Illumination),该技术使不同的环境光源(如太阳,月亮和电子广告牌)真实地照亮周围的场景。 游戏还将呈现光线追踪的反射,你可能已经在游戏《控制》中看到了。这项技术可以让游戏在场景中的任何地方显示对象的反射。玩家可以透过窗户看到身后发生的事情。此外,与传统的阴影贴图相比,《赛博朋克2077》支持光线跟踪的阴影和光线跟踪的环境光映射,从而使场景中的阴影更加真实。 基于 RTX-Powered 光线追踪 去年,Nvidia宣布在《赛博朋克2077》中加入了光线追踪,并分享了一些技术支持的游戏画面。现在,游戏中将有四个光线追踪效果,进一步提高图像质量、逼真度和沉浸感。 光线追踪漫反射全局照明 Ray-Traced Diffuse Illumination 捕捉天空亮度以及各种表面的发射光,传统的 实时渲染技术相比这很难实现。如果启用,广告牌和其他照明表面和物体将照亮他们的周围自然灯光,太阳和月亮将照亮夜晚的城市。 光线追踪反射 Ray-Traced Reflections 在《赛博朋克2077》,光线追踪反射被用于所有表面,追踪范围达数公里,使现实的反射跨越更广阔的视野。它们同时出现在不透明的物体和表面上,通过跟踪场景中的单个反射光线来模拟光从光滑表面和金属表面反射的方式。 与只反射屏幕上的东西的屏幕空间技术不同,光线追踪反射融合了人物周围的整个场景,可以准确地展示视图之外或背对相机的物体。此外,光线追踪反射提高了保真度,并且不会受到其他损害图像质量和使用屏幕空间技术时的影响。 光线追踪环境光遮蔽 Ray-Traced Ambient Occlusion 环境光遮蔽是一种阴影和渲染技术,用于计算场景中每个点对环境光下的曝光程度,从而 实时渲染出新的AO阴影,该阴影可以使地面物体和自然变暗的表面,物体和其他游戏元素。在《赛博朋客2077》中,光线追踪的环境光遮挡可以与局部光一起使用,填补缺少阴影的局部阴影效果,可以改善环境光遮挡效果的质量。 光线追踪阴影 Ray-Traced Shadows 光线跟踪阴影使开发人员能够将像素完美的阴影带到游戏中,而不受限制。 在《赛博朋克2077》中,根据光的强度,光纤在云层中的散射以及其他因素,和太阳和月光的阴影将都会被添加到游戏中。 这些效果都是由DirectX 12 Ultimate’s DXR Raytracing API提供的,并针对GeForce RTX graphics GPUs专用光线追踪核心进行了优化。

2020-07-15

【实时渲染】——3D可视化的未来
3D渲染和 3d可视化艺术家一直在寻找技术上的下一个飞跃,以将他们的工作提升到一个新的水平。通常,这些跳跃是增量的,以对计算能力的适度升级为代表,这可能会使它们的机器工作更快一些,并且其纹理弹出效果更好一些。 但是,我们不仅在作为3D渲染艺术家的工作方式,而且在信息的传达,消费和消化方式方面都处于革命之中。 我说的当然是 实时渲染。这个概念并不是什么新鲜事物,因为自从……好吧……视频游戏就成为了视频游戏的开始。但是,技术终于走到了足够远的距离,可以将沉浸式体验的力量带入商业渲染应用程序的手中,并且各地的企业都在注意这一点。 我们将研究什么是实时渲染,以及为什么在渲染和设计交流方面它有可能比平常带来更大的飞跃。 什么是实时渲染? 它的计算能力是将计算机生成的图像显示为流畅的动画,而不会引起人眼察觉的明显延迟。回想一下电子游戏。您移动和平移相机,图像即刻移动和平移。您可能不会考虑这一点,但是拥有无数的数字工程,编码和处理能力,所有这些都可以在无缝的虚拟体验中正常工作。 现在,想象一下给建筑公司,数字营销商,甚至是普通的自由渲染艺术家那样的力量和灵活性。它对工作流程,设计流程以及展示罐头虚拟巡回演出的能力产生影响,而这些巡回演出尚未得到实际构思。 随着处理能力的提高,视频游戏看起来更好是有原因的。游戏制作者受到任何给定处理设置可以产生多少个像素,多边形以及幕后系统和物理模型的限制。这是因为必须根据玩家的动作和情况实时渲染所有内容。 渲染引擎直到最近才具备将实时渲染带入艺术家之手的必要处理能力。 在渲染中工作 通常,渲染器在完成的渲染场景的非常基本的版本(有时是线框版本)中工作。这会给处理过程带来很多猜测,并可能使您等待计算机呈现您一天中的正常情况。 如果利用 实时渲染云,则可以在一个项目上进行平移,应用照明和材质的工作,而渲染的场景则处于完美,纯净的视图中,供您操纵。不用等了。没有更多令人沮丧的结果。由于您的机器运行太热并且您失去了所有工作,因此无需再按时完成任务。 实时渲染使艺术家可以自由地在渲染中进行工作,因此,当他们最终开始导出图像和动画时,他们已经知道照明将如何反应,材料将如何交互以及视角和体验将如何变化。 沟通是关键 对于建筑和设计公司而言,可视化工作的主要目的是传达其设计背后的基本力量。这并不总是那么容易,因为您经常会花很多时间向可能有很多钱但很少或没有设计经验的人提供这些信息。仅仅说“信任我”是远远不够的,可能会使您比说“Corbusier”更快地完成工作。 因此,效果图,图表和平面图是必须的。但是,还有什么可以使人对项目更加清晰?允许他们在计划的建筑物内自由移动的交互式虚拟体验怎么样? 实时渲染使建筑公司不仅能够设计建筑物,而且能够展示其工作中最好,最重要的方面的设计经验。客户对这一切的介绍将不胜枚举,并且可以惊叹于您作为设计师的工作,而不必信守诺言或猜测一切将如何发展。 当然,执行体系结构设计是该过程中最困难的方面,但是获得客户的信任会大大帮助您完成工作,从而完成反映出最初想法的工作。 未来是光明的 我们已经看到了少数渲染程序在其基本界面中实现了实时渲染。诸如Keyshot之类的程序正因其对计算机技术的使用而风起云涌,我们当然可以期望不久的将来还会有其他人效仿。 实时渲染应用程序的可能性是巨大的,这使渲染行业的每个人都为之兴奋。随着计算机变得越来越快,这项技术也将变得更好,从而使工作流程更加简化,令人印象深刻的可视化效果以及设计师与客户之间不断的信任关系。 更多实时渲染资讯,请登录3DCAT实时渲染云平台:www.3dcat.live

2020-07-01

【实时渲染】Faceware Studio推出面部实时动画渲染功能
By:MIKE SEYMOUR 无标记3D面部动作捕捉解决方案开发商Faceware Technologies发布了Faceware Studio,这是一个用于创建高质量面部动画Live的新 实时渲染平台。 Faceware Studio完全替代了以前的Faceware Live Server产品。新的Studio 实时流体渲染通过利用新的机器学习方法和最新的神经网络技术,可以实时快速校准,跟踪和动态显示任何人的脸部。数据可以 像素流送到 虚幻引擎(UE4),Unity,MotionBuilder和Autodesk Maya插件。还为艺术家提供了根据演员的独特表现来调整和定制动画的工具,并通过Motion Effects建立了附加的逻辑。 该产品当前与基于Faceware的Analyzer和ReTargeter构建的非实时Faceware管线一起使用。它直接用于实时应用程序,但是在将来,该技术将得到扩展,并与非实时的传统Faceware Pipeline工具结合在一起。Studio制作人假设使用一台摄像机,并且可以使用网络摄像机或头戴式摄像机装置(HMC)进行工作。与标准的离线制作相比,实时面部表情解决是一个重要且与众不同的问题,非常适合使用机器学习(ML)。 Faceware可以在网络摄像头或头戴式摄像头上使用 新的Faceware创新的核心是ML,它可以通过更有效地解决演员下颌位置的问题来显着改善口型同步。通过使用深度学习卷积神经网络(CNN),Faceware改进的颚定位技术为用户提供了更快,更准确的口形同步到实时数字字符。 产生精确的嘴唇同步的问题直接与下颌有关,在大多数情况下,牙齿的咬合使问题更加复杂。即使显示牙齿,通常也可以看到固定的上齿而不是下颚齿。使事情复杂化的是,下唇和嘴皮肤会随着自身的肌肉运动而滑动和压缩,因此无法提供可靠的跟踪信息。如果受试者留胡子,情况只会变得更糟。ML用于提供下颌位置的合理输出,即使没有明显的跟踪点也看不到下颌牙齿。机器学习解决方案基于有监督的深度学习,这需要对镜头进行大量的手动注释来训练CNN。 Faceware使用的机器学习框架是Tensorflow和PyTorch。根据Faceware团队提供的精选训练数据,并使用这些最新的ML库,系统会生成0到1之间的下巴估计值。这然后通知面部求解器更可靠地模拟和重新创建正确的嘴唇形状并进行同步。人的下巴具有六个自由度,可以在所谓的波塞特信封或盾形运动范围内运动。但是Faceware的目标不是输出颚的详细几何形状。它的工作原理是极大地改善了唇部同步,例如,仅知道牙齿是否分开以及嘴唇自身闭合多少时,就可以大大增加面部的真实感。 Studio的界面,右侧有调整变量 通过运动效果和动画调整来缓和新改进的嘴唇估计。这样Studio用户就可以对其最终动画添加其他直接控制。新的Studio软件允许艺术家通过动画调整来可视化和调整特定于演员的配置文件,并在将其上游流进UE4进行实时3d可视化的实时数据中建立强大的逻辑。 为了使系统正常工作,需要精心设计培训数据。训练数据定义了解决方案空间,因此,如果训练数据的人口统计信息涵盖了用户或演员自己的年龄,种族,性别和面部表情,则它将始终更加准确地预测下颌。Faceware非常渴望为所有用户提供解决方案,因此需要注释并包含各种各样的面孔。 这意味着来自各行各业和不同国家的人们。ML解决方案非常适合实时应用,因为Supervised Training ML方法训练缓慢且运行时很快。该系统仅使用由Faceware曼彻斯特办公室的研究团队明确收集的培训数据。在此ML流程中,系统绝不使用用户性能或从捕获会话发送任何数据。 左边是Faceware Studio,右边是输出到UE4的输出 除了下颚之外,该软件还具有增强的面部跟踪技术,该技术改进了基础跟踪技术,从而提高了常规跟踪和动画的质量和流畅性。 实时动画视口和媒体时间线 用户可以使用Studio的功能齐全的3D动画视口从任何角度观看面部动画,并使用时间线和媒体控件在其媒体上暂停,播放和擦洗,以找到理想的标定帧并专注于视频的特定部分。 可停靠的,可自定义的界面具有停靠面板和可保存工作区的现代且可自定义的用户界面,可实现完全个性化的设置。 运动效果 一个内部工具集,以简单和可扩展的方式自定义和优化动画结果。消除了对复杂的引擎内脚本的需求。 改进的CPU / GPU性能 Faceware Studio经过优化,可以在不使用前代资源的情况下使用更少的资源来创造更好,更快的结果。借助可选的“实时优化”功能,用户可以在更广泛的硬件上享受更高的帧速率跟踪。 了解更多实时渲染资讯,请登录3DCAT实时渲染云平台:www.3dcat.live

2020-05-20

【3D艺术家】建筑,游戏和其他领域的差异-part3
3D打印 3D打印是目前 3D艺术家可以展示其所有设计技能的最大领域之一。无论他们想像什么,他们都可以使用计算机图形学进行设计,并以3D形式进行打印。 它具有大量的应用程序,因为您可以真正地3D打印几乎任何所需的东西,从玩具,电话,办公桌纸盘和太阳镜,到乐器,园林工具,照相机和假肢。 3D打印机从3D艺术家创建的数字文件中打印各种3D物理对象。艺术家使用 3D建模和 云渲染来创建设计,然后将数字文件简单地上传到3D打印机。这是一个非常有趣的过程,可让3D艺术家快速将其可视化效果变为现实。 VR和AR 虚拟现实和增强现实( AR/VR渲染)正在彻底改变世界,为各行各业的大量机遇打开了大门。您现在可以在VR中玩游戏,虚拟浏览房地产或使用VR和AR尝试其他产品。 但是3D艺术家在哪里适合呢?他们可以将3D建模与VR和AR相结合,从而在创建设计时获得全新的视角,无论是在建筑,游戏还是任何其他领域。他们可以真正沉浸于自己的创作过程中,并开发出出色的设计和最终产品。 无论有人想在VR或AR中创建什么内容,3D艺术家都可以帮助他们做到这一点。他们可以进行必要的3D设计,并使用 VR建模完成项目。这甚至可以帮助他们成为VR艺术家。 市场营销和广告 3D艺术家还可以与市场营销和广告代理商合作,以帮助他们推广和销售产品。他们可以制作引人注目的广告设计来推销产品和品牌,并帮助吸引更大的受众。 他们可以为海报,广告牌和各种其他营销材料创建逼真的3D图像,但他们也可以为广告制作 3D动画和视频。 例如,与市场营销和广告代理商合作的3D艺术家不需要游戏所需的很高的特殊技能,但他们确实需要了解如何创造出色的印象并强迫消费者购买各种产品。 无论您是经验丰富的3D美术师还是初学者,您都绝对应该尝试一下这些利基市场。每个人都需要花费时间和精力来获得特定的技能,但这是值得的。如果这些利基中的任何一个激发了您的兴趣,那就去做吧,因为每个利基都可以帮助您建立一个非常成功的3D画家职业。 如今,成为3D艺术家会带来很多有利可图的工作机会。如果您只是刚入门,请务必使用优质的 3D建模软件解决方案,无论您决定从事哪个领域,它都能帮助您提高技能并创建出色的设计。

2020-05-13

3D艺术家-建筑,游戏和其他领域的差异-part2
产品可视化 产品可视化,也称为产品渲染,是现实地描绘各种产品的过程。它涉及使用3D建模和3D渲染来创建逼真的图像或模型,这些图像或模型将展示最终产品在进入生产阶段之前的外观。 因此,3D艺术家可以帮助制造商设计产品以获得最佳效果。他们可以帮助他们 3D可视化不同的制造选项,以便他们可以更改产品的外观。他们还可以即时进行适当的更改,以使他们的产品更有效。 这里有很多选择:车辆,服装,家具,技术产品等等。无论制造商如何考虑,3D艺术家都可以使用3D建模软件将其可视化。 他们的产品可视化可以包括3D产品建模,产品插图,产品动画,产品仿真和设计分析,所有这些目的都是为了使各种概念栩栩如生并评估其性能。 医学动画 医学动画是一个非常有趣的领域,对3D艺术家的需求很高。认为各种外科和生理主题有趣的3D艺术家可以在医疗动画行业中蓬勃发展。 他们可以为教育目的创建不同的3D 实时渲染云,动画和视频,供医学生,医学专业人士甚至患者使用。 为此,他们需要对特定的场景建模和纹理化,然后才能渲染它们以创建3D动画和视频。例如,他们可以创建3D动画,以复杂的3D细节展示心脏及其心室的状态。 他们可以创建每个医疗过程的3D医学动画,从而可以帮助一系列的观众更好地理解这些过程。在医学上,最小的细节可能意味着生与死之间的差异,因此这些动画非常有帮助。 3D艺术家还可以为各种医疗产品,服务和设备创建医疗动画,以视觉方式传达其工作方式并帮助销售。 法医动画 法医动画是另一个引人入胜的领域,为3D艺术家提供了很多机会。这是一个法证科学分支,其中3D艺术家可以使用动画以视觉和听觉方式重新创建各种事故或事件,以帮助调查人员解决犯罪或向其他利益相关者解释复杂的问题。 他们可以使用计算机图形来重现道路交通事故,人身攻击以及各种其他事件和事件,可以帮助警察和法医专家解决案件。他们还可以使用计算机图形产生3D取证动画,这些动画可以解释各种机械设备的工作方式,这对调查人员也非常有用。 用于重现多种场景和犯罪现场的法医动画在教育中也可能非常有益。他们可以帮助法医学生提高其知识和技能,使他们在未来的犯罪解决中变得更有经验。

2020-05-12

3D艺术家-建筑,游戏和其他领域的差异-part1
如今,随着我们进入3D渲染和动画决定不同产品销售的世界,大量的需求为3D艺术家们创造了越来越多的工作机会。 随着技术变得越来越先进和复杂,消费者正在寻找更切合实际的产品表示形式,以帮助他们根据自己的需求做出正确的选择。 这正是3D艺术家进入的地方。凭借他们在创建3D动画和图形以及使用计算机程序创建多媒体设计方面的技能,他们不仅可以现实地展示各种产品,而且还可以开发 实时渲染的 沉浸式产品,例如云游戏。 不同的行业需要3D美术师不同的技能,他们都需要具有出色的3D建模和3D渲染技能,但是每个人都需要针对特定的细节开发稍微不同的艺术技能。 以下是3D艺术家可以蓬勃发展的一些最受欢迎的细分市场,以及它们之间的主要区别。 建筑可视化 建筑 3d可视化是创建逼真的2D和3D图像和动画的过程,这些图像展示了拟议的建筑设计的所有特征。 3D艺术家在建筑中的工作是帮助客户准确地可视化特定建筑物或任何其他财产在其建造和设计过程完成后的外观。 他们为拟议的建筑设计创建了逼真的3D渲染,展示了物业的每个小细节,从整个外观和比例到纹理,室内装饰,甚至是通风和照明。 所有这些对于帮助客户就其属性的外部和内部设计做出正确的决定都非常重要,但这远不止于此。它可以帮助他们在施工前识别并修复任何潜在问题,例如将电源插座放置在何处,以及有关最佳功能和安全性的许多其他细节。 毋庸置疑,从事建筑工作的3D艺术家必须具有一定的建筑知识。良好的室内设计技能绝对是加分项,因为它们可以帮助3D艺术家创建引人注目的可视化效果。但是,与他们正在设计的空间的数量和质量特征相关的建筑知识是绝对必要的,因为它可以帮助他们进行诱人的设计,从而真正代表自己。 游戏 如今,游戏行业是3D艺术家另一个非常受欢迎的选择。游戏美术是游戏的主要卖点,因为它可以创造第一印象,并迫使人们玩特定的游戏。游戏性显然很重要,但视觉效果确实是主要卖点。如果游戏在美学上看起来不太令人满意,那么大多数游戏玩家都只会走开。 那就是游戏美术师的加入。其中有很多人,每个人都有不同的专业领域,但是3D游戏美术师是当今最抢手的。 他们使用3D建模软件来创建各种字符,纹理,背景,对象,颜色,照明和环境-全部以3D形式进行。他们可以创建具有真实面部表情动画,奇幻生物和真实风景的逼真的人类和动物角色,以及使游戏逼真的沉浸感的特殊效果。 他们需要具有出色的设计技能来创建引人入胜的逼真的游戏环境,以及出色的编程技能来创建功能性3D游戏。

2020-05-11