【实时渲染】艺术家如何通过Unity和实时渲染进行艺术创作

By:Frank Manley

您是否体验过视觉音乐或惊艳的虚拟现实表演？在这篇文章中，我们与一位创新的丹麦创作者进行了幕后讨论，他通过在剧院和展览空间中投影Unity带来的体验来挑战观众的感知。

交互设计师兼媒体艺术家卡尔·埃米尔·卡尔森（Carl Emil Carlsen）“我对制作融合虚拟和物理现象的交互式视听幻觉感兴趣。我喜欢使虚拟现实形象离开屏幕，随着实时渲染技术的发展，塑造这种混合空间令人兴奋，艺术家探索的途径很多。” 

工具和协作的重要性

卡尔·埃米尔（Carl Emil）的方法的很大一部分是他如何使用技术来实现他的艺术目标。“工具塑造了我们的思维，所以我想对它们产生一些影响。Unity使我能够做到这一点，因为它是高度可定制的，并且我可以轻松地尝试许多不同的格式，媒体和内容类型。” 

融合现实与幻想

在哥本哈根的Unite演讲中，卡尔·埃米尔（Carl Emil）指出了他对混合物理和虚拟空间的兴趣如何使他探索了4D盒子，这是一个位于 丹麦赫尔辛格文化园区的现场舞台。“令我感到兴奋的是，有可能为广大观众带来类似全息图的幻觉。” 

4D Box通过被动立体3D系统扩展了该技术，这意味着观众（戴3D眼镜）可以体验虚拟道具和场景。为了测试项目的视角和内容缩放，Carl Emil在下面制作了Pepper's Ghost模型（可在GitHub上使用）。 

 “为创建最佳的3D透视图，我使用 Asset Store中的OffAxisCamera用偏轴投影重写了Unity的照相机投影矩阵。我还通过ArtNet DMX实施扩展了Unity，以控制舞台灯光并使虚拟灯光与物理灯光匹配。” 

为了虚拟表演者的身体，卡尔·埃米尔（Carl Emil）使用了Microsoft Kinect传感器，该传感器跟踪身体的运动，为了同步所有内容，他在Playhead中处理动画，Playhead是他在Unity中构建的自定义工具。

使用Silicium生成视觉音乐

卡尔·埃米尔（Carl Emil）通过Playhead处理Primordial中的大多数动画，而一些参数则通过他也使用Unity制作的多点触摸GUI Durga进行实时交互。 为了协调作为实验工作核心的基因艺术，卡尔·埃米尔（Carl Emil）在Unity中开发了专门的图形框架。图形用户界面内置于UIElements中，是Unity用户可以根据自己的需求构建的专用图形工具的示例。 

用虚拟展示细菌

在商业方面，卡尔·埃米尔（Carl Emil）还练习他的实验印章。在瑞典公司Perstorp的推广下，他在一个互动博览会上领导该设计，以提高人们对耐药菌的认识。

“为此，我有一台运行Unity的机器来渲染六个高清投影，其中五个覆盖了典型的VR洞穴设置。我使用高清渲染管道（HDRP）进行了3d实时渲染，并使用 Asset Store中的AVPro Video将非交互部分作为HAP编解码器视频进行回放。” 

他建立了瑞典的森林环境，主要是基于 Unity演示团队免费的《死者之书》资产，并作为SidselSørensen和Maya SB插图的背景。

他将第六台投影机对准观众，感到特别惊喜。在体验的高峰期，虚拟细菌离开了屏幕在大家旁边三维显示。

文章翻译整理：3Dcat实时渲染云平台