像素流

如果您是试图开发产品的游戏开发人员，或是试图分发3D培训模块的讲师，那么您可能听说过Unreal的像素流送（Pixel Streaming）。 当您和您的团队拥有配备强大GPU的设备时，许多同事和潜在用户可能没有。他们正在使用具有基本功能的移动设备，平板电脑或笔记本电脑。 认识到这一差距，开发了 像素流送技术，这是一种远程运行3D应用程序并将渲染的图像流传输到最终用户设备的方法。创建者可以轻松地为朋友，家人和同事创建演示。 如果您现在将网络扩展到测试用户和朋友之外，那么您将需要企业级版本的Unreal Engine便捷的像素流送（Pixel Streaming）工具来部署和分发交互式3D内容。 什么是3DCAT的像素流送平台？ 3DCAT的平台使用专有的像素流送协议，该协议专用于企业范围的交互式3D内容在全球范围内的全球分发。我们的平台集成了多个游戏引擎，包括虚幻引擎。我们在 实时3D像素流媒体行业中经过测试和完善，特别是通过我们在医疗行业的经验对这种像素流媒体协议进行了测试和完善，在医疗行业中，高保真内容对于准确诊断至关重要。 我们的像素流送协议只是一个更大且可扩展的云平台的一部分，可用于大规模交付实时游戏引擎内容，同时确保高性能和一致的用户体验。3DCAT的解决方案是专为在企业级部署实时3D应用程序而设计的，该应用程序用于高流量业务，包括电子商务和3D产品配置器，房地产和3D虚拟展示房以及员工培训模拟器。 为什么我需要3DCAT的完全托管实时3D像素流送解决方案？ 将云服务转换为全球可用的交互式3D体验需要花费很多。尽管如此，一直存在一个神话，那就是完成此任务仅是启动云中的几台服务器。 实际上，从一侧的原始计算能力到另一侧的所需最终产品，需要一整套服务。协调和管理从云公司到您可能集成的其他软件应用程序的各种供应商，完全可以自己完成。 另外，3DCAT提供了一种完全托管的服务，该服务通过其完全弹性的基于微服务的云平台链接应用程序。与云提供商的关系以及所有耗时的配置和实施均由 3DCAT像素流送平台完全管理。 在我们的平台上进行设置后，您公司的3D应用程序将直接输入到3DCAT的自动构建管道中。我们将3DCAT SDK集成到3D模型中，创建了该模型的实时像素流送版本，可直接上传到云平台。 此外，我们的技术还可以为模型创建部署配置，并对部署和容量做出重要决定。换句话说，我们确定哪个全球AWS区域应托管您的模型，并找出适当的弹性扩展策略。 说完这些后，您会收到一个URL，可以轻松访问流模型，因此您可以轻松地将3D应用程序嵌入到任何网页上。 最重要的是：您为我们提供了3D模型，我们为您提供了一个链接，使您可以像共享YouTube视频或文章一样轻松地共享高保真，交互式3D应用程序。 怎么知道是否准备好使用3DCAT的像素流送平台？ 取决于您的项目！ 如果您属于以下任何类别，我们建议您使用3DCAT的像素流送平台： - 企业营销发布一个身临其境的3D体验作为产品发布的一部分 - 企业培训总监试图向世界各地的员工分发交互式培训模拟器模块 - AEC商业领袖正在寻找企业范围的协作工具，以实现高保真3D模型，加快商业开发和/或进行公众咨询 - 房屋建筑商和3D建筑设计师利用逼真的3D房屋效果图来提高预制房屋和公寓的房地产销售额 - 任何寻求游戏引擎中立像素流的人 - 任何寻求可扩展服务以共享高保真交互式3D项目的人 - 向少数观众提供游戏项目或其他3D应用程序的演示 - 在偶尔需要远程访问3D应用程序的团队中工作 - 您具有内部能力，可以通过云计算基础架构扩展像素流，以及维护，监视和增强它 为什么我应该在企业项目中使用3DCAT的像素流送平台？ 3DCAT像素流送平台可帮助您专注于内容创建和分发。我们专有的流协议是我们云发布平台的基础。最后，内容创建者可以通过完全托管的交互式3D流服务将其项目部署并分发给全球受众。 了解更多像素流送相关资讯，请访问3DCAT实时像素流送平台：www.3dcat.live --- 相关阅读推荐： 云计算小讲堂 | 像素流送解决了哪些问题？ 【像素流送】像素流送的邪恶经济学（上） 【像素流送】内容将成为流媒体技术的致命弱点吗？（上）

任何地方都有游戏吗？ 在研究像像素流送提供商提出的颠覆性技术时，还需要一个同样重要的问题：像Google Stadia这样的服务将能够支持哪些游戏？会不会有任何一款游戏真的能很好地运行呢？ Google似乎确实专注于AAA发布商，这意味着我们至少应该期望一些最大的游戏重磅炸弹将成为该服务的一部分。尽管尚未宣布太多，但Stadia应该“在技术上”能够运行任何类型的游戏。但是，任何一种游戏在其中都能真正发挥出色吗？ 我不会那么确定... 选择刺客信条游戏作为Beta版并非偶然。这是一款单人第三人称视角游戏，每步动作都包含很长的动画，因此可以特别容忍任何延迟效果。 所有这些动作只需要按几下按钮 从积极的一面来看，Google提醒我们以下事实：通过组合多个GPU可以在其上运行更强大的游戏，这是一个有趣的主张，而且只有极少数公司承诺提供该功能（让我们暂时忘记现在的做法）这些GPU的成本要高得多）。 能够根据需要分配其他GPU是一个非常强大的主张，并且可能意味着Stadia可以提供传统游戏设备根本无法提供的独家内容。 多人游戏怎么样？ 尽管Google表示将为其开发人员提供多人游戏功能和工具（这对于减少作为中介的延迟效果至关重要），但实际上将支持哪种多人游戏体验仍有待观察。 我不会为战斗和赛车游戏而屏住呼吸，这是迄今为止最不耐延迟的游戏。第一人称射击游戏也是一个艰巨的赌注，事实仍然是Stadia上的玩家与本地平台的同龄人玩总是处于劣势（假设Stadia确实允许他们声称的跨平台游戏）。但是话又说回来，如果将匹配项托管在Google服务器上，Google也许可以将其降至最低。 街头霸王V连击是快速行动的绝佳范例！ 否则，就同步竞争性多人游戏（如上文所述）而言，我期望不高。对于基于回合制游戏，实时策略游戏甚至是英雄联盟之类的一些MOBA的异步多人游戏，玩家可能不会因为增加的延迟而遭受太多痛苦。 其他限制也可能会降低Google的内容吸引力。例如，离线游戏仍然不是许多游戏玩家的重要因素。其他更利基的需求，例如修改游戏，托管您自己的服务器或管理游戏版本（例如，对于速跑者）的能力，可能很快将无法实现。 那么Stadia和其他流媒体服务会再次失败吗？还是这次不同？ 很难确定Stadia何时尚未启动，但是说实话，我暂时不会屏住呼吸。 在仔细考虑整个Stadia的公告后，我注意到的一件事是：看起来Google确实真的想成为游戏中的“所有人”（他们实际上在公告中说了这一点）。 大片头衔？检查一下4k/8k，60fps游戏？检查一下 视频流媒体的另一个工具？检查一下 多人游戏？检查一下 分析？检查一下 用于大型游戏的多GPU？检查一下 在大屏幕和移动屏幕上都可以播放吗？检查一下 尽管我确实坚信云将成为游戏的未来，但我认为我们还没有为这一飞跃做好准备。从一切到目前为止，我已经看到了，我留在中间步骤，甚至更乐观不同种类的diruptive技术来解决许多当前游戏的问题。 将解决方案更侧重于用户体验而不是浮华技术的解决方案，可能会更轻松地吸引游戏玩家从仍然盛行的传统体验中吸引用户。借助Sony，Microsoft和Nintendo等经验丰富的老牌公司，它们都拥有完善的社区，高度重视的第一方和第三方内容以及十多年的游戏硬件经验，并积极投资于新技术和服务，因此Google可能会赢得“有很大的回旋余地来修复其最终的错误。 业界对该技术的可能性感到公开兴奋，但我所说的大多数内容都是谨慎保持怀疑态度。尽管许多人不愿意公开质疑Stadia的承诺（毕竟我们在这里谈论的是Google），但有些人声称“ Google只是在为这个问题扔钱”。 其他人则认为，谷歌根本不关心游戏的收入来源，而只是利润丰厚的广告业务的另一个数据源，这可能意味着完全不同的经济状况。谁知道？ 事实仍然是，如果Google想要成功，它需要了解这是一段漫长的旅程，与许多Google项目相比，这需要更多的奉献精神和关注。游戏是关于丰富的内容和一致的体验，我不确定Google是否准备好提供这些内容。 尽管他们的团队说这次不同了，但我想我们只需要拭目以待…… 了解更多像素流送资讯，可登陆3DCAT的像素流送 https://www.3dcat.live/news/xiang-su-liu-song

在研究了像谷歌Stadia这样的 像素流送解决方案所面临的前两个主要挑战之后，我们现在终于转向像素流送内容方面。 对于任何新游戏平台而言，最重要的方面之一可能就是将要提供的游戏。如果您寻找过去大多数新游戏平台失败的原因，您将意识到几乎所有（如果不是全部）游戏要么发行时就没有很好的游戏阵容，要么新游戏发布太晚，不够新鲜或有趣。 谷歌曾提到它正在与多家游戏工作室合作，甚至表示已经开始开发自己的第一款游戏。但是鉴于高端游戏开发至少需要2年的时间，因此我不会指望Google自己的游戏会很快出现。 即使Google能够在发布之初就吸引或创建高质量的内容（看起来似乎正在招募其全球大部分分支机构来寻找高质量内容），如果它试图说服出版商接受，它仍将面临艰苦的战斗。从传统的商业模式（即溢价/按使用付费）转变为意味着获得订阅或广告份额的一切。 沿这条道路走的大多数服务最终都降级到了较旧的地步，这使它们对大多数游戏玩家而言都是无关紧要的。即使是索尼的PlayStationNow服务，现在拥有“超过70万名订户”，仍然仅占PS4装机量的0.7％左右就没什么了（另一个有趣的花絮是，大多数用户更喜欢游戏的下载版本而不是流媒体）。 尽管一些业内人士已经暗示Google像素流送服务可能会尝试不同的商业模式，但我不希望有太大的颠覆性变化。Google更有可能为用户提供一些免费的内容（可能有广告支持），同时保留该行业已经习惯的AAA标题的传统收益共享业务模型。也可以选择订阅（与YouTube Premium不同）。 在收益分享方面，我不希望Google破坏其Google Play的30％的削减（像Epic一样），但我确实希望它付出一些辛苦的努力来为其提供一些高质量甚至独家内容发射。记住，排他性也是要花钱的，每个独家推出的数百万美元，要求范围内的进步。自去年以来，微软一直热衷于购买游戏工作室，这可能是其中很大一部分原因。最终，拥有自己的第一款像素流送游戏变得更加容易/便宜。 还有一个需要考虑的方面是，虽然Stadia本质上是云中的PC，这意味着价格可能比游戏机更低的游戏，但实际上它是运行Linux的PC，这对开发人员构成了另一项挑战：将他们的游戏完全移植到Google平台。尽管需求不是一个极具挑战性的需求（因为大多数游戏引擎都允许移植到其他操作系统），但它确实为开发人员增加了时间和资源，甚至为发行商所压榨的大型工作室提供了新的重磅炸弹，从而将其推向多个平台安排得很紧。 阅读更多 像素流送资讯，请访问3DCAT实时渲染平台：3dcat.live

如果甚至Google都已经掌握了利用其云基础架构来管理 像素流送成本的方法，那么最后重要的是每位服务用像素流送户的成本/分钟。仅为了维护 像素流送服务，每位用户每小时就需要0.51美元（或每月10美元）（请看一下布鲁斯·格罗夫（Bruce Grove's），前Onlive合作伙伴，这里的主题演讲），它现在并不便宜了吗？ 我们不应该对这些数字感到惊讶，毕竟从服务器流式实时传输游戏的全部前提是放弃用户端对硬件的需求…… 不幸的是，我们所谈论的硬件仍然非常昂贵，需要始终靠近最终用户（连接到其他区域可能会导致高延迟），并且需要每隔几年进行更新 像素流送技术以应对不断增长的图形需求的新游戏。 从好的方面来看， Pixel Streaming解决方案还暗示其硬件现在可以在不同用户之间共享。这意味着，这些数以百万计的GPU和经营费用的可能，现在有更多的用户（在同一服务器中共享），这是假设并非所有用户一起玩或在同一时间，这未尝不是通常玩家的情况。 在高峰时段，超过1500万用户同时在Steam上玩游戏。 另一个可能性是，如果Google成功地实现了CiiNow的某些专利，即一项允许多个游戏实例共享同一硬件的专利。虽然这将意味着每位用户的成本大幅降低，并使 Pixel Streaming经济性更加易于管理，但对于Google宣传的以4K运行的高端游戏是否现实，现在还不是很清楚。 像素流送的成本谁承担？ 我现在将假设像素流送服务以订阅方式收取，例如每月15美元（为了比较起见，PlayStation Now在美国的每月费用为19.99美元），这的确意味着可能会在不到两年的时间内收回这些年的投资。 好吧，不要陷入硬核游戏订阅的丑陋经济学中，现在假设用户将愿意为Stadia每月支付订阅费用。 另一个每月服务… 这可能意味着用户每月将花费约15美元订阅+可选的Stadia控制器，其零售价可能在40到60美元之间（类似于Xbox One或Playstation控制器的价格）。游戏成本可能会高于此（稍后会详细介绍）。 第一年的总价为220美元，仅略低于上一个黑色星期五在Xbox One S上的花费，比Xbox One X便宜80美元（还不包括Xbox Live Gold每年60美元的订阅费用）。 如果您考虑游戏机的使用寿命大约为5年，则意味着用户在Stadia上的花费将超过940美元，而最新一代游戏机的花费为400美元（如果您每年增加60美元的XboxLive / PS +订阅费用，则为700美元）。如今，即使是一台好的pc游戏也可以以比这便宜的价格购买。 像素流送终身拥有成本 终身拥有成本 假设Stadia的用户将选择在这里购买至少一个Google的Stadia控制器，但目前没有Chromecast或其他可选设备。 PS：我知道PC游戏玩家会因为不考虑廉价PC游戏的节省而抨击我，但现在就忍受我。 您会注意到，Stadia对于非游戏玩家或想避免游戏前期成本的人来说确实是一个很好的选择。即使在最初的几年之后，成本实际上也非常相似，但这可能会使Stadia的便捷的设备变得很抢手。 但是，随着我们进入第三年甚至更久，Stadia对于用户来说开始变得更加昂贵，尤其是如果您考虑到始终需要外部硬件来运行它，即使您在电视或旧笔记本电脑上运行它也是如此。 好处显而易见。无处不在的实时游戏不依赖于本地硬件，不需要维护，升级或配置，并且可以在几乎任何位置和任何设备上播放媒体库。当然，这就是假设您所在的位置具有良好且稳定的连接。 最后，所有这些都归结为，什么样的玩家将在像素流送中看到价值？如果您查看主要类型的玩家，目前还不清楚。 那里只是一些游戏玩家…… 为了简单起见，让我们考虑一下周围的两个主要游戏阵营：高端游戏者（又名铁杆游戏者）和休闲游戏者。 首先考虑高端游戏玩家（那些已经拥有游戏PC或最新一代游戏机之一的玩家）似乎不太可能切换。这些玩家已经为可以轻松持续5年或更长时间的硬件沉没了成本（我拥有一台3岁的PC，仍然可以在最大设置下运行大多数游戏）。 同样重要的是要记住，对于这种游戏玩家来说，图像质量损失的风险和可能会破坏游戏体验但像素流送潜在延迟问题可能是不可接受的。对于他们来说，Stadia最多是一个可选的附加组件，它使他们可以在漫游时进行播放，前提是无论您身在何处都可以连接它。 缺少时间和/或硬件来玩的休闲玩家又如何呢？ 对于他们来说，像Stadia这样的更简单的服务确实可以通过以较低的前期成本启用和停用游戏而变得更有意义。 但是，我们需要在这里考虑两个问题： 1. 缺乏时间玩游戏的玩家可能会发现，每月的订购只是在业余时间玩几款游戏，就没有太大价值，尤其是那些销量惊人的游戏，其学习曲线可能需要数小时的时间。 2. 休闲游戏玩家，他们通常是在移动设备上玩短游戏的人，通常习惯于免费玩游戏，如果Stadia的模型要求每月订阅费+每款游戏的成本，这可能是一个问题。 那么，最终，Stadia的用户群体是谁？看起来像是休闲游戏玩家或想玩高端游戏，但又不希望前期成本或传统游戏硬件带来麻烦的人更理想。 如果Google能够提供足够好的体验，同时又添加了出色的内容和有趣的功能，则该服务可能会有一个未来，但实时游戏的规模可能不像人们想象的那么大。 接下来，我们集中在此分析的内容方面。Google和其他流媒体播放器真的能在改变行业商业模式的同时吸引高质量的内容吗？ 敬请期待…… 3DCAT实时渲染云平台，是深圳市瑞云科技有限公司提供的三维应用实时渲染云服务。利用云端的海量GPU算力处理繁重的图像渲染计算并串流同步输出到终端设备，从而实现终端设备的轻量化，让高质量三维图形应用变得无处不在。用户可以使用任何联网的普通设备，访问托管在3DCAT云中的三维应用程序，同时无需下载安装应用。3DCAT提供的有实时渲染，实时3D，实时游戏， 像素流送， 虚拟仿真等实时渲染云服务，欢迎前来体验！

像素流送经济学... 通常，在谈论像Google Stadia之类的 像素流解决方案时，记者和行业参与者提出的大多数问题仍然集中在等待时间和图像质量上。 尽管这些确实是像素流解决方案试图与既定平台竞争的主要挑战，但另一个挑战（即此类服务背后的经济性）通常被Google之类的人遗忘或视为易于解决。 不过，在使用这种技术时，它们确实仍然是一个重要的主题（即使比延迟更重要），甚至Google也可能会花费大量自己的资源来解决。 可以说Google有足够的财力不担心几年来的亏损，但请记住，在某个时候，最终有人会质疑某项业务是否确实值得。对于Google来说，这不是第一个吧？对不对 那么，对于Google Stadia和其他 Pixel Streaming服务，我们需要重点关注哪些经济学方面的内容？这里实际上有3个角度： - 首先是内容的经济性。 - 然后是Google需要为Stadia设置的高端游戏服务器的经济性（请相信我，这绝对不便宜……甚至对于Google而言）。 - 最后，您必须考虑这种服务为用户带来的经济效益，毕竟，最终必须有人付账。 服务器，什么服务器？ Google的原始家用服务器。聪明才智始终是他们的核心力量。 尽管Google以其服务器构建能力而闻名，但高端游戏硬件本身就是一个完全不同的物种，与任何游戏硬件一样，GPU代表了大部分投资。 因此，谷歌已经与AMD合作建立了定制的 游戏GPU，以为其Stadia服务器提供动力。 当然，人们会期望Google为Stadia的用户获得如此大的订单，这笔费用相当可观，对吧？ 让我们来看看… 在Stadia像素流送服务宣布期间，如果您使用展示的地图作为参考（请参见下图），则假定所有这58个区域都将拥有Stadia的服务器，这些服务器能够分别处理至少50.000个并发用户（暂时保守）或总计290万并发用户（仅出于比较目的，Steam每天平均获得约10到1500万并发用户）。对于Google而言，这将意味着290万个定制AMD GPU，这对于任何OEM来说都是相当大的数目（英伟达必须为此感到垂涎三尺）。 Stadia揭幕期间的Google基础架构图 但是，您猜还有谁还是AMD在游戏GPU方面的巨大客户？是的，微软和索尼的老游戏伙伴。两者都已经使用定制AMD GPU数年了（即Xbox的最后三代和Playstation的最新一代）。 尽管Google可能已经准备好订购几百万个AMD GPU，但微软和索尼却处在完全不同的水平，它们的历史控制台总数超过3亿个，其中最新一代的销量超过1亿个。其中具有自定义AMD GPU，与Google所订购的相同。 因此，我怀疑有人会认为Google在高端游戏硬件方面比Microsoft或Sony更专业。因此，如果您认为微软已经公开承认Xbox One的制造成本高达400美元以上，并且实际上是亏本出售，那么相信Google至少会花掉同样多的钱就可以了。 还要考虑到Google（可能会很聪明，因为我们将从上述两个玩家那里获得新一代游戏机）希望通过在不久的将来保证以60fps的速度播放4K（甚至8K）游戏流而超越这一范围，因此已经使用了比当前控制台至少强大60％的GPU。即使每个并发用户400美元，我们仅在硬件投资上就至少要花1.1Bi美元……这就是事情开始变得昂贵的原因……甚至对于Google而言。 比最新一代的控制台要快得多……那一定要花钱，对吧？ 最后，请考虑将这些投资仅用于服务的硬件方面。不要忘记，运营费用也是此类服务成本中相当大的一部分。拥有11个teraflop GPU很不错，但是这些东西消耗了很多功率。加上物理空间成本（用户端不存在），维护和工程团队，以及每当其中一个用户决定播放4k信号时，将这些4k信号流传输给用户的恒定带宽成本。

是的…滞后会杀了你（当然是游戏game） 像素流送评论家指出的罪魁祸首是用户做出的命令在屏幕上产生可见响应（以延迟度量）之前所具有的“延迟”或延迟。 有许多因素可能会增加游戏的滞后性，其中一些是可以解决的（例如，交通拥堵或信号干扰），而另一些则是更难解决或根本无法解决的（即，信号的传播速度不能超过光速）。 特定于 像素流送技术的延迟也可能源自视频流的编码/解码延迟，信号到达流服务器（以及从流服务器返回）所花费的时间和跃点的多个地方。最后一英里（从您的设备到互联网提供商的距离）中的其他问题。 考虑到游戏玩家对游戏响应时间的敏感度，特别是在当今大多数游戏玩家都将大部分游戏时间都花在网络游戏上的情况下，延迟仍然很重要……很多（请记住，Steam上几乎所有顶级游戏都是多人游戏）。 一般而言，任何小于100毫秒的延迟（在测量游戏多人服务器的延迟时）对于多人游戏来说都相当不错，而一些游戏玩家会声称50毫秒或更短的延迟对于诸如此类的快节奏游戏是绝对必要的。格斗，第一人称射击游戏或电子竞技比赛。延迟也可以归因于游戏本身，其中一些使其比其他游戏更引人注意。 由于存在每个像素流送服务，因此添加中介将始终为最终用户增加一定程度的延迟。问题是，我们在谈论多少延迟，这真的重要吗？ 一项在OnLive仍活着（没有双关语）的情况下进行的研究得出结论，该服务在游戏的现有延迟中增加了135到245ms之间的任何时间。当然，那是6年前。 其他服务声称可以通过不同的方法获得更好的结果。CiiNow（显然已被Google收购）在2013年宣称能够通过加速其服务器上的图形编码过程来大大降低延迟，以至于它可能导致比本地Xbox360控制台更低的延迟。尽管该公司确实公布了其结果，但直到今天仍不清楚为什么该服务（一种B2B解决方案）从未真正起飞。 Tom Morgan和Digital Foundry团队于2017年8月进行的另一轮测试测量了PlayStation Now的增加延迟，该游戏流媒体服务结合了OnLive和Gaikai收购的技术。 他们的结论？该服务平均仍会增加60-80ms的输入延迟。请注意，此延迟会添加到游戏玩家与游戏服务器之间已经存在的延迟中，这可能意味着总延迟为120ms到180ms之间，即使对于某些类型的游戏来说有点高，也还算不错为他人。 为什么要强调“平均”一词？因为在游戏过程中，该延迟可能会发生很大的变化（抖动和数据包丢失），尽管其中一些并不是 流媒体服务的真正错误，但仍然足以破坏您在 Pixel Streaming服务上的游戏体验。 碰巧的是，与电影，电视节目和音乐不同，它们基本上是单向传输给用户的文件，像素流送是一种双向过程，其内容必须在高端服务器上实时生成。这意味着无法缓冲游戏以补偿不稳定因素（例如电影或音乐），也不能在世界各地的CDN之间轻松廉价地分发游戏，因此始终需要在最终用户附近运行游戏，以提供体面的体验。 借助游戏，无论您的互联网连接速度有多快或延迟有多低（良好），最终对游戏玩家而言真正重要的是稳定性。 不幸的是，稳定性仍然是我们互联网基础设施的薄弱环节之一，导致出现不良情况，包括从游戏过程中的积极图像压缩和伪像，到过去游戏玩家注意到的高输入延迟。如果您曾经在拥挤的Google环聊中聊天超过20分钟，那么您可能知道我在说什么。 简而言之，一场比赛中短暂的短暂停顿就足以让您完全脱离比赛（请参见下面的CSGo示例）。 您会看到“红色”，而另一位玩家实际在“黄色”。 为了降低这种影响，某些服务要做的是以较低的 分辨率和刷新率传输视频。Google的Stadia测试版（称为Project Stream）以30fps和720p的速度播放单人游戏，并强制执行严格的连接要求（见下图）。将其与在Xbox One X上以4k分辨率以60fps的本机运行多人游戏进行比较，您会发现可能会损失一些东西，以换取便捷的流媒体服务。 那么Google Stadia的体验如何？尽管现在说他们的Beta和GDC演示是否有任何迹象还为时过早，但他们仍有很多方法要走，直到他们可以将延迟真正降低到可接受的水平。 贾瑞德·沃尔顿（Jarred Walton）在2019年GDC期间进行的测试发现，延迟增加了80毫秒以上，考虑到这是Google家用草皮旁边的受控环境，这并不是很令人鼓舞。 曾经是Google Stadia（称为Project Stream）的Beta版测试人员，但我也可以补充一点，尽管我的经验给我留下了深刻的印象（它确实比我以前尝试过的每个 流服务都要好得多），但延迟仍然非常明显我的家庭连接速度为+100Mbps（请记住，我与迈阿密的Tier 1 Network提供商仅相距1英里）。 在晚上7点到晚上11点之间，您可以称之为“互联网的高峰时间”，该游戏有时对我来说变得无法玩。 每个游戏会话之前Google Stadia的Beta严格连接测试的示例（观察：不是我的屏幕截图） 虽然这些经历可能相当于对服务进行微调的个人轶事，但这确实表明，并非所有内容都可以用Stadia的技术来完善。 5G的问世于今年开始，似乎表明世界更加幸福，最后一英里的延迟和拥塞减少了。但是主流 5G的采用仍至少需要数年时间，并且需要投资数千亿美元（即Apple预计到2020年或更晚才推出5G手机），尽管这项技术确实非常有前途，但它仍然可能无法确保流畅的游戏会话所需的完美稳定性（诸如更高的5G信号阻塞倾向，短距离范围以及令人讨厌的光速仍在继续）。 在我的下一篇文章中，我们将介绍游戏界在讨论 像素流送技术（像素流送技术的经济性）时经常忽略的第二个（也是非常重要的）方面。） 敬请关注！ 推荐阅读： 像素流送是否会走向另一个史诗般的失败？（上）

早在2002年，当时电影业就在争先恐后地提供首个 流媒体解决方案Netflix，这使许多行业专家感到沮丧，他们选择了一条截然不同的路线，而是大量投资于传统的物理磁盘发行。 快进到2018年，技术领域几乎每一个沉重的打击者，包括微软，腾讯，EA，Verizon甚至沃尔玛之类的公司，都宣布了在未来几年内将 视频游戏流媒体服务推向新的高度。 随着诸如Sony PlayStation，Google（Stadia），Nvidia和Nintendo之类的科技和游戏巨头已经提供和/或测试他们自己的服务，人们只能但可以肯定的是，游戏流媒体的时代最终将开始…… 我们在见证历史重演吗？ 像素流送历史 自从Netflix在2007年正式推出其视频流服务以来，人们一直想知道类似的提议何时会出现在游戏行业。在许多潜在的云游戏技术中，在服务器上运行游戏，而只是将图像传输给最终用户，这似乎是使 游戏流变为现实的最明显的方法。 这项被称为“ 像素流送”的技术通常被视为视频游戏的“圣杯”，有望成为终结所有游戏困境（物理硬件，安装/配置，更新和下载的要求）的最终解决方案。甚至在功耗最低的设备上也可以访问高质量的游戏。 这一承诺可以追溯到2009年，当时一家名为OnLive的新创业公司在游戏开发者大会上首次宣布了其开创性的流媒体技术。该公司依靠华纳兄弟公司和At＆t等媒体巨头的巨额投资，于次年大张旗鼓地宣布成立，但从未真正成立。 OnLive包含一个漂亮的微型集线器，可连接到电视和控制器 该服务通常因其图像质量低和输入滞后（玩家在屏幕上看到响应所花费的时间）而受到批评，该服务最终于2012年关闭。其主要竞争对手盖凯（Gaikai）的满意度较高（但仍为时过早） ）结尾，并于同年被Sony收购。 数十家其他公司也冒险进入像素流化趋势，其中大多数最终在不久之后就倒闭了。大型游戏行业参与者，例如Square Enix（著名的《最终幻想》游戏系列），GameFly和G-Cluster最终都关闭了产品。许多其他公司要么关闭，要么被降级为租用“云中的PC”，转而使用按使用量付费或基于订阅的模型，但到目前为止，大多数用户至今仍未采用这种模型。 因此，还有两个大问题，是什么导致当时 像素流趋势消失的原因？从那以后发生了什么变化，以至于谷歌变得充满信心，可以被Stadia击败？ 为了回答这些问题，我们需要关注 Pixel Streaming服务的三个主要问题之一，以了解该服务的真正障碍是什么。他们中的每一个对现任公司和新参与者都提出了截然不同的挑战，因此在得出任何结论之前应分别进行分析。 他们是： - 延迟和图像质量 - 经济学 - 内容 在此，我的意图不是写一篇有关 Pixel Streaming面临的挑战的权威文章，也不是明确声明哪一个（或一个）成功。 正如尤达（Yoda）所说的“……永远在前进”，因此请记住，谈论游戏技术时，很多事情可能会发生意料之外的变化！

通过 像素流送你可以将最高质量的内容流送到所有平台——甚至包括移动设备上的几乎所有Web浏览器，而且没有任何下载和安装要求。对与会者而言，这并不比访问YouTube视频复杂。但是和YouTube不同的是，他们还可以即时通过键盘、鼠标、触摸事件或自定义HTML5用户界面与这些内容交互，并将这些响应发送回引擎。 像素流送使你能够向任何地方发送产品配置器、现场建筑设计评测或交互式培训等应用程序，只要现代化的Web浏览器能够运行就好。你只要分享一个链接就能让多名观看者在同一个会话中进行协作，或者你也可以向每一个连线的观看者发送独立的会话。 像素流送的工作原理是什么？ 截至目前，最终用户用来消费你的实时内容的设备（无论是台式PC、主机、平板电脑，还是智能手机）通常都是运行Gameplay逻辑并将结果 渲染到屏幕上的设备的同类。因此，内容的性能和质量受限于设备的能力。 但是有了像素流送，你就可以在功能强大的远程计算机（在云端或者本地服务器）上运行你的 虚幻引擎应用程序，利用它的所有资源——CPU、GPU、内存，等等——实时执行游戏逻辑并 渲染每一帧画面。然后最终用户可以在他们自己的计算机、平板电脑或智能手机上使用标准的Web浏览器，通过一个轻量级Web服务堆栈连接到那个运行的游戏应用程序。 这里面有什么奥秘？ 虽然功效强大，但典型的像素流送设置是十分简单的，只包括三个将虚幻引擎连接到查看平台的组件——任何人都可以在局域网中比较轻松地设置它。而它的功效足以供具有部署Web服务经验的团队用作创建自定义云托管平台的基础。 为了在查看者和虚幻引擎应用程序之间实现尽可能低的延迟，系统使用WebRTC点对点通信框架。 - 像素流送插件——此插件在虚幻引擎内部运行。它使用H.264视频压缩对渲染的每一帧最终结果编码，将这些视频帧与游戏音频一起压缩到媒体流中，发送到WebRTC代理服务器。 - WebRTC代理服务器——WebRTC代理服务器负责将像素流送插件产生的媒体流通过直接的点对点连接转发给多个查看者。 - 信令和Web服务器——信令和Web服务器负责在查看者与WebRTC代理服务器之间协商建立连接，并为查看者提供播放媒体流的HTML和JavaScript环境。 这种办法好在哪里？ 这样一套系统的优点很多： 移动设备和轻量级Web浏览器可以显示工作站品质的3D图形——这样的图形品质大大高于不使用这套系统时所能达到的的水平。它们能够使用依赖强大GPU的渲染功能，以很高的帧率显示复杂的场景。 从加载网页到与体验交互的时间可以不到一秒钟（你可以用WebGL方法试试做同样的事）。众所周知，延迟是查看者放弃网页的主要原因（根据Kissmetrics的统计，40%的人会在延迟达到三秒或更长的情况下放弃）。 体验是可以预测的。你知道无论他们在什么设备上消费你的内容，看到的图像都会和你看到的一样。你不必担心视频驱动程序或GPU限制造成视觉效果问题。 这是一种“零安装”解决方案。最终用户不需要预先下载插件、大型可执行文件或内容文件，不需要安装任何东西。查看者所消费的仅仅是视频流——就和其他任何视频流一样。而且和WebGL不同的是，你的3D数据不在别人的硬盘里，也就没有某些公司可能担心的安全问题。 从开发者的视角来看，这种解决方案的支持难度远远低于将体验移植到所有可以想到的移动设备和浏览器配置。如果你需要进行更改该怎么办？只要在一个地方进行更改，所有人都会即刻获得新的体验。你只要针对Windows将你的应用程序打包一次，最终用户可以选择在任何平台上、用任何支持WebRTC连接模式的现代化浏览器体验你的内容，这包括台式机、iOS和Android上的Google Chrome和Mozilla Firefox。 如果你从来没有接触过虚幻引擎，可以进入3DCAT实时渲染云 www.3dcat.live进行体验。我们希望你发现像素流送功能很有用处，而且乐于使用。

随着5G的普及， 像素流送相关技术广泛应用于生活中。例如汽车展示、建筑漫游、工业仿真、游戏试玩、手办模型展示、艺术展览、医疗实训、智慧党建、智慧园区……那么 像素流送到底有哪些优势？ 像素流送的优点 1.用户体验一致 即使是手机这种轻量化的终端也能体验到服务器级别的高端显卡带来的震撼效果，尤其是一些复杂的场景，以往在手机上是无法运行的，现在也能“连连看”了。除此以外，不管是PC还是手机，通过像素流送所看到的内容都是一致的，不存在设备降低画质也降低的现象。 2.更加易用，能更好地满足用户的体验 对于用户来说，体验像素流送只需要能够打开浏览器联网即可。现有的家庭网络条件加载网页的时间也是很短的，完全不需要下载、安装各种应用。 3.降低终端成本 既然终端的性能已经和体验脱钩，那么使用 像素流送自然无需再购置更加高端的芯片、显卡等设备，这样极大地降低了用户的体验成本。 4.内容更加安全 对于应用开发者来说，通过像素流送只需要把工程文件打包发布到 云端即可，用户访问的都是一帧一帧的画面，无法通过技术手段获得三维模型等原始素材，更加有利于知识产权的保护。 5.更新更加容易 对于应用开发者来说，使用像素流送技术,应用的发布和更新也都更加容易。云端一旦更新，所有用户访问的都是 实时刷新的内容，再也不用费心费力地让用户自行下载更新版本了。 像素流送技术的应用 通过这项技术的应用，用户可以更好的通过 在线平台体验。比如汽车、模型之类的可以进行多维度的展示用户想看哪一面就操作展示哪一面，游戏用户可以直接试玩体验，医疗实训演练也可以进行细致的分解说明、细节展示，可以为客户更好的展示应用效果等等。 实际应用以及如何体验？ 当前市场上能提供关于 像素流送技术服务的公司不多，如果想知道什么是像素流送，文字看完还是一知半解，可以到 3DCAT实时渲染云平台进行体验。 3DCAT是 深圳市瑞云科技有限公司提供的三维应用实时渲染云服务。利用 云端的海量GPU算力处理繁重的图像渲染计算并串流同步输出到终端设备，从而实现终端设备的轻量化，让高质量三维图形应用变得无处不在。用户可以使用任何联网的普通设备，访问托管在3DCAT云中的 三维应用程序，同时无需下载安装应用。3DCAT支持能在Windows平台运行的几乎所有 渲染引擎，支持NVIDIA RTX实时光线追踪功能的开启。 3DCAT实时渲染平台，让三维应用触手可及，欢迎体验 https://www.3dcat.live/demo.html。

因基于图像的渲染技术创新，Manex Visual Effects公司（又名MVFX公司）在接手制作了几个项目之后在业内出名了。MVFX利用这些创新技术制作了电影《黑客帝国》中子弹时间系列的虚拟背景，这些 虚拟制作的技术在电影《极限乔丹》和《碟中谍2》（今年也是这部吴宇森导演的作品上映20周年）中也发挥了重大作用。 这些虚拟背景开发的负责人是Dan Piponi，Kim Libreri和George Borshukov（他们之前曾与Paul Debevec一起参与基于图像的渲染研究）。 Manex为《碟中谍2》制作的绿幕摄影和虚拟背景解析 在2001年，Piponi、Libreri和Borshukov凭借基于 图像渲染的、可以通过CG重建集来编排摄像机运动的系统开发研究，获得奥斯卡科学与技术成就奖。（他们后来又凭借在Esc Entertainment工作室中完成的《黑客帝国》续集中使用的Universal Capture的开发再一次获得了该奖项）。 有了这项虚拟背景技术，电影创作者就可以先给特定的场景拍摄大量照片（例如《碟中谍2》中悉尼的夜景），然后再通过 CG技术将该场景重现，实现超逼真的 渲染效果，得益于这种高动态范围成象，电影创作者可以在虚拟环境中放置演员或其他拍摄内容，例如下图中跳跃的汤姆·克鲁斯（Tom Cruise）就是被放置在了一个虚拟的悉尼夜景中。 当然，许多人会认为这些摄影测量和纹理映射技术现在已经用于虚拟集构建了。Manex公司以及后来的Esc工作室处理工作的方式（还包括预先可视化动作）确实是VFX电影制作中现在普遍使用的虚拟生产管道的先驱。 开启《碟中谍》电影制作之路 2000年，安德列斯·马丁内斯（Andres Martinez）曾在他的祖国哥伦比亚工作，然后在旧金山艺术大学学习，之后，他在Manex公司受雇从事Manex / Esc虚拟背景创新工作，开始了制作《碟中谍2》的旅程。MVFX的论文顾问兼FX主管Greg Juby向他介绍了该公司。马丁内斯后来继续担任《黑客帝国》续集和《猫女》的虚拟背景主管，这进一步推动了艺术和技术的发展。 在《碟中谍2》中，马丁内斯的角色是指导虚拟背景团队，并且将Libreri，Borshukov和Piponi已率先在《黑客帝国》上使用的技术用于基于图像的虚拟环境渲染。 “金·库布里（Kim Libreri）是我的引路人，我能做的是我为虚拟背景重新安排了一些步骤，”马丁内斯说道。“那时，我们成功实现了从拍照到营造环境仅需几个小时。如今，一个按钮可以执行所有操作了，但对于那时候的我们来说，一切才刚开始起步。” 如今，电影制作已经可以通过绿幕拍摄 实时渲染合成，让电影创作者在拍摄现场就可以直观地看到影片的最终效果。 虚拟背景技术 《碟中谍2》的工作过程是这样的：将悉尼的拍摄场景的照片数字化（将其扫描为胶卷），并带入Manex的制作流程中。这些照片为3D几何构造提供了信息，其中还包括通用模型和定制模型。Manex的系统会将“真实”的照片映射到模型上。 马丁内斯表示，“我最终负责获取摄影，即扫描的胶卷。扫描后，我创建了HDRI，使用了Shake脚本，创建了目录结构，然后选择了负责创建序列的艺术家。” 最终他选择了CG艺术家Enrique Vila和Carina作为悉尼虚拟背景的主要创作者。 下一步，就可以将生成的虚拟环境移到3D空间中，并用作汤姆·克鲁斯的绿幕摄影的背景板，让他在场景中进行各种空中跳跃，包括在一个主要场景中他从建筑物的洞中跳出来并乘坐降落伞降落到地面。 当时用于执行此操作的Manex工具集被称为 实时虚拟系统或RTVS，实际上是Maya的插件。后来，对于《黑客帝国》续集，Dan Piponi重新编写了Esc的虚拟背景系统，将其作为称为“ Labrador”的图像分析和摄影测量工具。 《黑客帝国》中子弹时间系列的早期工作，由电影的视觉效果主管John Gaeta监督，为《碟中谍2》的虚拟背景VFX提供了信息。 电影制作 最终，这些虚拟背景只出现在《碟中谍2》场景中，但是对于观众和他自己来说，它们都是令人难忘的。“我们在《碟中谍2》上所做的一切，都是大型项目的垫脚石。当然，这也是我现在所从事的虚拟制作项目的起点。” 这对马丁内斯来说也是了解故事片制作的宝贵一课，自此以后，他一直在Sony Pictures Imageworks，Digital Domain，Method，Pixomondo和他自己的制片厂LosFX等公司工作。 “本来电影已经完成了，但后来，汤姆·克鲁斯在空中有一个翻转角度的镜头又需要返工，在这个镜头中，当降落伞打开时，摄像机是倾斜的，”马丁内斯说。“在那种特殊情况下，我们看到了吊杆和几台起重机。我当时正在为这个镜头创建环境，但是其中一栋建筑物的阳台底侧从未建成，或者说对于该特定场景，那个东西不存在，于是问题出现了。” “在我旁边是一位非常出色的合成师Dan Glass。我把这个镜头发给了他，我们急着要把镜头做好，他看着我，说：“安德烈斯，这个镜头的pixels在哪里？” 我就想，'哦，不！没有时间重新渲染了。我真的觉得自己搞砸了。但丹说：“不用担心，我可以搞定” “现在我总是告诉人们，每部电影都有最终版本，而不是最佳版本，”马丁内斯补充道，“很多时候拍电影就是如此。”