繁
双方今天宣布了此次合作，高通还宣布成立1亿美元的"SnapdragonMetaverse基金"。SquareEnix将借此探索在该平台上实现"沉浸式游戏体验"的可能性。目前合作的细节尚不清楚，但SquareEnix的技术总监本·泰勒在一份事先准备好的声明中指出，该公司认为"现在是XR在我们特别出名的经典流派游戏上进行创新的时候了，我们期待着与世界分享这些创新。"SnapgonSpaces于2021年11月首次宣布，它由一副戴在头上的AR眼镜组成，眼镜系在智能手机等外部电源上。与其他眼镜类似--其中许多眼镜是由高通自己的XR2平台提供动力的--该设备能够在通过镜头观看时将虚拟图像锚定在现实世界中。它还具有位置跟踪和手部输入跟踪功能。SquareEnix以一些最大的游戏品牌而闻名，包括几个日本角色扮演系列，如最终幻想游戏。泰勒在《经典流派》一书中指出，该公司可能希望将这种风格的体验带到这个平台上。高通此前曾指出，SnapdragonSpaces将于2022年春季某个时候全面上市，但目前尚不清楚此次推出的具体内容。你希望SquareEnix将什么东西带到AR上？请在下方评论中告诉我们！
STeam上使用的VR设备有一半以上是MetaQuest耳机。这是根据最新的蒸汽硬件调查结果得出的结论。2月份的更新将Quest2在该平台上的VR头盔总使用量推高至47.09%，较上月增长了1%以上。此外，原始任务拥有3.83%的使用份额，这两种设备都占蒸汽耳机使用耳机的50.92%。Steam's硬件调查是一项选择加入的服务，从选定的当前蒸汽用户中收集数据。考虑到这并不是整个STeam用户群，我们不能确定结果是100%准确地反映了STeamVR的使用状况，也不是VR市场的整体表现。但是，考虑到这些公司都没有真正透露过其耳机的官方销售数据，这是我们掌握的最好的信息来源。这是Quest耳机的总使用量第一次超过这条线，但随着Quest2每月的增长速度，我们完全预计这款设备将在今年晚些时候自己跨过这一门槛。再加上裂谷S、原始裂谷和DK2(是的，这仍然是仍然的东西)和Meta耳机的份额占到了STeam使用的VR耳机的67.18%。这实际上比上个月的67.27%略有下降。Some这一损失可以归因于其他耳机的小幅增长。Valve的指数小幅上升至14.43%，仍然是该平台上第二大最常用的耳机。HTC的VivePro2也出现了小幅增长，尽管所有其他Vive耳机也都出现了下降。总体而言，使用VR头盔的STeam用户份额从2.14%略降至2.12%。随着2022年的进展如火如荼，在可预见的未来，基于PC的主要新耳机也不会发布，预计Quest2在未来几个月的硬件调查中将继续取得进展。
我在CES2022上试用了bHaptics触觉手套，这是Quest2即将推出的一款售价299美元的产品(显然也包括PCVR)。bHaptics是TactSuit背后的同一家公司，在以后的游戏中支持。与我尝试的力反馈手套不同，TactGLove实际上并不限制手指的运动。取而代之的是，它只有每个手指的精密振动马达(线性共振执行器)。这个想法是为了在无控制器的手跟踪游戏中增加缺失的触摸感。BHapticsSDK已经得到了顶级手部跟踪体验的支持，包括未插拔和手部物理实验室。老实说，我以为TactGlove会感觉像个噱头。因为我在CES上也试过真力反馈手套，我没想到简单的振动会给人的沉浸感增加太多。但我错了。将TactGLove与那些售价5000美元的产品进行比较甚至是不公平的--真正的比较是在正常情况下使用Quest手部跟踪游戏，因为你根本没有触觉。这种缺乏触觉是人们对免控制器手跟踪最常见的抱怨之一，这正是TactGlove解决的问题。But这种增加的触觉值300美元吗？这很难说。就目前而言，我会说不，原因很简单，因为免控制器手部跟踪游戏库仍然非常有限。然而，bHaptics确实告诉我，价格主要是当前供应链问题的函数。如果到明年，Oculus手部跟踪库更加丰富，bHaptics可以将价格降至200美元，那么它的价值主张可能会转变到我推荐的程度。TactGlove应该在第二季度提供给开发者，并在今年晚些时候交付给消费者。它将有三种尺寸可供选择。
苹果公司发布了一份'AR/VR框架工程师'的工作清单，该职位被描述为"开发一种全新的应用程序范例"。苹果现任经理HaydenLee在推特上分享了这份工作清单。作为社交虚拟现实领域的先驱，李与人共同创立了Convrge和BigScreen。根据他的LinkedIn主页，他于2020年年中受雇于苹果公司从事AR/VR工作，并于10月成为经理。软件框架是开发人员可以使用的组件、资产和功能的集合，而不是重新发明轮子。这份清单的有趣之处在于，它暗示了苹果可能对AR/VR软件采取的方式。这个角色被列为涉及"分布式系统"--运行在多台协调的联网计算机(或这里的头戴式耳机)上的软件，并要求获得实时体验。以下是对这项工作本身的描述：您将研究和开发一种全新的应用程序范例--这是一项挑战，需要在不牺牲代码质量或关注细节的情况下进行快速实验和原型制作。与Apple的用户界面框架、人机界面设计师和系统软件团队密切合作-该角色将推动您跳出框框思考，并解决AR/VR领域令人难以置信的雄心勃勃和有趣的问题。您将可以访问各种内部框架和服务，这些框架和服务使您能够构建深度集成到我们的操作系统中的软件。苹果以网络框架的角色提到了"一种全新的应用程序范式"，它"深度集成到我们的操作系统中"，这表明苹果可能正在探索为开发者提供高级工具，以构建内在的多用户空间应用程序。这样的框架可能会产生应用程序，这些应用程序可以在同一空间或跨互联网由多个耳机无缝运行，并具有遵循最佳实践的同步组件，如UI。今天，所有这一切都可以手动实现，也可以与引擎中的第三方框架(如Unity和虚幻)相结合。但凭借ARKit的RealityKit和RealityComposer，苹果已经表现出了提供更高级别工具的愿望，这些工具可以处理材质、阴影、物理、动画、空间音频等任务。这让苹果致力于完善这些核心技术，而开发人员则专注于构建实际内容，而不是需要自己复制每个内容。对于用户来说，这意味着应用程序之间的一致性和质量更高，即使是那些低预算的应用程序也是如此。We还没有听到传闻中的苹果AR/VR耳机的ROS操作系统的细节，该操作系统最早可能在明年发布。但这份清单暗示，尽管硬件大肆宣传，但苹果在这一领域的真正创新可能是对软件的一种根本不同的方法。
在几个月来关于QuestPro的传言之后，美达公司宣布将于2022年推出代号为ProjectCambria的全新"高端"独立VR耳机。Cambria不是Quest3，也不会取代Quest2。马克·扎克伯格将其描述为Quest系列之外的一款新产品--"一款全新的高级和高端产品"，它将"处于价格谱的高端"。
芬兰企业级VR/AR耳机制造商Varjo将于下周发布新产品。该公司推出了一个预告片页面，将于10月21日发布。在这一页面上，它调侃道，它将"带来一个启示，将虚拟现实提升到一个全新的竞技场。"你可以注册获得活动的通知，活动将在东部时间下午12点/太平洋时间上午9点发生。只有一张预告片显示有人从后面戴着Varjo耳机。但目前还不清楚这是一款全新的设备，还是该公司现有的XR-3和VR-3耳机之一。基础设计，包括耳机安装的按钮和表带，看起来与这些设备几乎一样。It可能是该公司在戏弄这些设备的继任者。在过去的几年里，Varjo一直向企业销售具有先进功能的高端耳机。这包括超高分辨率面板和混合现实支持，以及内置的手部和眼睛跟踪功能。看看Varjo如何用潜在的XR-4或VR-4来推动这些功能肯定会很有趣，尽管订阅价格约为4,000美元的VR-3和约5,500美元的XR-3，因此它们肯定不是消费设备。此外，目前的设备今年早些时候才开始发货。查看我们使用以下XR-1的实际操作。我们曾多次询问该公司是否会制造消费型VR头盔，但它一直对这一概念抱有希望，没有任何具体信息可供分享。你希望从Varjo潜在的新耳机中看到什么？在下面的评论中让我们知道！
我们会看到OculusRift3吗？"也许有一天，"Facebook首席执行官马克·扎克伯格说。现在还不要太兴奋。扎克伯格在Facebook上以相对随意的方式回复了一个人，问公司是否会在今天发布OculusRift3(Facebook没有发布OculusRift3，只是发布了新版门户设备)。"也许有一天，"他回答说，"但我们现在都参与到了Quest中。毕竟，如果你愿意，你可以把你的任务链接到你的电脑上，然后玩游戏。"OculusRift3？也许不是Indeed，脸书向VR52证实，当宣布将停止销售RiftS.OculusQuest首先也是最重要的是独立平台时，它没有再推出PC独家VR头盔的计划。但它确实允许你通过有线连接和无线空中连接访问OculusStore和SteamVR上的PCVR内容。OculusQuest2的成功与相对低迷的PCVR头戴式设备的销售相对疲软(仍被认为是疲软)相支撑，这种情况不太可能在短期内改变。事实上，根据STeam的月度硬件调查报告，Quest2的用户数量已经超过了OculusRiftS和OculusRift的总和。从技术上讲，OculusRift2从来没有过，因为OculusRiftS更多地被视为一种增量升级，而不是真正的下一代设备。然而，我们曾经希望看到重要的新一代OculusRift。Facebook的HalfDome原型采用了更宽的视野和可变焦距显示等先进功能。今年早些时候，Oculus创始人兼Rift发明者PalmerLuckey声称Rift2在制作前被取消了。你想看OculusRift3吗？如果是这样的话，你希望在这款设备上看到什么？在下面的评论中让我们知道！
索尼的PS5游戏机将很快为其下一代VR头盔提供动力，到目前为止已经售出了超过1000万台。这一数字今天得到了索尼自己的证实。PS5在2021年7月18日突破1000万大关。索尼表示，这使其成为该公司迄今为止销售最快的游戏机。尽管自去年11月推出以来，持续的全球芯片短缺极大地限制了游戏机的供应，预计这些问题将持续到2022年。PS5有两个版本。纯数字版的售价为399.99美元，而更昂贵的光盘版售价为499.99美元。游戏机目前可以通过向后兼容的方式支持索尼PS4时代的VR耳机PlayStationVR，但它需要一个特殊的适配器来连接索尼免费提供给用户的PlayStation摄像头。截至2020年1月，PSVR本身已经售出了500万台。更重要的是，索尼已经确认将在未来发布一款全新的PS5VR头盔，尽管它不会在2021年上市。该公司甚至展示了该套件的新控制器，它通过一根电线连接到游戏机。今年早些时候，VR52在与多个消息来源确认后，也确认了这款设备的第一批规格。归根结底，这是PS5的一个良好开端，而PS5又为下一代VR头盔带来了希望。游戏机越多，这款新设备的潜在客户就越多。尽管如此，我们可能只会看到PS5的一小部分用户一开始就开始使用这款新耳机；PS4已经售出了1.15亿台，使PSVR的销量相形见绌。
今天，Nitic宣布了精灵宝可梦Go的GoBeyond更新，这是手机AR口袋抓怪兽游戏迄今最大的更新。看看下面的预告片：超越：最大的精灵宝可梦Go更新在这次更新中，级别上限从40级提高到50级，并引入了令人印象深刻的季节。庆祝活动季节从当地时间12月1日上午8点开始，包括新的天气动态，每个赛季不同的精灵宝可梦，不同的全球半球，更多的地区性游戏中事件，以及更多。12月2日将添加来自Kalos地区的全新精灵宝可梦，如Froakie，Chespin，Fireroar，等等。它们在第一周也会比平时更频繁地出现。为了适应新的等级上限增加，从11月30日开始，你将从捕获精灵宝可梦、进化精灵、孵化鸡蛋、注册Pokedex条目以及其他加速旅程的活动中获得高达两倍的XP。他们还推出了从11月18日到年底的"双倍捕捉XP奖金"。最后是从11月18日到11月30日的'友谊12天'活动，在这一活动中，与朋友打平的速度要快得多，同时还有其他提拔和奖励。如果你在2020年底之前达到40级或以上，你将获得传统40训练师头衔的独家奖励。这个更新还增加了一个更有趣的功能，升级不再仅仅是积累足够的经验--你还需要完成等级之间的"升级研究"。例如，为了从40级升级到41级，你需要在一天内快速捕获大量的精灵宝可梦(待定)，42级需要多次进化，43级需要一定数量的健身房和突袭战斗的白金奖牌，等等。这是一个很好的游戏升级的概念，它激励你掌握游戏的方方面面。你对所有这些变化和更新有什么看法？在下面的评论中让我们知道！
厌倦了在VR中无休止地更换电池？这款OculusQuest控制器充电站或许能帮到你。ONGInnovations上周末发布了这款新产品。目前，每个Quest控制器都使用一节AA电池，您经常会发现电池在游戏过程中耗尽。但这款OculusQuest控制器充电站用自己的可充电解决方案取代了可更换电池，并配有定制的电池面板。当您不在VR中时，只需将Touch控制器放在矩形块上，每个控制器的跟踪环和磁铁有助于保持平衡。控制器插入充电端口，以确保它们已准备好进行下一次游戏。ONG独特的面板有空间供充电器连接。从理论上讲，这个概念是可行的，但关于这款OculusQuest控制器充电站，还有很多问题需要回答。例如，这种解决方案对重量和电池续航时间有什么影响？充电需要多长时间？它能安全使用吗？你是否真的应该买两个，以确保电池没电时你不会被迫停止游戏？事实上，ONG自己也有一些事情需要解决。例如，套件更新的注册表会询问潜在客户认为该产品的价值是多少。目前，我们还没有确定套件的发布日期，但如果您感兴趣，请务必留意。这样就解决了控制器的问题，但耳机本身呢？看看我们本月早些时候在CES上看到的VRPower附加组件。它在Quest的背面增加了一个电池组，延长了使用寿命，同时也起到了平衡作用。您是否有兴趣购买这款OculusQuest控制器充电站？请在下面的评论中告诉我们！
作为英国排名前20的大学之一，萨塞克斯大学开设的本科课程可能对VR的未来至关重要。该校的教学内容涵盖神经科学、认知科学和生物医学科学等领域。我们很可能会看到新一代VR人才从该校走出。但我来这里不是为了谈论这些，我来这里是想谈谈技术。苏塞克斯创新中心坐落在校园一个安静的角落。面部识别公司Emteq所在的大楼里的办公室则更加安静。首席执行官格雷姆·考克斯(GraemeCox)在我身后关上办公室门时告诉我，这个小团队有一种"星期五的感觉"，尽管很难想象迎接我的友好工程师和开发人员会心情不这样。对于一家在VR最重要领域之一工作的公司来说，Emteq营造了一个非常安静的环境。也许这反映了团队对faceteq的信心，faceteq是他们为VR耳机和其他设备构建的情绪跟踪平台。faceteq不使用摄像头来监控和复制你的面部表情，而是使用基于传感器的系统，该系统覆盖耳机接触你脸部的区域。该系统读取电肌肉活动、心率、皮肤反应和其他指标，然后将它们翻译回相关的表情。这是虚拟现实的一个重要领域，尤其是在行业开始转向社交体验的情况下。本月早些时候，Facebook在OculusConnect3上展示了卡通形象，这些形象的脸部动画试图复制用户的情绪和反应。这也是一个处于非常早期阶段的领域；演示一小时后，Oculus首席科学家迈克尔·阿布拉什告诉观众，完美的虚拟人类还有很长的路要走，而情绪跟踪将在其中发挥重要作用。Emteq的工作确实还处于早期阶段；该技术的当前迭代才刚刚一年多，但已显示出很大的前景，而一个改进的版本即将问世。"了解人类背景、情感背景和物理背景以及它们是如何形成的，并拥有能够与人类一起实现这些的虚拟现实系统、增强现实系统和人工智能系统，这真的很重要，"考克斯说。"在虚拟现实中移动，并将情感反应融入其中，这就是我们的使命。"今天，该公司向我展示了一个粗略的演示，包括上手和下手演示。团队正在展示带有OculusRiftDK2的系统，不过，我身后是电气工程师MohsenFatoorechi博士的办公桌，他目前正在组装CV1的原型，很快就会完成。"一旦完成，它就只是一个插件，"考克斯解释道。他还计划推出一款Vive版本，该版本将是一个简单的衬里，可取代套件随附的魔术贴泡沫衬里。该公司还在研究Daydream。我首先看到经过faceteq修改的DK2与一个已根据Fatoorechi的表情进行预校准的虚拟形象配合使用。起初，他坐在一个基本环境中。右侧是一个调试菜单，提供有关传感器读数的实时反馈。左侧是一大组面部表情，用户可以选择进行单独校准。该过程涉及执行特定操作，例如用右眼或左眼眨眼三次，以便系统可以通过机器学习记住反馈。Emteq的RiftCV1集成渲染图每个表情大约需要30秒来校准，但团队正在努力在未来简化这一流程。Fatoorechi使用眨眼来选择菜单上的选项，这一动作省去了使用注视控制时盯着选项的几秒钟时间。在第一次演示中，他坐在一个女人面前，女人的表情与他如出一辙。这不是最精致的展示；每次女人眨眼时，她那张参差不齐的脸看起来都像是在痛苦中，但这不是本次演示的重点。虽然存在缺陷，但系统对Fatoorechi的反应很好，至少据我所知，当他的大部分脸被耳机遮住时是如此。我看到的另外两个演示展示了一些我以前从未想过的面部跟踪的独特用例。一个是电影院放映室。首席科学官查尔斯·恩杜卡让我想象一场好莱坞预演，电影制片厂可能会从传感器收集反馈数据，这是考克斯所说的"客观情感分析"的一个例子，也可以用于研究项目或游戏测试。或者你可以和朋友一起看内容，看看他们的反应。想象一下一起看喜剧大笑，或者一起被惊吓到。另一个演示则更加独特。Emteq创建了自己的Facebook墙，只需查看帖子，你就可以基于自己的表情分配表情符号。Facebook一直在朝着更具体的情绪反应方向发展，而这个系统提供了一种更诚实、更直接的方式来传递这些信息，即使这种方式可能并不总是维持友谊的理想方式。在演示之后，我亲自尝试了这项技术。值得注意的是，我的头发很长，这对这个早期原型造成了一点干扰。我首先校准了右眨眼，这是一个相当顺利和无痛的过程，尽管系统在处理我抬起眉毛的震惊表情时遇到了一点麻烦，我不得不放弃校准张嘴微笑，因为它根本无法识别。再次说明，这是早期的原型技术。首席执行官GraemeCox（左）和首席科学官CharlesNduka（右）。图片来源：BenWright我用校准过的方法对那位女士进行了演示。令人印象深刻的是，她很快就模仿了我的眨眼动作以及眉毛和额头皱纹的位置，以吓唬一些表情。系统记住了我在校准过程中做出某些表情时发出的冲动，然后产生相关的情绪或动作。理想情况下，faceteq可以达到无需校准过程即可识别冲动并即时复制表情的阶段。考克斯指出，该公司的跟踪方法可以捕捉到摄像头跟踪无法识别的微小肌肉运动，但如果你需要校准如此微小的表情，那么你该在哪里停下来？肌肉冲动和反应的变化数量足以打造一个完美的虚拟人吗？希望Emteq能够充分改进流程以避免出现问题，这也是其努力的目标。"这是一个建立在数据基础上的系统，"Nduka说道。"它获得的数据越多，它就越智能。"我期待着在未来几个月看到该系统的改进。该团队还在研究一种使用眼电图的眼球追踪技术，据考克斯称，这不是一种"高精度"解决方案。它不足以实现像注视点渲染这样的基本过程，但能够读取眼睛的大大小小的动作和大致方向。这可能会为现有的技术再添一层引人注目的色彩。但Emteq已开始利用现有资源。该公司的技术正用于治疗面瘫患者的一款应用。faceteq还可以与眼镜配对，在日常场景中为您提供关键信息，例如在您睡眠不足时记录您的疲劳程度。目前，该公司正在筹集种子资金，不过考克斯表示，从研究角度来看，该公司"资金充足"。对于其虚拟现实技术可能的消费者版本，该公司提出了一系列选择，包括前面提到的耳机插件。"我们前面的道路令人兴奋，"考克斯说。"显然还有很多事情要做，但我们已经能够展示一些非常有趣的东西，到明年第一季度，我们将拥有一个可以完全正常工作的系统，可以做一些非常令人惊讶的事情。"
今年早些时候，我们报道了Facebook发布了自己的VR摄像头--360。从今天起，只要你有3万美元的多余资金，你就可以为自己建造这个平台了。正如这家社交网络巨头在4月份的F8开发者大会上承诺的那样，Facebook已经发布了通过GitHub在线制造3D360摄像头的设计规格。根据一篇宣布发布的帖子，该公司已经这样做了，"这样任何人都可以贡献、在其上构建、改进或分发这款相机。"嗯，任何有3万美元可以买相机的人，就是这样。还发布了脸书自己的拼接软件的代码，允许你轻松快速地查看使用新Rig拍摄的内容。The公司也发布了一个方便的视频。这一切都是非常DIY的，但不要搞错了；你需要大量昂贵而具体的设备和一些严肃的技术诀窍才能自己组装其中一台。设计规格还将允许一些人迭代该套件并对其进行改进。如果你想更深入地了解一切是如何运作的，Facebook还发布了一篇关于该项目的令人难以置信的详细博客文章。这款完全组装的产品配备了17个摄像头，空间大小可以避免过热，每只眼睛的分辨率为8K。我们看到了在F8使用该套件拍摄的一些镜头，但尽管令人印象深刻，我们并没有发现它比其他解决方案领先一大截。而且，虽然有一些爱好者可能想要在Facebook的工作基础上再接再厉，但高昂的价格让我们想知道这到底是为谁设计的。当然，希望制作虚拟现实电影的专业人士只会为这项工作购买合适的摄像机？随着谷歌宣布它正在与IMAX等公司合作制造这样的相机，我们正在努力寻找环绕360在VR电影制作领域的位置。
你可能认为谷歌将推出一款全新的基于移动设备的VR头显的传闻将意味着其纸板概念的终结，但你错了。距离今年的谷歌I/O开发者大会只有一周的时间，谷歌已经开始在更多的地区销售官方纸板设备。苹果于2月份开始在美国销售这款设备，但现在已经在英国、加拿大、法国和德国开设了一家官方商店。英国商店提供GB15的基本纸板设计，尽管你也可以在GB25捆绑包中的两个单元上节省GB5。当然，我们多年来一直能够购买第三方制造的设备，如果不是自己制造的，但这给了我们一个官方渠道。基本的纸板设备和VR一样低端，但至关重要的是，它也和它的价格一样便宜。只要你有一部兼容的智能手机，你就只需15GB就能接触到数百款VR应用程序，包括一些重要的项目，比如谷歌自己的YouTubeAndroid应用程序中的VR支持。这无疑表明，谷歌并没有放弃对进入I/O的纸板生态系统的支持，尽管不断有人猜测，这将是该公司全新的头盔显示器。有传言称，这将是一款完全独立的设备，所有计算都在机上完成，不再需要任何智能手机。昨天，EpicGames还泄露了另一个传闻已久的安卓VR概念，所以当I/O于5月18日启动时，你可以期待看到来自该公司的大量VR新闻。即使这些传言是真的，很容易看到一个纸板和这种新设备可以共存的世界。后者可能会提供比Cardboard更高端的体验，或许会吸引一些为GearVR创建内容的开发者转到这个平台上，同时它仍然享受着已经为GoogleCardboard开发的各种应用程序。不过，这完全是我们的猜测；你必须自己观察I/O，并密切关注我们的报道，以找出该公司真正的计划是什么。
VR昨天在谷歌IO上的声明又向前迈进了一大步(抱歉，不得不这样做)。*Jump平台承诺从捕捉到展示，彻底重塑VR内容生产版图。要理解Jump是如何以及为什么这样做的，需要真正弄懂Jump本身。因此，根据截图和发布的规格，我们会尽最大努力。首先，Jump是一个物理平台。这是一个GoPro阵列，就像你可能从360Heroes或其他十几家GoPro持有者公司中的任何一家公司得到的一样。谷歌产品管理副总裁兼VR/AR负责人克莱·巴沃声称，这款钻机使用的是现成的摄像头，演示文稿暗示它与相机无关，但实际上它是一台GoPro钻机。谷歌没有出售它，但他们正在发布CAD图纸，这样任何人都可以制造它们。这是一个渲染，但他们也有照片，所以这不是Vaporware：所有16个摄像头都预装了美国国家安全局软件。是的，他们甚至用硬纸板做了一个(价值8000美元的相机和8美分的硬纸板，就像我的车里的法拉利引擎一样)。但在你开始生产这些东西的公司之前，要知道GoPro也将销售这款Jump系列产品，据说是在今年夏天之前。GoPro在达到公布的交付日期(如果不是猜测的日期)方面一直相当出色，所以这可能是准确的。但如果你想要不同的颜色或不同的材料，你仍然可以自己做。例如，我几乎可以保证，很快就会有六种碳纤维版本可供选择，塑料版本几乎很快就会出现在阿里巴巴上。我只需记住：任何钻机都可能必须以严格的公差建造，因为相机的位置很重要。请看下面的内容，我们将在这里讨论"校准的摄像头阵列"。乍一看，这个钻机比同等的GoPro支架稍大一些。它有16个摄像头，根本没有上下摄像头。根据GoPro4Black的规格，这台钻机横向可以捕捉到360度的全景，但垂直角度只有120度多一点。所以它将在每根杆子周围缺失大约30度，直接在你的头上和你的脚上。(我认为，可能不是什么大问题--但对于现有的一家公司来说，这可能是一个小小的差异化？和毛的《大跃进》一样，谷歌的《大跃进》也会造成一些人员伤亡。)此外，《大跃进》的布置也像一个单声道钻机，每个摄像头都指向不同的方向。大多数3DGoProRig都有两个摄像头指向每个方向，如下所示：来自360Heroes的3DGoProRig。它可以容纳12个GoPros，其中10个是立体声对。所以每只眼睛5个摄像头。通过将两个摄像头指向每个方向，您可以为每只眼睛获得不同的视图，这将为您提供视差和3D效果。你也会看到接缝，因为指向一个方向的"左"摄像头与指向另一个方向的"左"摄像头相差很远。有一个完整的微型行业是围绕着将这种安排留下的接缝(以及Mono360中的较小接缝，尽管这通常更容易处理)建立在一起的。但这是谷歌将其他一切都出类拔萃的地方：他们的钻机是一个3D钻机。但这些摄像头并不是专用的左眼或右眼；每个摄像头都捕捉到了用于两只眼睛的像素。谷歌获得3D效果的方式和贾阿姨一样，使用机器视觉来推断3D位置，然后重新映射这些3D位置，这样就没有Seam。一个也没有。他(理论上)：这是一件大事，因为现在有了1万美元的半专业装备，你就可以制作出完美的3603DVR。太让人吃惊了。(这也不是整个故事-我稍后会讨论限制。)它的工作原理是这样的：因为他们的软件确切地知道每个摄像头相对于另一个摄像头的位置，如果他们能找到两个摄像头之间匹配的像素补丁，他们就可以计算出这个点在现实世界的3D空间中的位置。在使用这些3D数据后，他们可以弯曲和扭曲胶片，为你提供所谓的"立体正交"视角：基本上，每一条垂直胶片都有准确的视差。对于普通的钻机，只有在拍摄镜头的两个镜头之间的主题是这样的，它与主题与镜头轴的夹角的余弦一起下降。(换句话说，你离得越远，通常你的立体深度就越小。)现在，这需要大量的计算，但谷歌可以相当快地做到这一点--可能比现有的现成缝纫机更快--因为它们决定了你如何以及在哪里放置相机。这里有一个交易，深度(再次抱歉)：当你从阵列中的一个相机切换到另一个相机时，视角会稍微移动一点。为了拼接图像(或构建3D模型)，您可以从相邻相机的图像中找到匹配的区域。因此，如果你从相机A的几个像素开始，在相机B的镜头中寻找类似的像素补丁，你实际上知道从哪里开始，从哪个方向开始寻找。与未校准的钻井平台相比，这大大加快了搜索过程。公平地说，现有的拼接软件，如视频拼接软件或Kolor拼接软件(现在已经方便地成为GoPro的一部分)可能会对你的相机装备做出一些相当好的算法假设--但校准后的相机装备的纯数学优势是巨大的。所以，一旦你找到匹配的补丁，并且你知道你必须在源图像中走多远才能找到它们，你就可以计算出该区域到相机阵列的距离。如果物体在无穷远处，它在两张图像中会有一些小距离(它不在图像的同一区域，因为摄像头指向的方向略有不同)。随着拍摄对象靠近相机，这一距离将降至零，然后随着拍摄对象接近钻机，距离开始变大。*图像中的准确距离完全由被摄体的距离决定，因此您可以以惊人的精度计算3D位置。对于左视图中X处的给定点，相应的点必须位于右视图中的一条核线上，由直线er-xr表示。显然，这对查找点对应关系很有帮助：您只需搜索一行，而不是整个图像。(图片无耻地抄袭自维基百科关于极线几何的优秀文章。)完全准确地说，你在第二张图片中沿着核线进行搜索。(由于GoPro镜头扭曲严重，除非在Memory…中重新映射，否则线条实际上是圆弧但那张图表会让我彻底崩溃。)请注意，这背后的超高效算法只有几年的历史；那些对极客感兴趣的人应该考虑阅读《多视几何》，它既涵盖了这里的具体情况，也涵盖了未校准相机钻机的一般情况。在这里可以找到；我只读了前几百页，但每一页我可能都读了十遍。*它很密集，你需要花一些时间来尝试可视化一些东西，比如"无限大的平面"。再加上它很重的线性代数；享受。关于跳跃…之后这一切的更多含义继续第2页…因此，使用3D模型，你甚至可以获得一些环顾四周、跟踪头部的风格。请注意，这只是一点点，使用Jump时，您完全没有关于垂直视差的数据：因此，您可以在钻机边界内左右移动头部，并获得新的透视图，但如果您上下移动，您将开始丢失视差的像素。不过，理论上图像点会正确移动-你确实有适当的3D信息，只是你没有背景像素，当物体随着你的垂直运动视差越过彼此时，你就没有背景像素了。(为画内图像插入像素并不是不可能的，但使用Jump并不一定能做到这一点。(因为我必须挑剔每一项技术，这就是这笔交易的运作方式。)现在，我以前在讨论光场时可能提到过这一点，但机器视觉并不完美。话虽如此，人类的视觉并不完美，但至少我们习惯了它的特质。但这种机器视觉技术的问题是，它要求这些小块像素在不同的相机之间看起来大致相同。对于没有镜面反射的完全无光的曲面，这基本上是正确的。但任何有光泽或微光的东西看起来都不对劲。但坦率地说，演示片段相当静态是有原因的--很多外部世界与机器视觉技术玩得不那么好。我敢打赌，如果摄像机离得更近，那些摩托车看起来会很奇怪，或者至少里面的反射会很奇怪。另一件可能会搞砸算法的事情是高度重复的模式，因为算法可能会找到错误的匹配。(砖墙和链条栅栏是这种技术的祸害，尽管有绕过它的方法。)此外，没有特色的区域很难匹配，玻璃是残酷的。此外，还有一些在图像中显示出来的非物件，比如电话线之间的交叉点：虽然会有两个视图上看起来相似的区域，但它们并不对应于任何物理上的物件。在电话线的情况下，它们看起来相交的地方是你的视角的函数，在3D空间中没有意义，那就是"交叉点"。但有了这项技术，计算机将思考有一场比赛，认为它是看到了世界上的一个物理交叉，而不是两个视角的技巧。压缩伪像也会产生一些相当残酷的高频错误-记住，GoPros会动态压缩到H.264，而且压缩的质量非常不稳定。甚至不要让我开始谈论树叶，或者最糟糕的是：镜头光斑。在镜头中有耀斑，但你不会注意到它们，因为它们是由巨大而柔和的荧光灯引起的，所以耀斑的边缘很柔和，在视图之间很好地融合在一起。然而，像太阳这样的强光不会产生如此良好的照明弹。话说回来，根据谷歌盯着街景画面的所有机器，我认为可以肯定地说，可能没有人比谷歌更擅长解决这些问题了。事实上，演示给出了一些关于他们是如何做到这一点的线索。在一场精彩的表演中，巴沃播放了一张沿着3D场景的轮廓进行算法跟踪的幻灯片：白线勾勒出了推断出的场景的3D形状。这是Jump用来生成正确视差的原始3D模型。这暗示了谷歌可能会采取什么措施来解决我之前提到的许多挑战：当你有一个无法正确匹配的补丁时，看看附近，只需插入来自周围环境的深度数据。如果你得到了完全虚假的东西，比如镜头光斑或电话线上的假匹配，请忽略它，并围绕它进行插补。这样做的结果是"软化"，某种程度上是等高线地图的低传。我相信我们看到的痕迹也准确地代表了算法的输出，因为它真的与场景几何形状不太匹配；边缘周围的线条看起来太平滑了(看看柱子的顶部)，而且所有地方都是连续的，就像一张巨大的橡皮布推过场景的顶部。(如果这听起来非常不准确，请记住，我们通过组合许多深度线索来获得很多深度感知；避免严重错误的立体声视差比准确地获得它更重要…这就是为什么我一直认为，对于狭隘的视场来说，对'立体正交性'的关注有点夸大了，但我跑题了。)如果这实际上是算法的输出，有一个区域特别显示了这种橡皮纸效果：轮廓线太平滑时会表现出奇怪的行为-请注意轮廓线是如何以平滑的渐变从柱子跳到天花板的，以及如何通过左下角中心的压力机看到缺口太多轮廓线。这就好像整个场景是一个连续的曲面。*在视频本身中，这些边缘周围有误差，但也可以看到一些真实的视差，所以可能技术比这些轮廓线所显示的更微妙。尽管如此，还是会有一些文物。事实上，如果你在看的话，演示片段确实有一些相当明显的文物(我一直在看)。如果你专注于堆叠在前景中右中的压力机上的骰子，它们的反射似乎会随着你在横向运动演示中从一边到另一边的移动而加倍和剪切。算法和机器视觉技术无法很好地处理这种镜面反射--部分原因可能是它离相机太近了。但主要是因为每个相机的反射效果都不一样。随着镜头从一边到另一边平移，这些骰子就像缝合不好的接缝一样翻倍和淡入淡出。好的，这是超级微小的，是可以原谅的--我甚至可以听到你说的(另外，这是在一个Lookround演示中)。但请不要这么宽容，因为在被证明不是这样之前，这个系统将受到常见问题的困扰：反射、水、重复图案、半透明、透明度等。一个摩托车商店的演示，尽管它可能令人印象深刻，但并不是对这项技术的终极严峻考验。话虽如此：天哪，它看起来真的很棒，所以我相信Jump很快就会成为VR制作的主要组成部分。至少，这大大提高了GoProVR制作的门槛，一些SVVR小组成员估计，目前正在进行的真人VR制作的80%左右。那么，使用这个钻机会是什么感觉呢？--它相当笨重。但GoPro显然支持它，所以希望触发所有摄像头将非常容易，Bavor说曝光将匹配(想必还有快门和色温，尽管演示中涉及到了使镜头更好匹配的"校准"步骤；希望发货版本不需要这样做)。据推测，我们也得到了'帧同步'。因为Bavor从技术上讲并不是在说话，我不知道帧同步是指半帧内的同步，还是更像是毫秒或微秒的同步，这是你使用专业3D相机系统得到的。我听说有传言说，GoPro3和4的设计方式，它们不可能硬同步到毫秒或微秒级，尽管这是道听途说，可能是完全错误的。(无论如何，GoPro过去已经为3D安装了这个系统，但没有安装英雄3或英雄4…的选项所以这个谣言可能是有一定道理的。)从内容制作人的角度来看，这实际上可能是一个问题；我见过高运动对象或快速移动的相机出现重大拼接和通信错误，而抖动只有0.5毫秒，相机时钟可能只是晶体振荡器，非常容易漂移(我甚至看到过千分之几的漂移，这意味着每20秒左右就会以60fps的速度丢弃一帧)。诚然，你需要的准确性完全取决于你的主题移动的速度，当然，但有点讽刺的是，GoPros可能不是动作镜头的最佳选择。(是的，我刚才真的写了。)同样，GoPro也有一个明显的滚动快门。似乎最大帧速率决定了滚动快门，如果您以给定分辨率设置的最大帧速率或接近最大帧速率拍摄，您可以放心地假设它几乎是100%滚动的。用稍微不那么专业的术语来说，你推相机的力度越大，帧速率越低，你在镜头中得到的果冻就越多。但当最大速度为30fps时-例如，GoProBlack上的4k镜头-这意味着你看到的是大约30毫秒的滚动快门。相机的任何移动都会产生问题，快速移动的被摄体会扭曲。这种扭曲会对谷歌的机器视觉技术产生怎样的影响？目前还不清楚。我相信今年夏天我们会学到更多。当然，由于这个原因和其他原因，系统在较低分辨率、较高帧速率的GoPro设置中可能会运行得更好。他们说，1920×1440在60fps的速度下，会给你一个更快的滚动快门(仍然可能是12毫秒的量级，这不是很好，但也不是很糟糕)。当然，在更高的帧速率下，VR镜头看起来要好得多，所以有另一个理由将分辨率提高到60p。如果听起来我很挑剔，我确实是-这是我使用相机技术的某种方式。坦率地说，我被演示震撼了；不过，你应该亲自看看视频。对我来说，我甚至报名参加了夏季测试版计划，在这里。我可以试一试，只要你在我后面排队。(个人方面，对克莱·巴沃：随时可以把我放在候选名单上。(我只是说说而已)但如何使用呢？坦率地说，这需要大量的摄像头和数据来争论。在我们上一篇关于Jump的文章中，我们计算出该阵列将产生大约430GB/小时的数据。我是这样想的：在GoProBlack上启用Protune后，你可以录制到60Mbit的H.264压缩流。这大约是每台相机每秒7.5兆字节。一个多小时，16个摄像头*3600秒/小时*7.5MB/摄像头-秒加起来相当于…432GB。存储设备很便宜，但看起来这个钻机的成本不会是摄像头，而是硬盘。芯片和处理器。哦，还有microSD卡。记录这16张小指甲大小的卡片可不是一件容易的事。在适当的数字电影布景上，有一个名副其实的角色，名为"数据牧马人"，指的是那些努力备份镜头和拍摄镜头的可怜的笨蛋。一张艺术家的画作，展示了你将在Jump钻机上使用的所有MicroSD卡。巴沃不经意地提到，这些摄像头拍摄的原始图像有五台4k电视那么大。只要我们在做手指计算，我会说这大约是20k，即20480x2160。(顺便说一句，Oculus是对的：你的计算机不够快。)这强烈地表明你以1440的速度拍摄，顺便说一句：将这个分辨率除以16个摄像头，结果正好是1920x1440。(这可能是对的，但巧合的可能性比看起来更大，因为所有分辨率都是HD分辨率的小数倍，它们往往会相当平均地分配…目前还没有关于输出文件有多大的消息，但在这一点上，我怀疑它大致相当于现有的VR，或者更高一点：称之为4k左右，大部分捕获分辨率是计算机可以咀嚼的冗余像素。有多多余？好吧，如果我们把GoPros排成一排，它们的图像不会重叠，它们将覆盖1510度(94.4度VFOVx16个摄像头)。由于我们只需要覆盖360度，这是一个超过4：1的覆盖比例。换句话说，大多数图像点实际上被两个以上的摄像头看到，这是机器视觉技术的充足素材，如果两个摄像头一致，第三个(或第四个)摄像头有成像伪像，可能会出现耀斑拒绝之类的事情。再说一次，这是假设我们的分辨率设置是正确的，但数字确实是累加的。当然，如果我们以1920x1440的速度拍摄，我们实际上不会非常有2160个垂直像素-记住相机是横向的，但即使我们比这些投影少了大约240个像素。当然，摄像头无论如何都不能覆盖180度垂直，所以垂直像素/度几乎就是2160p视频拉伸到180…时的水平Aaaa，我们正式对一份尚未发布的规范进行了细枝末节，这份规范是基于主旨演讲中的一句一次性台词。所以，除非你已经在做高端VR，或者拍摄数字IMAX，或者使用大幅面打印，否则你可能不太熟悉那么高的分辨率。而且，尽管听起来很尖刻，但老实说，我只能假设大多数谷歌纸板用户完全浪费了分辨率，除非这些耳机升级是实质性的。因此，要么这是面向未来的(有可能；早在任何人观看之前，YouTube就已经启用了4k上传)，要么谷歌计划让YouTube成为市场上每一款耳机上视频的首选目的地。换句话说，谷歌刚刚宣布自己是VR内容空间的主要参与者。虽然真人虚拟现实的前景仍然相当不确定，但谷歌已经提出了相当大的要求。
我闭上眼睛，戴上耳机，轻轻呼出一口气来平息我的兴奋。我有过这样的经历，刻意避免阅读任何评论。我希望我的体验是处女的，完全没有肤色，所以我不确定我将被介绍给什么。我知道最基本的。我知道我将能够四处走动，我从许多人那里知道位置跟踪是他们遇到过的最好的，我知道它会很棒。但尽管如此，我还是试着降低了我的期望，以免过度夸大自己的…然后我睁开眼睛，所有的一切都从窗户里消失了。在我体验真正开始之前，一切就开始变得清晰起来。戴着头显，我环顾着一个白色的房间，地板上有网格。我周围一片空白，这是体验的等候室，也是我第一次接触控制器的地方。"来，拿这个，"我的演示者说，我甚至没有多想就伸出手去抓住了面前的控制器。当我的手触摸到控制器时，它打到了我，我刚刚伸出手抓住了虚拟空间中的一个有形物体。Sixense在过去的许多演示中都做过类似的事情，从你面前抓取虚拟光剑，并抓住虚拟控制器，但对于这些，我有意识地意识到，我实际上是在抓取控制器的虚拟表示。但这次不同，这次完全是自然的。控制器在数字空间中呈现，但感觉跟踪得如此完美，以至于我的潜意识无法察觉，而是接管了抓取设备的程序。我只花了几秒钟来消化这件事，然后我就进入了一个全新的世界。看看Vive控制器的原型白色虚无逐渐褪为黑色，然后又回到水下场景。环顾四周，我站在一艘沉船的船头，深海之下。成群的小鱼在我周围游来游去，仔细一看，我可以看到我面前控制器的模糊影子，我可以用它来轻轻地把鱼赶走。视野清晰后，我准备改变我看待虚拟现实的方式。当我抬起脚时，尼尔·阿姆斯特朗的话在我脑海中回荡，"这是人类的一小步"，我站了起来向下，"这是人类的一大步。"当我走到船头边缘时，动作感觉流畅而准确。在到达那个点之前，我至少迈出了四步（我的步幅很大，6英尺1英寸），在穿过空间时，我感觉动作以一比一的精确度进行转换，单是那个动作就令人难以置信地"身临其境"。Vive的第一个激光追踪原型。到了船头的边缘，我能够上下凝视下面的无限深渊。我试着再往前走一步，一个白色的网格出现在我面前。"这是为了让你知道墙在哪里，"演示者插话道，"必须有某种方法来防止你直接撞到它。"这个解决方案很好，但这也是我第一次被从现场移走。这个限制我将在后面讨论，但它并没有对我的体验产生太大的负面影响。我转过身，"好的，我希望你不介意，但我告诉我的朋友我要试一试，"我说，看着我认为示范跑步者在哪里的大致方向。我跌倒在地，腹部着地，完全沉浸在令人难以置信的水下世界中，然后我做了一件在任何其他VR体验…中都无法完成的事情我的军队在地上爬行，感觉就像我在虚拟现实中经历过的任何事情一样真实。完美、自然的动作和输入，这就是Vive带来的东西。WEVR的"TheBlu:TheEncounter"中的一幕演示者笑了起来，他希望自己刚刚拿到了镜头。我告诉他我要试着打破跟踪，他祝我好运。我试着快速冲刺(小心翼翼地，不想直接撞到墙上)，试着慢滚(更担心的是把电线从电脑上拉出来)，我试着把头发往后甩，但我做的任何事情都没有打破跟踪。完全满意后，我又回到了体验中，及时向左转，看到一头巨大的蓝鲸朝我走来。当野兽靠近我时，它的鳞片令人惊叹，让我往后退了一点。当它走近时，我感觉自己被吸引了，被这个生物迷住了。鲸鱼依偎在船旁，它巨大的黑眼睛低头盯着我。我走到它跟前，尽可能地靠近它，深深地凝视着反光的表面，唯一缺少的是我的倒影在凝视着我。在这头鲸鱼身上有一种我认为我以前从未经历过的生命气息，这要归功于WeVR的奇妙叙事方向，我被展示的演示背后的公司theBlu：TheMeet。除了演示的最后时刻的剧透，我想简单地回顾一下盒子的主题。一位智者曾经说过，如果你给创意人士一个可以玩的盒子，他们会找到一条出路。目前，这些创意人士仍在寻找理想的解决方案来实现这一目标。正如我之前提到的，在演示过程中，我唯一的真实存在被打破的时刻是当我看到我周围的网格化的墙壁时。显然，需要一些东西来防止玩家在允许他们在空间中无限行走的同时撞到墙壁，虽然还没有找到确切的解决方案，但Valve的开发人员和他们的合作伙伴正在试验像心灵传送和旋转这样的东西，这将允许玩家在无限的空间中继续移动。但这两种解决方案都需要某种形式的输入，以阻止玩家在空间中自然移动，这正是Vive如此引人注目的原因。然而，一个近乎完美的解决方案可能已经存在。缩小版Lighthouse设备的原型，以及消费者版本的预览。2013年，一组来自维也纳和美国的研究人员开发了一种允许在VR中无限行走的技术解决方案。他们的解决方案使用的是所谓的"程序布局生成"，即环境是精心设计的，以适应他们所处的空间，不断地引导一个人自然地穿过环境(假设你没有试图剪断墙壁)。它本质上是在引导你绕着一个无限的圆圈转。这在VIVE系统中是有可能实现的，但一个系统必须扩展到另一个系统。
VR52网成立于2015年，平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。
