厌倦了在VR中无休止地更换电池?这款OculusQuest控制器充电站或许能帮到你。ONGInnovations上周末发布了这款新产品。目前,每个Quest控制器都使用一节AA电池,您经常会发现电池在游戏过程中耗尽。但这款OculusQuest控制器充电站用自己的可充电解决方案取代了可更换电池,并配有定制的电池面板。当您不在VR中时,只需将Touch控制器放在矩形块上,每个控制器的跟踪环和磁铁有助于保持平衡。控制器插入充电端口,以确保它们已准备好进行下一次游戏。ONG独特的面板有空间供充电器连接。从理论上讲,这个概念是可行的,但关于这款OculusQuest控制器充电站,还有很多问题需要回答。例如,这种解决方案对重量和电池续航时间有什么影响?充电需要多长时间?它能安全使用吗?你是否真的应该买两个,以确保电池没电时你不会被迫停止游戏?事实上,ONG自己也有一些事情需要解决。例如,套件更新的注册表会询问潜在客户认为该产品的价值是多少。目前,我们还没有确定套件的发布日期,但如果您感兴趣,请务必留意。这样就解决了控制器的问题,但耳机本身呢?看看我们本月早些时候在CES上看到的VRPower附加组件。它在Quest的背面增加了一个电池组,延长了使用寿命,同时也起到了平衡作用。您是否有兴趣购买这款OculusQuest控制器充电站?请在下面的评论中告诉我们!
随着虚拟现实(VR)技术的发展,各大厂商不断推出新产品以争夺市场。近期发布的MetaQuest3S便是其中一款备受瞩目的产品,定位为入门级用户设计的低价VR头显。然而,在实际使用中,这款设备却似乎在关键特性上做出了不当妥协,可能影响其长期市场表现。从设计理念上看,Quest3S旨在通过提供尽可能高质量的体验并保持较低的价格点来吸引广泛的用户群体。为了达成这一目标,Meta在某些方面选择了成本控制,但这些选择或许并不明智。例如,许多用户报告称,视野中的模糊区域严重影响了沉浸感和使用舒适度。菲涅尔透镜的问题是VR行业长久以来的一个痛点,这种类型的透镜虽然降低了制造成本,但也导致图像边缘出现模糊现象。除非VR头显能够完美贴合用户的头部--而这在现实中很少见--否则用户很快就会发现视野超出最佳视角区,进而造成视觉疲劳、加速疲劳甚至引发头痛。Quest3S仅提供了三个调整眼距的档位,对于很多用户来说难以找到理想的视觉清晰度,这无疑影响了整体用户体验。尽管如此,Quest3S并非全无亮点。它在性能方面有显著提升,并且拥有扩展的应用商店,搭载了更强大的SnapdragonXR2Gen2处理器,使得开发者可以创建出更加复杂和精美的内容。比如,《蝙蝠侠:阿卡姆阴影》这样的游戏就展示了该平台的潜力。然而,即使拥有再优秀的图形表现,如果必须透过模糊的镜头观看,那么用户的体验必然会大打折扣。初次接触VR世界的人们可能会被三维环境所带来的震撼所吸引,但一旦他们意识到画面质量上的局限性,新鲜感很快便会消退。对于初学者而言,移动VR头显应该首先确保清晰稳定的视觉效果,这是最基本的要求。此外,Quest3S以300美元的价格发售,并通过促销活动进一步降低至约200美元,这个价位确实颇具吸引力。考虑到当前市场上其他选择,这样亲民的价格加上免费软件包对潜在买家有着不小的诱惑力。不过,如果因为图像质量问题导致用户流失,或是未能充分重视晕动症等健康问题,那么即便初期销售成绩良好,也可能无法维持长久的用户忠诚度。使用Quest3S,你可以玩《蝙蝠侠:阿卡姆暗影》。但如果你的视线一直模糊,那还能玩多久呢?|图片:Camouflaj/Meta综上所述,尽管MetaQuest3S在价格和性能上有一定的竞争力,但在关键的用户体验上所做的妥协可能会影响其长远发展。对于追求高品质VR体验的消费者来说,可能需要考虑是否值得为了节省开支而牺牲重要的视觉清晰度。而对于有能力负担更高预算的用户,则建议等待或者直接选择配置更为优越的产品如MetaQuest3,以获得更加满意的长期使用体验。
中国公司PlayforDream发布了一款Kickstarter,将其即将推出的骁龙XR2+Gen2耳机带到包括美国在内的欧美国家。PlayforDreamMR早在6月份就宣布了,但当时该公司才证实将很快在中国推出,10月份在新加坡和马来西亚推出,然后在2025年的某个时候在泰国、印度尼西亚、越南和日本推出。现在,该公司计划通过Kickstarter将这款耳机带到世界上的任何地方。PlayforDream的前身是YVR,在中国是一家知名老牌的VR头显公司。活动目标设定在5000美元左右,并对这款耳机提供大幅折扣,这表明Kickstarter并没有被用来资助耳机的开发,而是作为一种营销和销售渠道。活动显示,512GB型号的耳机零售价为2000美元,1TB型号的零售价为2300美元。但该公司根据投资者的返还时间向他们提供大幅折扣,使这款耳机的价格低至1200美元。我们应该注意到,Kickstarter承诺的不是预购,从技术上讲,该公司没有义务向你提供product.PlayforDream声称首批全球设备将于12月开始发货。所有耳机应在2025年的头几周内发货。PlayForDreamMR规格和详细信息节PlayforDreamMR的设计显然受到了AppleVisionPro的严重"启发"。但与我们1月份在CES上尝试的廉价中国仿冒品不同,这款新头盔的规格(尽管可能没有软件)确实可以与苹果竞争。XR2+Gen2芯片组是高通迄今功能最强大的XR芯片,它配备了16GB的LPDDR5X内存和512GB或1TB的UFS3.1存储空间,具体取决于你购买的型号。这款耳机采用京东方的双3840×3552微OLED显示屏,分辨率高于VisionPro的索尼面板,刷新率为90赫兹,92%的DCI-P3色域,与VisionPro相同。其煎饼镜头提供103°的视场,耳机具有眼睛跟踪功能,可自动调整IPD和凹痕渲染。除了眼动追踪之外,该头戴式设备还具有高分辨率彩色直通功能(声称延迟为14毫秒)、深度传感器、手部追踪以及类似TouchPlus的无环追踪控制器。这款耳机的总重量与AppleVisionPro完全相同,为650克,但重量的分布却大不相同。弯曲的电池内置在表带背面,与MetaQuestPro的做法类似。PlayForDreamMR声称,遮阳板本身(不带任何带子或面罩)的重量仅为288克。相比之下,VisionPro的重量为478克。带子后部的电池可以为耳机供电1个多小时,附带的外接电池可以为耳机供电2.5小时,总共可使用3.5小时。总而言之,PlayForDreamMR的规格和设计与据报道已取消的2024QuestPro2所预期的一样。据报道,Meta最近甚至取消了其2027QuestPro2,转而采用带有系留计算球的超轻耳机。PlayForDreamMR不运行HorizonOS,甚至不运行PicoOS或谷歌即将推出的AndroidXR。它运行PlayForDream自己的基于Android的平台,还支持通过家庭Wi-Fi网络进行SteamVR流媒体播放(类似于Quest上的虚拟桌面、SteamLink和AirLink)。
Pico4Ultra将于9月20日开始面向中国以外的客户发售,并于周五开放预订。它将成为MetaQuest3的首个直接竞争对手。字节跳动今天证实,尽管该耳机之前注册的商标是"Pico4S",但该耳机在所有地区都被称为Pico4Ultra。此次更名可能是对Meta计划推出Quest3S(Quest3的低端版本)的反应,而Pico4Ultra则是Pico4的彻底升级版。如果您还没有看到这个消息,两周前字节跳动在其本土中国正式宣布并开放了Pico4Ultra的预订,首批产品已于本周抵达中国客户手中。Pico4Ultra任务3Pico4启动202420232022视野105°×105°110°×96°105°×105°护眼调整❌✅❌每眼像素2160×21602064×22082160×2160最大刷新率90赫兹120赫兹90赫兹芯片组骁龙XR2第二代(4Nm)骁龙XR2第二代(4Nm)骁龙XR2第一代(7Nm)内存12GB8GB8GB直通双目(20.6PPD)双目(18PPD)单目深度传感✅✅❌表带类型半刚性塑料(不可更换)薄布料(可更换)半刚性塑料(不可更换)电池位置后填充Visor后填充电池大小21.9Wh18.9Wh20.4Wh充电速度45W27w20WWi-Fi76E6空间视频捕获✅❌❌价格与仓储600欧元(256GB)550欧元(128GB)700欧元(512GB)430欧元(128GB)500欧元(256GB)PicoOS-新功能和改进软件方面,PicoOS将会进行重大更新,以提升其作为通用计算平台的能力并整合其他设备。沉浸式应用的默认渲染分辨率已从原来的Pico4上的1500×1500左右提高到1920×1920。Pico正在推出一款设备端视频编辑应用,支持编辑3D空间视频并将其发布到TikTok。PicoOS很快将允许您在自己周围的360°气泡中放置最多20个窗口。这些窗口可以是浏览器窗口、系统面板或Android应用。Pico声称,您还可以将PC、Mac、iOS或Android设备无线镜像到PicoOS中的虚拟窗口。无线智能手机镜像是一项重大声明,因为Meta已向Apple申请许可,同时采用需要采集卡的有线方法。字节跳动将于周五在英国、德国、法国、意大利、西班牙、荷兰、比利时、奥地利、瑞士、挪威、丹麦、瑞典、芬兰、日本、韩国、新加坡、马来西亚和泰国开放预订。Pico4Ultra在英国的售价为530英镑,在欧洲的售价为600欧元,配备256GB存储空间,这意味着它比128GBQuest3型号贵50英镑/50欧元,但比512GBQuest3便宜100英镑/100欧元。预订可获赠免费的用于腿部追踪的PicoMotionTrackers,正常售价80英镑/90欧元,以及Blade&Sorcery:Nomad、InfiniteInside、Let'sGetFitVR和FootPool,总价值40英镑/50欧元。值得注意的是,与前代产品一样,字节跳动没有计划在北美推出Pico4Ultra,这意味着它不会在本土与Meta展开竞争。
由于最近的全球经济变化和"挑战"外部影响,PlayStationVR2在日本的价格上涨了100美元。索尼互动娱乐公司将于2024年9月2日在日本上调PS5游戏机、PlayStationVR2耳机和各种附件的价格。Sie在日本PlayStation的一篇博客文章中表示:"我们是基于最近全球经济变化和外部影响对我们业务的挑战做出这一决定的。"标准PS5游戏机的零售价现在将从66,980元(463美元)到79,980元(553美元),而PS5数字游戏机的价格将从59,980元(415美元)上涨到72,980元(504美元)。至于PlayStationVR2耳机,售价将从74,980元(518美元)涨至89,980元(622美元),而MountainPSVR2耳机捆绑包的HorizonCall将涨至94,980元(656美元)。Sense控制器充电站和PlayStationVR2PC适配器都不受影响,我们推测后者是由于最近推出的配件。其他地区的价格也没有上涨的迹象,尽管值得记住的是,索尼曾在2022年以高通货膨胀率为由,在北美、亚洲、澳大利亚和欧洲上调了PS5游戏机的价格。今天的新闻还发生在PlayStationVR2销量在一个月前大幅降价200美元后飙升的消息之后,TheShortCut表示,零售商数据显示PSVR2耳机的销量增长了2350%。据报道,这意味着在一天内售出的单位比以前同期全年的销售量还要多。
一位VR开发人员找到了一种访问Quest3透视摄像头的更低阻力方法。Meta并未正式允许第三方开发者访问Quest头戴式设备的摄像头,但本周早些时候,我们报道了手部追踪健身应用XRWorkout的联合创始人兼首席开发者MichaelGschwandtner提出的一种巧妙的解决方法。Gschwandtner的技术是让你使用Quest的投射功能投射到他应用内的WebView上,该应用会加载oculus.com/castingURL。但这需要你费力地登录到这个WebView中的Meta帐户,并且需要用户通过投射来采取行动。另一位VR开发人员JulianTriveri现在已经找到了一种不涉及WebView或投射的技术,因此不需要登录或启动系统操作。Triveri意识到,Android媒体投影API可在Quest头戴设备上使用,该API旨在支持自定义录制或投射设置的屏幕捕获。在Quest上,它返回中央82度视野的1024×1024帧,略低于投射时获得的结果,但仍可用于运行自定义计算机视觉模型。该API需要用户授予的权限,但此后应用程序现在可以完全访问用户所看到的内容。Triveri在GitHub上发布了该技术的开源演示,UploadVR已确认该技术可按描述运行。他甚至还添加了一个分支,展示了该技术如何用于驱动AprilTag跟踪(一种基准标记)。这种方法的一个有趣的限制是,它不能在头戴式耳机上录制或投射时使用,因此Triveri必须使用PC来录制镜头。与Gschwandtner的早期技术一样,另一个限制是捕获的视图包括虚拟对象和界面,而不仅仅是摄像头视图,这可能会干扰计算机视觉任务。接下来会发生什么?有了Triveri的发现,现在任何Quest应用都可以以最小的阻力访问摄像头。Meta会允许这种方法传播吗?或者该公司是否会在其HorizonOS的未来版本中对其进行修补以进行打击?上个月,Meta首席技术官博斯沃思在接受采访时表达了他对有意让Quest开发人员访问直通相机的想法的看法,并表示Meta将"继续关注"这个问题。相比之下,对于VisionPro耳机,Apple仅向企业公司提供原始访问权限,并且仅适用于非公开的内部应用程序。
VR昨天在谷歌IO上的声明又向前迈进了一大步(抱歉,不得不这样做)。*Jump平台承诺从捕捉到展示,彻底重塑VR内容生产版图。要理解Jump是如何以及为什么这样做的,需要真正弄懂Jump本身。因此,根据截图和发布的规格,我们会尽最大努力。首先,Jump是一个物理平台。这是一个GoPro阵列,就像你可能从360Heroes或其他十几家GoPro持有者公司中的任何一家公司得到的一样。谷歌产品管理副总裁兼VR/AR负责人克莱·巴沃声称,这款钻机使用的是现成的摄像头,演示文稿暗示它与相机无关,但实际上它是一台GoPro钻机。谷歌没有出售它,但他们正在发布CAD图纸,这样任何人都可以制造它们。这是一个渲染,但他们也有照片,所以这不是Vaporware:所有16个摄像头都预装了美国国家安全局软件。是的,他们甚至用硬纸板做了一个(价值8000美元的相机和8美分的硬纸板,就像我的车里的法拉利引擎一样)。但在你开始生产这些东西的公司之前,要知道GoPro也将销售这款Jump系列产品,据说是在今年夏天之前。GoPro在达到公布的交付日期(如果不是猜测的日期)方面一直相当出色,所以这可能是准确的。但如果你想要不同的颜色或不同的材料,你仍然可以自己做。例如,我几乎可以保证,很快就会有六种碳纤维版本可供选择,塑料版本几乎很快就会出现在阿里巴巴上。我只需记住:任何钻机都可能必须以严格的公差建造,因为相机的位置很重要。请看下面的内容,我们将在这里讨论"校准的摄像头阵列"。乍一看,这个钻机比同等的GoPro支架稍大一些。它有16个摄像头,根本没有上下摄像头。根据GoPro4Black的规格,这台钻机横向可以捕捉到360度的全景,但垂直角度只有120度多一点。所以它将在每根杆子周围缺失大约30度,直接在你的头上和你的脚上。(我认为,可能不是什么大问题--但对于现有的一家公司来说,这可能是一个小小的差异化?和毛的《大跃进》一样,谷歌的《大跃进》也会造成一些人员伤亡。)此外,《大跃进》的布置也像一个单声道钻机,每个摄像头都指向不同的方向。大多数3DGoProRig都有两个摄像头指向每个方向,如下所示:来自360Heroes的3DGoProRig。它可以容纳12个GoPros,其中10个是立体声对。所以每只眼睛5个摄像头。通过将两个摄像头指向每个方向,您可以为每只眼睛获得不同的视图,这将为您提供视差和3D效果。你也会看到接缝,因为指向一个方向的"左"摄像头与指向另一个方向的"左"摄像头相差很远。有一个完整的微型行业是围绕着将这种安排留下的接缝(以及Mono360中的较小接缝,尽管这通常更容易处理)建立在一起的。但这是谷歌将其他一切都出类拔萃的地方:他们的钻机是一个3D钻机。但这些摄像头并不是专用的左眼或右眼;每个摄像头都捕捉到了用于两只眼睛的像素。谷歌获得3D效果的方式和贾阿姨一样,使用机器视觉来推断3D位置,然后重新映射这些3D位置,这样就没有Seam。一个也没有。他(理论上):这是一件大事,因为现在有了1万美元的半专业装备,你就可以制作出完美的3603DVR。太让人吃惊了。(这也不是整个故事-我稍后会讨论限制。)它的工作原理是这样的:因为他们的软件确切地知道每个摄像头相对于另一个摄像头的位置,如果他们能找到两个摄像头之间匹配的像素补丁,他们就可以计算出这个点在现实世界的3D空间中的位置。在使用这些3D数据后,他们可以弯曲和扭曲胶片,为你提供所谓的"立体正交"视角:基本上,每一条垂直胶片都有准确的视差。对于普通的钻机,只有在拍摄镜头的两个镜头之间的主题是这样的,它与主题与镜头轴的夹角的余弦一起下降。(换句话说,你离得越远,通常你的立体深度就越小。)现在,这需要大量的计算,但谷歌可以相当快地做到这一点--可能比现有的现成缝纫机更快--因为它们决定了你如何以及在哪里放置相机。这里有一个交易,深度(再次抱歉):当你从阵列中的一个相机切换到另一个相机时,视角会稍微移动一点。为了拼接图像(或构建3D模型),您可以从相邻相机的图像中找到匹配的区域。因此,如果你从相机A的几个像素开始,在相机B的镜头中寻找类似的像素补丁,你实际上知道从哪里开始,从哪个方向开始寻找。与未校准的钻井平台相比,这大大加快了搜索过程。公平地说,现有的拼接软件,如视频拼接软件或Kolor拼接软件(现在已经方便地成为GoPro的一部分)可能会对你的相机装备做出一些相当好的算法假设--但校准后的相机装备的纯数学优势是巨大的。所以,一旦你找到匹配的补丁,并且你知道你必须在源图像中走多远才能找到它们,你就可以计算出该区域到相机阵列的距离。如果物体在无穷远处,它在两张图像中会有一些小距离(它不在图像的同一区域,因为摄像头指向的方向略有不同)。随着拍摄对象靠近相机,这一距离将降至零,然后随着拍摄对象接近钻机,距离开始变大。*图像中的准确距离完全由被摄体的距离决定,因此您可以以惊人的精度计算3D位置。对于左视图中X处的给定点,相应的点必须位于右视图中的一条核线上,由直线er-xr表示。显然,这对查找点对应关系很有帮助:您只需搜索一行,而不是整个图像。(图片无耻地抄袭自维基百科关于极线几何的优秀文章。)完全准确地说,你在第二张图片中沿着核线进行搜索。(由于GoPro镜头扭曲严重,除非在Memory…中重新映射,否则线条实际上是圆弧但那张图表会让我彻底崩溃。)请注意,这背后的超高效算法只有几年的历史;那些对极客感兴趣的人应该考虑阅读《多视几何》,它既涵盖了这里的具体情况,也涵盖了未校准相机钻机的一般情况。在这里可以找到;我只读了前几百页,但每一页我可能都读了十遍。*它很密集,你需要花一些时间来尝试可视化一些东西,比如"无限大的平面"。再加上它很重的线性代数;享受。关于跳跃…之后这一切的更多含义继续第2页…因此,使用3D模型,你甚至可以获得一些环顾四周、跟踪头部的风格。请注意,这只是一点点,使用Jump时,您完全没有关于垂直视差的数据:因此,您可以在钻机边界内左右移动头部,并获得新的透视图,但如果您上下移动,您将开始丢失视差的像素。不过,理论上图像点会正确移动-你确实有适当的3D信息,只是你没有背景像素,当物体随着你的垂直运动视差越过彼此时,你就没有背景像素了。(为画内图像插入像素并不是不可能的,但使用Jump并不一定能做到这一点。(因为我必须挑剔每一项技术,这就是这笔交易的运作方式。)现在,我以前在讨论光场时可能提到过这一点,但机器视觉并不完美。话虽如此,人类的视觉并不完美,但至少我们习惯了它的特质。但这种机器视觉技术的问题是,它要求这些小块像素在不同的相机之间看起来大致相同。对于没有镜面反射的完全无光的曲面,这基本上是正确的。但任何有光泽或微光的东西看起来都不对劲。但坦率地说,演示片段相当静态是有原因的--很多外部世界与机器视觉技术玩得不那么好。我敢打赌,如果摄像机离得更近,那些摩托车看起来会很奇怪,或者至少里面的反射会很奇怪。另一件可能会搞砸算法的事情是高度重复的模式,因为算法可能会找到错误的匹配。(砖墙和链条栅栏是这种技术的祸害,尽管有绕过它的方法。)此外,没有特色的区域很难匹配,玻璃是残酷的。此外,还有一些在图像中显示出来的非物件,比如电话线之间的交叉点:虽然会有两个视图上看起来相似的区域,但它们并不对应于任何物理上的物件。在电话线的情况下,它们看起来相交的地方是你的视角的函数,在3D空间中没有意义,那就是"交叉点"。但有了这项技术,计算机将思考有一场比赛,认为它是看到了世界上的一个物理交叉,而不是两个视角的技巧。压缩伪像也会产生一些相当残酷的高频错误-记住,GoPros会动态压缩到H.264,而且压缩的质量非常不稳定。甚至不要让我开始谈论树叶,或者最糟糕的是:镜头光斑。在镜头中有耀斑,但你不会注意到它们,因为它们是由巨大而柔和的荧光灯引起的,所以耀斑的边缘很柔和,在视图之间很好地融合在一起。然而,像太阳这样的强光不会产生如此良好的照明弹。话说回来,根据谷歌盯着街景画面的所有机器,我认为可以肯定地说,可能没有人比谷歌更擅长解决这些问题了。事实上,演示给出了一些关于他们是如何做到这一点的线索。在一场精彩的表演中,巴沃播放了一张沿着3D场景的轮廓进行算法跟踪的幻灯片:白线勾勒出了推断出的场景的3D形状。这是Jump用来生成正确视差的原始3D模型。这暗示了谷歌可能会采取什么措施来解决我之前提到的许多挑战:当你有一个无法正确匹配的补丁时,看看附近,只需插入来自周围环境的深度数据。如果你得到了完全虚假的东西,比如镜头光斑或电话线上的假匹配,请忽略它,并围绕它进行插补。这样做的结果是"软化",某种程度上是等高线地图的低传。我相信我们看到的痕迹也准确地代表了算法的输出,因为它真的与场景几何形状不太匹配;边缘周围的线条看起来太平滑了(看看柱子的顶部),而且所有地方都是连续的,就像一张巨大的橡皮布推过场景的顶部。(如果这听起来非常不准确,请记住,我们通过组合许多深度线索来获得很多深度感知;避免严重错误的立体声视差比准确地获得它更重要…这就是为什么我一直认为,对于狭隘的视场来说,对'立体正交性'的关注有点夸大了,但我跑题了。)如果这实际上是算法的输出,有一个区域特别显示了这种橡皮纸效果:轮廓线太平滑时会表现出奇怪的行为-请注意轮廓线是如何以平滑的渐变从柱子跳到天花板的,以及如何通过左下角中心的压力机看到缺口太多轮廓线。这就好像整个场景是一个连续的曲面。*在视频本身中,这些边缘周围有误差,但也可以看到一些真实的视差,所以可能技术比这些轮廓线所显示的更微妙。尽管如此,还是会有一些文物。事实上,如果你在看的话,演示片段确实有一些相当明显的文物(我一直在看)。如果你专注于堆叠在前景中右中的压力机上的骰子,它们的反射似乎会随着你在横向运动演示中从一边到另一边的移动而加倍和剪切。算法和机器视觉技术无法很好地处理这种镜面反射--部分原因可能是它离相机太近了。但主要是因为每个相机的反射效果都不一样。随着镜头从一边到另一边平移,这些骰子就像缝合不好的接缝一样翻倍和淡入淡出。好的,这是超级微小的,是可以原谅的--我甚至可以听到你说的(另外,这是在一个Lookround演示中)。但请不要这么宽容,因为在被证明不是这样之前,这个系统将受到常见问题的困扰:反射、水、重复图案、半透明、透明度等。一个摩托车商店的演示,尽管它可能令人印象深刻,但并不是对这项技术的终极严峻考验。话虽如此:天哪,它看起来真的很棒,所以我相信Jump很快就会成为VR制作的主要组成部分。至少,这大大提高了GoProVR制作的门槛,一些SVVR小组成员估计,目前正在进行的真人VR制作的80%左右。那么,使用这个钻机会是什么感觉呢?--它相当笨重。但GoPro显然支持它,所以希望触发所有摄像头将非常容易,Bavor说曝光将匹配(想必还有快门和色温,尽管演示中涉及到了使镜头更好匹配的"校准"步骤;希望发货版本不需要这样做)。据推测,我们也得到了'帧同步'。因为Bavor从技术上讲并不是在说话,我不知道帧同步是指半帧内的同步,还是更像是毫秒或微秒的同步,这是你使用专业3D相机系统得到的。我听说有传言说,GoPro3和4的设计方式,它们不可能硬同步到毫秒或微秒级,尽管这是道听途说,可能是完全错误的。(无论如何,GoPro过去已经为3D安装了这个系统,但没有安装英雄3或英雄4…的选项所以这个谣言可能是有一定道理的。)从内容制作人的角度来看,这实际上可能是一个问题;我见过高运动对象或快速移动的相机出现重大拼接和通信错误,而抖动只有0.5毫秒,相机时钟可能只是晶体振荡器,非常容易漂移(我甚至看到过千分之几的漂移,这意味着每20秒左右就会以60fps的速度丢弃一帧)。诚然,你需要的准确性完全取决于你的主题移动的速度,当然,但有点讽刺的是,GoPros可能不是动作镜头的最佳选择。(是的,我刚才真的写了。)同样,GoPro也有一个明显的滚动快门。似乎最大帧速率决定了滚动快门,如果您以给定分辨率设置的最大帧速率或接近最大帧速率拍摄,您可以放心地假设它几乎是100%滚动的。用稍微不那么专业的术语来说,你推相机的力度越大,帧速率越低,你在镜头中得到的果冻就越多。但当最大速度为30fps时-例如,GoProBlack上的4k镜头-这意味着你看到的是大约30毫秒的滚动快门。相机的任何移动都会产生问题,快速移动的被摄体会扭曲。这种扭曲会对谷歌的机器视觉技术产生怎样的影响?目前还不清楚。我相信今年夏天我们会学到更多。当然,由于这个原因和其他原因,系统在较低分辨率、较高帧速率的GoPro设置中可能会运行得更好。他们说,1920×1440在60fps的速度下,会给你一个更快的滚动快门(仍然可能是12毫秒的量级,这不是很好,但也不是很糟糕)。当然,在更高的帧速率下,VR镜头看起来要好得多,所以有另一个理由将分辨率提高到60p。如果听起来我很挑剔,我确实是-这是我使用相机技术的某种方式。坦率地说,我被演示震撼了;不过,你应该亲自看看视频。对我来说,我甚至报名参加了夏季测试版计划,在这里。我可以试一试,只要你在我后面排队。(个人方面,对克莱·巴沃:随时可以把我放在候选名单上。(我只是说说而已)但如何使用呢?坦率地说,这需要大量的摄像头和数据来争论。在我们上一篇关于Jump的文章中,我们计算出该阵列将产生大约430GB/小时的数据。我是这样想的:在GoProBlack上启用Protune后,你可以录制到60Mbit的H.264压缩流。这大约是每台相机每秒7.5兆字节。一个多小时,16个摄像头*3600秒/小时*7.5MB/摄像头-秒加起来相当于…432GB。存储设备很便宜,但看起来这个钻机的成本不会是摄像头,而是硬盘。芯片和处理器。哦,还有microSD卡。记录这16张小指甲大小的卡片可不是一件容易的事。在适当的数字电影布景上,有一个名副其实的角色,名为"数据牧马人",指的是那些努力备份镜头和拍摄镜头的可怜的笨蛋。一张艺术家的画作,展示了你将在Jump钻机上使用的所有MicroSD卡。巴沃不经意地提到,这些摄像头拍摄的原始图像有五台4k电视那么大。只要我们在做手指计算,我会说这大约是20k,即20480x2160。(顺便说一句,Oculus是对的:你的计算机不够快。)这强烈地表明你以1440的速度拍摄,顺便说一句:将这个分辨率除以16个摄像头,结果正好是1920x1440。(这可能是对的,但巧合的可能性比看起来更大,因为所有分辨率都是HD分辨率的小数倍,它们往往会相当平均地分配…目前还没有关于输出文件有多大的消息,但在这一点上,我怀疑它大致相当于现有的VR,或者更高一点:称之为4k左右,大部分捕获分辨率是计算机可以咀嚼的冗余像素。有多多余?好吧,如果我们把GoPros排成一排,它们的图像不会重叠,它们将覆盖1510度(94.4度VFOVx16个摄像头)。由于我们只需要覆盖360度,这是一个超过4:1的覆盖比例。换句话说,大多数图像点实际上被两个以上的摄像头看到,这是机器视觉技术的充足素材,如果两个摄像头一致,第三个(或第四个)摄像头有成像伪像,可能会出现耀斑拒绝之类的事情。再说一次,这是假设我们的分辨率设置是正确的,但数字确实是累加的。当然,如果我们以1920x1440的速度拍摄,我们实际上不会非常有2160个垂直像素-记住相机是横向的,但即使我们比这些投影少了大约240个像素。当然,摄像头无论如何都不能覆盖180度垂直,所以垂直像素/度几乎就是2160p视频拉伸到180…时的水平Aaaa,我们正式对一份尚未发布的规范进行了细枝末节,这份规范是基于主旨演讲中的一句一次性台词。所以,除非你已经在做高端VR,或者拍摄数字IMAX,或者使用大幅面打印,否则你可能不太熟悉那么高的分辨率。而且,尽管听起来很尖刻,但老实说,我只能假设大多数谷歌纸板用户完全浪费了分辨率,除非这些耳机升级是实质性的。因此,要么这是面向未来的(有可能;早在任何人观看之前,YouTube就已经启用了4k上传),要么谷歌计划让YouTube成为市场上每一款耳机上视频的首选目的地。换句话说,谷歌刚刚宣布自己是VR内容空间的主要参与者。虽然真人虚拟现实的前景仍然相当不确定,但谷歌已经提出了相当大的要求。
STeam上使用的VR设备有一半以上是MetaQuest耳机。这是根据最新的蒸汽硬件调查结果得出的结论。2月份的更新将Quest2在该平台上的VR头盔总使用量推高至47.09%,较上月增长了1%以上。此外,原始任务拥有3.83%的使用份额,这两种设备都占蒸汽耳机使用耳机的50.92%。Steam's硬件调查是一项选择加入的服务,从选定的当前蒸汽用户中收集数据。考虑到这并不是整个STeam用户群,我们不能确定结果是100%准确地反映了STeamVR的使用状况,也不是VR市场的整体表现。但是,考虑到这些公司都没有真正透露过其耳机的官方销售数据,这是我们掌握的最好的信息来源。这是Quest耳机的总使用量第一次超过这条线,但随着Quest2每月的增长速度,我们完全预计这款设备将在今年晚些时候自己跨过这一门槛。再加上裂谷S、原始裂谷和DK2(是的,这仍然是仍然的东西)和Meta耳机的份额占到了STeam使用的VR耳机的67.18%。这实际上比上个月的67.27%略有下降。Some这一损失可以归因于其他耳机的小幅增长。Valve的指数小幅上升至14.43%,仍然是该平台上第二大最常用的耳机。HTC的VivePro2也出现了小幅增长,尽管所有其他Vive耳机也都出现了下降。总体而言,使用VR头盔的STeam用户份额从2.14%略降至2.12%。随着2022年的进展如火如荼,在可预见的未来,基于PC的主要新耳机也不会发布,预计Quest2在未来几个月的硬件调查中将继续取得进展。
我在CES2022上试用了bHaptics触觉手套,这是Quest2即将推出的一款售价299美元的产品(显然也包括PCVR)。bHaptics是TactSuit背后的同一家公司,在以后的游戏中支持。与我尝试的力反馈手套不同,TactGLove实际上并不限制手指的运动。取而代之的是,它只有每个手指的精密振动马达(线性共振执行器)。这个想法是为了在无控制器的手跟踪游戏中增加缺失的触摸感。BHapticsSDK已经得到了顶级手部跟踪体验的支持,包括未插拔和手部物理实验室。老实说,我以为TactGlove会感觉像个噱头。因为我在CES上也试过真力反馈手套,我没想到简单的振动会给人的沉浸感增加太多。但我错了。将TactGLove与那些售价5000美元的产品进行比较甚至是不公平的--真正的比较是在正常情况下使用Quest手部跟踪游戏,因为你根本没有触觉。这种缺乏触觉是人们对免控制器手跟踪最常见的抱怨之一,这正是TactGlove解决的问题。But这种增加的触觉值300美元吗?这很难说。就目前而言,我会说不,原因很简单,因为免控制器手部跟踪游戏库仍然非常有限。然而,bHaptics确实告诉我,价格主要是当前供应链问题的函数。如果到明年,Oculus手部跟踪库更加丰富,bHaptics可以将价格降至200美元,那么它的价值主张可能会转变到我推荐的程度。TactGlove应该在第二季度提供给开发者,并在今年晚些时候交付给消费者。它将有三种尺寸可供选择。
苹果公司发布了一份'AR/VR框架工程师'的工作清单,该职位被描述为"开发一种全新的应用程序范例"。苹果现任经理HaydenLee在推特上分享了这份工作清单。作为社交虚拟现实领域的先驱,李与人共同创立了Convrge和BigScreen。根据他的LinkedIn主页,他于2020年年中受雇于苹果公司从事AR/VR工作,并于10月成为经理。软件框架是开发人员可以使用的组件、资产和功能的集合,而不是重新发明轮子。这份清单的有趣之处在于,它暗示了苹果可能对AR/VR软件采取的方式。这个角色被列为涉及"分布式系统"--运行在多台协调的联网计算机(或这里的头戴式耳机)上的软件,并要求获得实时体验。以下是对这项工作本身的描述:您将研究和开发一种全新的应用程序范例--这是一项挑战,需要在不牺牲代码质量或关注细节的情况下进行快速实验和原型制作。与Apple的用户界面框架、人机界面设计师和系统软件团队密切合作-该角色将推动您跳出框框思考,并解决AR/VR领域令人难以置信的雄心勃勃和有趣的问题。您将可以访问各种内部框架和服务,这些框架和服务使您能够构建深度集成到我们的操作系统中的软件。苹果以网络框架的角色提到了"一种全新的应用程序范式",它"深度集成到我们的操作系统中",这表明苹果可能正在探索为开发者提供高级工具,以构建内在的多用户空间应用程序。这样的框架可能会产生应用程序,这些应用程序可以在同一空间或跨互联网由多个耳机无缝运行,并具有遵循最佳实践的同步组件,如UI。今天,所有这一切都可以手动实现,也可以与引擎中的第三方框架(如Unity和虚幻)相结合。但凭借ARKit的RealityKit和RealityComposer,苹果已经表现出了提供更高级别工具的愿望,这些工具可以处理材质、阴影、物理、动画、空间音频等任务。这让苹果致力于完善这些核心技术,而开发人员则专注于构建实际内容,而不是需要自己复制每个内容。对于用户来说,这意味着应用程序之间的一致性和质量更高,即使是那些低预算的应用程序也是如此。We还没有听到传闻中的苹果AR/VR耳机的ROS操作系统的细节,该操作系统最早可能在明年发布。但这份清单暗示,尽管硬件大肆宣传,但苹果在这一领域的真正创新可能是对软件的一种根本不同的方法。
在几个月来关于QuestPro的传言之后,美达公司宣布将于2022年推出代号为ProjectCambria的全新"高端"独立VR耳机。Cambria不是Quest3,也不会取代Quest2。马克·扎克伯格将其描述为Quest系列之外的一款新产品--"一款全新的高级和高端产品",它将"处于价格谱的高端"。
芬兰企业级VR/AR耳机制造商Varjo将于下周发布新产品。该公司推出了一个预告片页面,将于10月21日发布。在这一页面上,它调侃道,它将"带来一个启示,将虚拟现实提升到一个全新的竞技场。"你可以注册获得活动的通知,活动将在东部时间下午12点/太平洋时间上午9点发生。只有一张预告片显示有人从后面戴着Varjo耳机。但目前还不清楚这是一款全新的设备,还是该公司现有的XR-3和VR-3耳机之一。基础设计,包括耳机安装的按钮和表带,看起来与这些设备几乎一样。It可能是该公司在戏弄这些设备的继任者。在过去的几年里,Varjo一直向企业销售具有先进功能的高端耳机。这包括超高分辨率面板和混合现实支持,以及内置的手部和眼睛跟踪功能。看看Varjo如何用潜在的XR-4或VR-4来推动这些功能肯定会很有趣,尽管订阅价格约为4,000美元的VR-3和约5,500美元的XR-3,因此它们肯定不是消费设备。此外,目前的设备今年早些时候才开始发货。查看我们使用以下XR-1的实际操作。我们曾多次询问该公司是否会制造消费型VR头盔,但它一直对这一概念抱有希望,没有任何具体信息可供分享。你希望从Varjo潜在的新耳机中看到什么?在下面的评论中让我们知道!
我们会看到OculusRift3吗?"也许有一天,"Facebook首席执行官马克·扎克伯格说。现在还不要太兴奋。扎克伯格在Facebook上以相对随意的方式回复了一个人,问公司是否会在今天发布OculusRift3(Facebook没有发布OculusRift3,只是发布了新版门户设备)。"也许有一天,"他回答说,"但我们现在都参与到了Quest中。毕竟,如果你愿意,你可以把你的任务链接到你的电脑上,然后玩游戏。"OculusRift3?也许不是Indeed,脸书向VR52证实,当宣布将停止销售RiftS.OculusQuest首先也是最重要的是独立平台时,它没有再推出PC独家VR头盔的计划。但它确实允许你通过有线连接和无线空中连接访问OculusStore和SteamVR上的PCVR内容。OculusQuest2的成功与相对低迷的PCVR头戴式设备的销售相对疲软(仍被认为是疲软)相支撑,这种情况不太可能在短期内改变。事实上,根据STeam的月度硬件调查报告,Quest2的用户数量已经超过了OculusRiftS和OculusRift的总和。从技术上讲,OculusRift2从来没有过,因为OculusRiftS更多地被视为一种增量升级,而不是真正的下一代设备。然而,我们曾经希望看到重要的新一代OculusRift。Facebook的HalfDome原型采用了更宽的视野和可变焦距显示等先进功能。今年早些时候,Oculus创始人兼Rift发明者PalmerLuckey声称Rift2在制作前被取消了。你想看OculusRift3吗?如果是这样的话,你希望在这款设备上看到什么?在下面的评论中让我们知道!
索尼的PS5游戏机将很快为其下一代VR头盔提供动力,到目前为止已经售出了超过1000万台。这一数字今天得到了索尼自己的证实。PS5在2021年7月18日突破1000万大关。索尼表示,这使其成为该公司迄今为止销售最快的游戏机。尽管自去年11月推出以来,持续的全球芯片短缺极大地限制了游戏机的供应,预计这些问题将持续到2022年。PS5有两个版本。纯数字版的售价为399.99美元,而更昂贵的光盘版售价为499.99美元。游戏机目前可以通过向后兼容的方式支持索尼PS4时代的VR耳机PlayStationVR,但它需要一个特殊的适配器来连接索尼免费提供给用户的PlayStation摄像头。截至2020年1月,PSVR本身已经售出了500万台。更重要的是,索尼已经确认将在未来发布一款全新的PS5VR头盔,尽管它不会在2021年上市。该公司甚至展示了该套件的新控制器,它通过一根电线连接到游戏机。今年早些时候,VR52在与多个消息来源确认后,也确认了这款设备的第一批规格。归根结底,这是PS5的一个良好开端,而PS5又为下一代VR头盔带来了希望。游戏机越多,这款新设备的潜在客户就越多。尽管如此,我们可能只会看到PS5的一小部分用户一开始就开始使用这款新耳机;PS4已经售出了1.15亿台,使PSVR的销量相形见绌。
作为英国排名前20的大学之一,萨塞克斯大学开设的本科课程可能对VR的未来至关重要。该校的教学内容涵盖神经科学、认知科学和生物医学科学等领域。我们很可能会看到新一代VR人才从该校走出。但我来这里不是为了谈论这些,我来这里是想谈谈技术。苏塞克斯创新中心坐落在校园一个安静的角落。面部识别公司Emteq所在的大楼里的办公室则更加安静。首席执行官格雷姆·考克斯(GraemeCox)在我身后关上办公室门时告诉我,这个小团队有一种"星期五的感觉",尽管很难想象迎接我的友好工程师和开发人员会心情不这样。对于一家在VR最重要领域之一工作的公司来说,Emteq营造了一个非常安静的环境。也许这反映了团队对faceteq的信心,faceteq是他们为VR耳机和其他设备构建的情绪跟踪平台。faceteq不使用摄像头来监控和复制你的面部表情,而是使用基于传感器的系统,该系统覆盖耳机接触你脸部的区域。该系统读取电肌肉活动、心率、皮肤反应和其他指标,然后将它们翻译回相关的表情。这是虚拟现实的一个重要领域,尤其是在行业开始转向社交体验的情况下。本月早些时候,Facebook在OculusConnect3上展示了卡通形象,这些形象的脸部动画试图复制用户的情绪和反应。这也是一个处于非常早期阶段的领域;演示一小时后,Oculus首席科学家迈克尔·阿布拉什告诉观众,完美的虚拟人类还有很长的路要走,而情绪跟踪将在其中发挥重要作用。Emteq的工作确实还处于早期阶段;该技术的当前迭代才刚刚一年多,但已显示出很大的前景,而一个改进的版本即将问世。"了解人类背景、情感背景和物理背景以及它们是如何形成的,并拥有能够与人类一起实现这些的虚拟现实系统、增强现实系统和人工智能系统,这真的很重要,"考克斯说。"在虚拟现实中移动,并将情感反应融入其中,这就是我们的使命。"今天,该公司向我展示了一个粗略的演示,包括上手和下手演示。团队正在展示带有OculusRiftDK2的系统,不过,我身后是电气工程师MohsenFatoorechi博士的办公桌,他目前正在组装CV1的原型,很快就会完成。"一旦完成,它就只是一个插件,"考克斯解释道。他还计划推出一款Vive版本,该版本将是一个简单的衬里,可取代套件随附的魔术贴泡沫衬里。该公司还在研究Daydream。我首先看到经过faceteq修改的DK2与一个已根据Fatoorechi的表情进行预校准的虚拟形象配合使用。起初,他坐在一个基本环境中。右侧是一个调试菜单,提供有关传感器读数的实时反馈。左侧是一大组面部表情,用户可以选择进行单独校准。该过程涉及执行特定操作,例如用右眼或左眼眨眼三次,以便系统可以通过机器学习记住反馈。Emteq的RiftCV1集成渲染图每个表情大约需要30秒来校准,但团队正在努力在未来简化这一流程。Fatoorechi使用眨眼来选择菜单上的选项,这一动作省去了使用注视控制时盯着选项的几秒钟时间。在第一次演示中,他坐在一个女人面前,女人的表情与他如出一辙。这不是最精致的展示;每次女人眨眼时,她那张参差不齐的脸看起来都像是在痛苦中,但这不是本次演示的重点。虽然存在缺陷,但系统对Fatoorechi的反应很好,至少据我所知,当他的大部分脸被耳机遮住时是如此。我看到的另外两个演示展示了一些我以前从未想过的面部跟踪的独特用例。一个是电影院放映室。首席科学官查尔斯·恩杜卡让我想象一场好莱坞预演,电影制片厂可能会从传感器收集反馈数据,这是考克斯所说的"客观情感分析"的一个例子,也可以用于研究项目或游戏测试。或者你可以和朋友一起看内容,看看他们的反应。想象一下一起看喜剧大笑,或者一起被惊吓到。另一个演示则更加独特。Emteq创建了自己的Facebook墙,只需查看帖子,你就可以基于自己的表情分配表情符号。Facebook一直在朝着更具体的情绪反应方向发展,而这个系统提供了一种更诚实、更直接的方式来传递这些信息,即使这种方式可能并不总是维持友谊的理想方式。在演示之后,我亲自尝试了这项技术。值得注意的是,我的头发很长,这对这个早期原型造成了一点干扰。我首先校准了右眨眼,这是一个相当顺利和无痛的过程,尽管系统在处理我抬起眉毛的震惊表情时遇到了一点麻烦,我不得不放弃校准张嘴微笑,因为它根本无法识别。再次说明,这是早期的原型技术。首席执行官GraemeCox(左)和首席科学官CharlesNduka(右)。图片来源:BenWright我用校准过的方法对那位女士进行了演示。令人印象深刻的是,她很快就模仿了我的眨眼动作以及眉毛和额头皱纹的位置,以吓唬一些表情。系统记住了我在校准过程中做出某些表情时发出的冲动,然后产生相关的情绪或动作。理想情况下,faceteq可以达到无需校准过程即可识别冲动并即时复制表情的阶段。考克斯指出,该公司的跟踪方法可以捕捉到摄像头跟踪无法识别的微小肌肉运动,但如果你需要校准如此微小的表情,那么你该在哪里停下来?肌肉冲动和反应的变化数量足以打造一个完美的虚拟人吗?希望Emteq能够充分改进流程以避免出现问题,这也是其努力的目标。"这是一个建立在数据基础上的系统,"Nduka说道。"它获得的数据越多,它就越智能。"我期待着在未来几个月看到该系统的改进。该团队还在研究一种使用眼电图的眼球追踪技术,据考克斯称,这不是一种"高精度"解决方案。它不足以实现像注视点渲染这样的基本过程,但能够读取眼睛的大大小小的动作和大致方向。这可能会为现有的技术再添一层引人注目的色彩。但Emteq已开始利用现有资源。该公司的技术正用于治疗面瘫患者的一款应用。faceteq还可以与眼镜配对,在日常场景中为您提供关键信息,例如在您睡眠不足时记录您的疲劳程度。目前,该公司正在筹集种子资金,不过考克斯表示,从研究角度来看,该公司"资金充足"。对于其虚拟现实技术可能的消费者版本,该公司提出了一系列选择,包括前面提到的耳机插件。"我们前面的道路令人兴奋,"考克斯说。"显然还有很多事情要做,但我们已经能够展示一些非常有趣的东西,到明年第一季度,我们将拥有一个可以完全正常工作的系统,可以做一些非常令人惊讶的事情。"
今年早些时候,我们报道了Facebook发布了自己的VR摄像头--360。从今天起,只要你有3万美元的多余资金,你就可以为自己建造这个平台了。正如这家社交网络巨头在4月份的F8开发者大会上承诺的那样,Facebook已经发布了通过GitHub在线制造3D360摄像头的设计规格。根据一篇宣布发布的帖子,该公司已经这样做了,"这样任何人都可以贡献、在其上构建、改进或分发这款相机。"嗯,任何有3万美元可以买相机的人,就是这样。还发布了脸书自己的拼接软件的代码,允许你轻松快速地查看使用新Rig拍摄的内容。The公司也发布了一个方便的视频。这一切都是非常DIY的,但不要搞错了;你需要大量昂贵而具体的设备和一些严肃的技术诀窍才能自己组装其中一台。设计规格还将允许一些人迭代该套件并对其进行改进。如果你想更深入地了解一切是如何运作的,Facebook还发布了一篇关于该项目的令人难以置信的详细博客文章。这款完全组装的产品配备了17个摄像头,空间大小可以避免过热,每只眼睛的分辨率为8K。我们看到了在F8使用该套件拍摄的一些镜头,但尽管令人印象深刻,我们并没有发现它比其他解决方案领先一大截。而且,虽然有一些爱好者可能想要在Facebook的工作基础上再接再厉,但高昂的价格让我们想知道这到底是为谁设计的。当然,希望制作虚拟现实电影的专业人士只会为这项工作购买合适的摄像机?随着谷歌宣布它正在与IMAX等公司合作制造这样的相机,我们正在努力寻找环绕360在VR电影制作领域的位置。
VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。