自去年元宇宙概念受到广泛关注以来,相关产业主体积极布局,我国各地方政府也纷纷出台了支持元宇宙发展的相关政策。《头号玩家》《失控玩家》等电影为用户勾勒出元宇宙的使用场景:戴上头盔,戴上手套,穿上特制服装,用户便能够进入一个虚拟空间,在这个空间中,用户可以与在现实中一样,奔跑、跳跃,与人沟通交流,能够像在现实中一样看到其他用户的表情。
从当前市面上的产品形态来看,用户在虚拟空间中对话已经得以实现,部分游戏与硬件厂商的解决方案也能够支持将游戏中的击打感传递给人体,百度、网易等公司也发布了希壤、瑶台等元宇宙产品,可供用户在虚拟空间中参会、互动。然而,整体来看,当前市面上提供的元宇宙体验方案,与电影勾勒出的元宇宙沉浸体验之间,还存在很大的距离。
用户像电影中描述的那样在元宇宙拥抱、握手究竟能否实现?完全的身体沉浸式体验,究竟还有多久才能实现?
“人”的元宇宙
“所谓元宇宙,最核心的是人。”赛迪顾问高级分析师袁钰在接受《中国电子报》记者采访时这样说。
元宇宙要解决的最为核心的问题,便是将人纳入到虚拟世界,使人体认同虚拟世界的感知,使人体沉浸在虚拟世界的体验中,人们可以像在现实生活中一样互动、交往。“人”是搭建元宇宙的核心,用户“交互”是元宇宙区别于过往单机游戏的重要特点。而要让人体在虚拟世界中取得与现实世界同样的体验,面部表情、身体互动和触觉感知便是实现人体沉浸式体验的必需。与之相对应,面部识别、动作捕捉、触觉识别与触觉反馈技术便是助力人体实现在视听感官之外更沉浸体验的关键技术。
“使用面部识别器,用户便可以像在现实生活中一样看到对方的表情。”HTC中国区总裁汪丛青在接受《中国电子报》记者采访时这样说。HTC Vive推出的面部追踪器,可搭载于VR眼镜之上,通过相机捕捉人的表情转化为虚拟人物的表情。
微软游戏 CEO:游戏玩家已经在元宇宙中生活了30年:金色财经报道,Watcher.Guru在社交媒体上称,微软游戏首席执行官表示,游戏玩家已经在元宇宙中生活了30年。[2022/8/26 12:50:46]
VIVE 面部追踪器
在动作捕捉方面,各设备厂商大致推出了两种技术路线。比较普遍的是在手柄中搭载雷达模块和红外感知模块,借助光学视觉方案,通过手柄将手部的位置传输给主机或头显。不论是Inside-out还是outside-in,都是通过光学方案完成对手部位置的捕捉。另一种方案是可穿戴设备,例如HTC Vive tracker追踪器便采用了激光雷达与IMU惯性传感器相配合的技术路径,将动作追踪器安装在用户身上,借助激光雷达完成位置捕捉。为避免由动作遮挡带来的激光阻隔,IMU(惯性测量单元)将提供信号补足。
为了提升用户在虚拟世界的触觉体验效果,各大厂商也在推出自己的技术方案。去年11月,Meta推出了触觉手套,可借助脊状充气塑料片使用户体验到抓握物体、触摸不同材质表面触感的效果。去年6月,触觉反馈公司bHaptics推出触感背心bHaptics TactSuit,用户佩戴该产品玩支持的游戏,可体会到游戏中角色受到的击打感。去年12月, bHaptics公布其第一款消费级触觉手套Tactglove,用户佩戴该产品可体验到球体在手掌中滚动的感觉。
整体来看,支持用户在元宇宙实现立体传感的产品正层出不穷,但具体来看,则会发现,此类产品面临着市场应用不足、技术迭代速度慢、技术突破难、技术难题解决缺乏动力等诸多问题。“产品迭代速度不及预期”,恐怕是对面向元宇宙的立体传感产品最准确的表达。
香港科技大学拟在元宇宙建延展实境校园,建成后可以NFT形式发放文凭:金色财经消息,香港科技大学日前宣布,将在元宇宙中建立延展实境校园MetaHKUST,涵盖科大清水湾校园及9月开幕的科大广州校园,提供沉浸式学习体验。首阶段将建立主要基础设施,包括兴建延展实境教室,并邀请所有大学成员为两个实体校园进行众包扫描,为虚拟双子校园提供所需要的影像。
系统建成后,两所大学往后可以NFT形式,颁发加密文凭及成绩单,毕业礼和开放日亦可同时以虚拟及实体形式进行。(中新网)[2022/7/28 2:43:35]
立体传感三大障碍:内容、价格、舒适度
立体传感愿景美好但落地产品少、市场推广产品有限,这究竟是技术瓶颈的问题,还是市场需求的问题?
根据统计数据,2021年,全球VR一体机出货量在800万~1000万台,其中Oculus Quest产品占80%以上。其中最热销的Oculus Quest2 配备有两个Touch控制器。国内VR硬件设备品牌Pico Neo3同样配备了手柄。此类手柄具备的功能包括几个方面:手势识别——检测用户手部位置并在虚拟空间中反映;触觉控制——用户通过手柄完成对体验内容的操纵;触觉反馈——传达用户在虚拟空间中的触感体验。手柄是当前市场提供给用户体验虚拟世界触感的最常见的方式。对于游戏玩家而言,增加触觉体验明显比单纯的视听感受带来的感官体验更加立体。例如索尼推出的PS5手柄,设计了触觉反馈功能,当玩家使用该手柄玩《Astro’s Playroom》游戏时,可体会到角色在草丛中行走、击打物体、受力弹射等非常丰富多样的、不同层次的震动。这与传统手柄能够提供的仅仅“震一下”的触感体验大不相同。任天堂Switch的Joy-Con手柄同样也因能够提供丰富、细腻有层次感的触感反馈而广受好评。
顺网科技:公司会在元宇宙方面积极布局:金色财经消息,顺网科技(300113.SZ)5月10日在投资者互动平台表示,公司会在元宇宙方面积极布局。(每经网)[2022/5/10 3:04:19]
XR定格动画《病玫瑰》
但这些获得市场好评的提升用户在虚拟世界触感体验的硬件产品,无一例外具备一个条件:内容配套完善。去年售卖火爆的Oculus Quest2可支持4000多款游戏,其中不乏《Beat Saber》这种爆款音乐节奏游戏。索尼和任天堂更是因为其强大的内容生产能力,为硬件产品的触觉反馈功能提供了非常大的发挥空间和内容配套。
“内容先行。”在接受《中国电子报》记者采访时,小派科技副总裁李杰着重强调了内容对发展元宇宙立体传感的重要性,“如果没有好的内容,用户就不会为硬件产品买账。”
袁钰同样认为,用户购买的是体验而不是技术。而优质内容,就是构成用户体验的重要组成部分。若内容为用户提供了足够的吸引力,且硬件触觉功能的使用将把用户体验提高到更多的高度,则自会有用户为此买单。配套内容不够惊艳,内容与硬件配合的效果不够惊艳,这是市面上出现的触感体验、动作捕捉、面部识别产品销售效果不及预期的重要原因。
价格居高不下,也是用户购买配件意愿低的重要原因。当前,市面上常见的动作追踪装置,需要3~5只实现对人体动作的模拟,1只悬挂于腰间,2只绑定在腿上,便能够基本实现对人体动作的基本模拟,而若在双手再搭配2只追踪器,就能够实现对人体动作的完美模拟。然而,仅购买3只追踪装置的价格,已趋近于VR设备头显主机的价格。这对于绝大多数消费者而言,还是难以接受的。
服装品牌Hiroko Koshino将在元宇宙平台发布可穿戴NFT系列:3月11日消息,日本服装品牌小筱弘子(Hiroko Koshino)将在元宇宙平台XANA上发布名为“HIROKO KOSHINO ANOTHER ONE”的可穿戴NFT系列,价格未定,此外,其将在NFT市场开设品牌商店。小筱弘子3D设计的时尚单品被将转换成的NFT将在在NFT市场XANALIA上出售,购买的NFT可以被元宇宙平台XANA内的3D化身穿戴。(WWD)[2022/3/11 13:50:56]
VR音乐会
从市面上具备的动作捕捉技术方案来看,视觉动作捕捉、机械式动作捕捉、声学式动作捕捉、电磁式动作捕捉、惯性导航式动作捕捉是比较常见的几种技术方案。其中,应用于惯性动作捕捉的IMU传感器、用于光学动作捕捉的红外线传感器等配件,单件价格都不高,致使动作捕捉设备价格居高不下的首要原因,仍然是设备整体方案带来的高成本。“每个传感器的价格并不高,但终端设备的使用并不是一个传感器就足够的。将所有的传感器集合在一起,并要使整个硬件可用,其技术整合的过程需要技术储备,这会使整个系统的成本不够便宜。”汪丛青说。
体验立体传感,不仅给消费者带来了可能存在的消费成本压力,也给厂商带来了权衡产品舒适性与提高产品精度的压力。歌尔股份的产品与解决方案总经理孙凯介绍称,使用微执行器是传达虚拟世界对用户手部产生力反馈的前沿方案,其中包括使用气动执行器、电活性执行器、微流体执行器等等。据公开资料,Meta发布的触觉手套,采用的就是气动执行器的方案。Meta声称每个手指上约有15个脊状充气塑料片,内部传感器可以捕捉佩戴者手指的弯曲方式,也会给用户带来指尖触碰物体的感觉。但这种产品的使用,不仅要求用户佩戴笨重的手套,给用户增加产品负重,还会有电线连接,从而限制用户的活动范围。超声波传感器厂商Emerge提出的超声波传感器,给了用户无需佩戴额外的设备,可凭空感知感触虚拟世界物体形态的可能性,但该产品也不可避免地存在着用户需在特定的位置才能使用产品的问题。
TSGO宣布在元宇宙中建立马戏团:12月26日消息,The Show Goes On (TSGO) 宣布了在元宇宙中建立马戏团的计划。该团队负责人克里斯莱利表示,元宇宙中的“虚拟娱乐”将有巨大的潜力和需求,马戏团将成为其中的一部分。(dailycoin)[2021/12/26 8:05:23]
和网友在元宇宙牵手还需要多久?
“《头号玩家》中使用的技术90%现在都有了,但当前的技术90%都不成熟。”李杰这样说道,“很多产品技术构思、原型在很久之前便推出了。例如《头号玩家》中的跑步机2016年就推出了原型产品。但无一例外,这些产品在舒适性、安全性、适配性等方面存在诸多问题。”
从技术的层面来看,一位用户与另一位用户在虚拟空间中实现触觉交互已经能够实现。但要实现该应用面向广阔市场群体推广,使其变成被广泛使用和触手可得的技术,还有待于全行业的成熟。
袁钰表示,元宇宙的应用和推广是需要逐步推进的,而当前正处于初级阶段。所谓初级阶段,指的是全行业对元宇宙的应用探索还处于尝试阶段,全社会对元宇宙的了解还处于概念阶段。从国内以元宇宙之名进行的产业尝试来看,当前产业对元宇宙产业价值的挖掘仍处于试水阶段,元宇宙呈现形式的探索还较为初级。百度希壤、网易瑶台分别建设起自己的元宇宙平台,也承办过多场活动,但用户行走其中,还是会有种在线参观展馆的感觉,与其他用户的交互感仍不够强。相较于用户间的能够互相识别面部表情和动作、感受到彼此由握手、击掌等动作带来的更沉浸式的立体传感交互体验,当前,包括元宇宙平台在内的元宇宙相关产业参与者的着眼点,仍在于寻找元宇宙的产业落地方向、落实应用场景。至于优化立体传感,是在此基础上再考虑的更高层面的目标。
在技术完善方面,李杰认为,传感适配的精确度不够高以及缺乏相应的参数标准,是元宇宙产品体感捕捉技术成熟速度不及预期的重要原因。作为一个仍处于创始阶段的产业,技术标准处于各家公司各立山头的状态。而行业标准的确立,需要诸多企业的商讨与配合,这显然不是现阶段能解决的问题。而从市场推广来看,以VR头显设备为代表的元宇宙配套硬件仍处于小众市场阶段,VR头显市场规模小,其配件的市场规模自然难以实现巨量增长。
VIVE构想的使用VR设备的办公室场景
解决VR设备市场需求问题,“培育场景”,这是元宇宙向产业化发展过程中最先要解决的问题,也是发展面向元宇宙的立体传感首先要回应的问题。提升立体传感效果,需求在哪里?
从今年以来各地出台的元宇宙相关政策来看,各个地方对于元宇宙的规划,在于推动元宇宙与当地既有资源的整合,带动当地既有产业发展。例如无锡滨湖区发布的《太湖湾科创带引领区元宇宙生态产业发展规划》中提到,加快元宇宙与集成电路、区块链、人工智能、云计算等技术融合创新发展。上海虹口区发布的“元宇宙产业发展行动计划”,提出将着力打造北外滩元宇宙发展和应用示范区,培育和引进一批元宇宙场景应用优质企业,建设一批元宇宙产业经济空间。
与当前既有资源配合,促进既有产业发展,这是各地方给出的共同回答。落实到细分场景,立体传感的增长空间究竟在哪里呢?
IDC中国分析师赵思泉在接受《中国电子报》记者采访时表示,游戏和办公领域是比较容易突出面部及动作追踪技术优势的领域。在她看来,在这两个领域,搭载了面部追踪及动作识别技术的产品将很容易凸显其技术优越性,从而使用户最终选择该应用。
袁钰同样认为面部识别技术将会是多种立体传感技术中较早取得市场拓展和技术优化的。在他看来,图像识别在安防系统、医学领域存在广阔的应用空间,相比之下,动作识别的市场需求范围就更窄些,将只在设计、游戏、电影、文旅等特定的领域有需求,其需求群体更为小众。
对于硬件厂商而言,提升产品体验感、优化反馈方案是其长期努力的方向。孙凯在接受《中国电子报》记者采访时表示:“高精度、高可靠性和低延迟是产品持续发展的方向,拓展力学振动和触感全链条方向的新应用,将虚拟和现实有机融合在一起,可为终端用户提供更真实、丰富的触感体验。”在产品形态保持不变的情况下,优化现有产品,提升触感精度,本身也是优化用户对虚拟世界立体感知的途径。
优化产品能够提供的立体传感性能,也是诸多厂商的努力方向。一方面,各厂商在摸索实现更立体、更沉浸式的虚拟世界体验的可能性,另一方面,也有厂商在尝试另辟蹊径。汪丛青看来,各种类型的传感器都可能存在缺点,或者是佩戴感强,影响沉浸体验;或者是敏感性、反馈力与用户自身感受有所差别,由此,脑机接口或会成为增强用户对虚拟世界沉浸感的更高级别传感形态,但汪丛青也表示,这是比完善当前市场现有的立体传感产品更远的技术想象,其技术完善至少还需要十年的时间,在此之前一定有更好的产品形态出来。
和朋友在虚拟世界握手,这一在现实世界中可以轻而易举实现的举动,若要使大多数人都能在元宇宙中立体感知,还有很长的路要走。李杰认为,自现在起,至立体传感技术成熟,至少还需要5-10年的时间。袁钰称,若是乐观考虑,要实现用户大批量在虚拟世界进行触觉交互,恐怕还需要10年左右。
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。