扎克伯格也来挑战「光剑变装」了。
你以为是这样的?NoNoNo!
小扎没有唐艺昕那样的炫酷,倒是多了几分滑稽。
右手背后藏剑,左手亮剑:一瓶BBQ蘸汁。
这是小扎在元宇宙中虚拟化身,这一亮剑视频让许多人纷纷转发。
自从Facebook更名为Meta,正式进军元宇宙之后,「元宇宙」这个词的热度就一直未减。
而与元宇宙一起被频繁提及的,就是化身这个词。
「化身」,通俗意义上讲,就是人们在虚拟世界里的形象。
百度虚拟形象驱动专利公布 可应用于元宇宙场景:10月17日消息,据天眼查,北京百度网讯科技有限公司“虚拟形象驱动方法、装置、电子设备及存储介质”专利公布。专利摘要显示,该专利涉及计算机视觉、深度学习以及增强现实等人工智能领域,可应用于虚拟形象生成以及元宇宙等场景。[2022/10/17 17:29:04]
12月10号,「元宇宙」先锋Meta开放了自家的虚拟世界平台HorizonWorlds。
当用户进入HorizonWorlds后,就需要创建一个3D虚拟化身。
有了化身,用户就可以在这个自定义的世界中畅快玩耍。
网易多个元宇宙商标被驳回:1月22日消息,天眼查APP显示,近日,网之易信息技术(北京)有限公司、广州网易计算机系统有限公司申请注册的多个“网易元宇宙”商标流程变更为“驳回通知发文”,国际分类涉及科学仪器、通讯服务、广告销售等,上述商标均申请于2021年10月。(金融界)[2022/1/22 9:05:44]
不过,略显尴尬的是,这些avatar的表情都非常僵硬。
所以,虽然目前的3D虚拟化身也勉强能用,但离着科幻电影,比如「头部玩家」里那种逼真的化身形象,还有十万八千里。
而CodecAvatars项目便代表了Meta在虚拟化身领域所做的努力。
元宇宙不是PPT,Meta真在做
小扎改名Facebook的决心也不是闹着玩儿的。
若想在元宇宙中实现真正的交互,虚拟化身可是打开元宇宙这道门的任督二脉。
CodecAvatars这一项目旨在实现一个能够捕获和表示用于XR的逼真头像的系统。
Blockworks:Meta 2022年将向元宇宙投资100亿美元:1月14日消息,Blockworks发推称,Meta(Facebook母公司)正在招聘1万人来推进元宇宙业务,并将在2022年投资100亿美元。[2022/1/14 8:49:41]
基于3D捕捉和AI技术,CodecAvatars可以让人们快速能够轻松地构建属于自己的虚拟化身,并使虚拟空间中的交互像在现实世界一样自然。
最初这个项目是以高质量的头像演示开始,后来逐渐实现构建全身的虚拟化身。
除了简单地扫描一个人的身体之外,一个主要的挑战是让它以现实的方式移动——更不用说让整个系统能够实时运行,以便化身可以在交互式环境中使用。
在Connect2021大会上,研究人员YaserSheikh展示了该团队最新的成果——全身视频编解码器。
他表示现在CodecAvatars支持更复杂的眼部运动、面部表情、手部和身体姿势。
财联社:军工元宇宙概念多处于摸索了解阶段:12月16日消息,北京电子工程总体研究所近日发布\"虚拟孪生-元宇宙协同建模仿真方法研究\"军工需求公告,采购阶段为预研。该消息一出,市场普遍认为元宇宙概念已经从IP、游戏、企业会议等延伸至军工领域。12月15日,\"军工元宇宙概念\"迎来大涨。据分析,所谓军工元宇宙概念上市公司,他们自身对该概念还多处于摸索了解阶段。在概念之外,市场更关注的是,相关标的是否确实有元宇宙相关技术在军工领域的应用,以及其未来前景。(财联社)[2021/12/16 7:42:56]
此外,Meta还展示了虚拟化身在对不同的光照条件和环境下实现头发和皮肤的真实渲染。
那么,衣服也可以在元宇宙中实现真实模拟。
扯一扯弹性不错,抖动一下也会有褶皱。
证券日报:元宇宙定义尚无定论,拥抱仍需理性:11月8日消息,证券日报于今日发文《元宇宙:定义尚无定论 拥抱仍需理性》,其中提到科技巨头争相布局元宇宙以及专家对元宇宙的看法。
其中,中国通信工业协会区块链专委会轮值主席于佳宁表示,当前元宇宙相关的数字技术尚未成熟,有些应用尝试也可能会失败,相关的公司或项目都还处于早期阶段,其投资的风险性不可不察。不过,于佳宁坚称,未来十年将是元宇宙发展的黄金十年,转型窗口期已经悄然开启。资本的争相入局,势必会加速国内元宇宙的建设和普及,进而促进数字经济与实体经济实现更深层次的融合,为实体企业开辟全新的发展空间。通联数据资深行业研究专家汪敏表示,元宇宙未来发展方向是与相关产业快速进步息息相关,包括5G/6G网络、云计算、边缘计算等,还广泛包括计算机视觉、深度学习等AI产业、电子游戏产业、交互硬件、区块链产业等,全球元宇宙市场规模未来或可达万亿美元级别,空间巨大。[2021/11/8 21:33:02]
身体细节、衣服都能做到现实还原,还有高保真的虚拟空间。
Meta就建造了一个虚拟公寓,公寓中所有物品都是现实世界的映射。
这样用户在虚拟空间中移动物体或者交互都能与物理空间实现同步。
目前,这似乎是为公司构建一个映射的真实世界环境的最佳案例场景来进行实验。
进入元宇宙后,手动跟踪也同样重要。如果在物理世界中大甩手臂实现交互,不仅累,而且也不雅观。
为此,Meta一直在研究一种更加微妙自然的方法,即通过EMG腕带进行XR输入。
前段时间,Meta还推出了一款触觉启动手套,都是为了实现在元宇宙中的新交互所做的努力。
如何构建CodexAvatars?
Meta开始制作CodexAvatars的契机要追溯到7年前。
2014年,卡内基梅隆大学机器人研究所旗下的一家3D捕捉实验室PanopticStudio的负责人YaserSheikh遇到了Oculus首席科学家MichaelAbrash,两人聊得非常投机。
MichaelAbrash
2015年,YaserSheikh加入了Facebook,从那以后便一直领导着CodexAvatars研究团队。
YaserSheikh
要想打造一个逼真的化身,基础在于测量,CodexAvatars研究科学家托马斯·西蒙说。
化身要以假乱真靠的是精确的数据,这需要良好的测量。因此,构建真实化身的关键是找到一种方法来测量人类表情中的物理细节,比如一个人眯起眼睛或皱起鼻子的方式。
在匹兹堡实验室的CodecAvatars团队,使用了两个主要的模块来测量人类的表情:编码器和解码器。
首先,编码器使用摄像头来捕捉受试者正在做什么,然后将捕获的信息组装成一个唯一的编码,用来表示一个人的身体和环境状态,这个编码可以随时发送到任何需要的地方。
然后,解码器再将该编码转换为视频信号。
普通的智能手机摄像头也能拍摄生动的视频。不过,CodecAvatars可是海量物理数据和复杂软件的结合,比想象中要复杂得多。
CodecAvatars项目在捕捉人脸细节时,使用了数百个高分辨率相机,而每个相机又会以每秒1GB的速度捕获数据。
这是什么概念呢?
打个比方,这些相机三秒钟的记录的数据就足以装满一个512GB的磁盘。
而CodecAvatars团队持续记录大约15分钟,这已经到达了他们现有硬件条件的极限,但尽可能多的数据也为创建最逼真的虚拟头像打下了基础。
CodecAvatars团队正在使用这些数据来训练AI系统,从而让AI可以从视频中快速构建虚拟头像。
Sheikh说:我们目前已经可以还原发型夸张的人的3D头像,甚至还原戴着脑电采集帽的人的头像也不在话下。
这是世界上最先进的能够自动生成人类的真实数字肖像的方法之一。它提供了一种虚拟的面对面交流的新方式,将来可以广泛推广。
而随着CodecAvatars的出现,人们对元宇宙社交的接受度会不会越来越高呢?
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。