扎克伯格也来挑战「光剑变装」了。
你以为是这样的?NoNoNo!
小扎没有唐艺昕那样的炫酷,倒是多了几分滑稽。
右手背后藏剑,左手亮剑:一瓶BBQ蘸汁。
这是小扎在元宇宙中虚拟化身(Avatar),这一亮剑视频让许多人纷纷转发。
自从Facebook更名为Meta,正式进军元宇宙之后,「元宇宙」这个词的热度就一直未减。
而与元宇宙一起被频繁提及的,就是化身(Avatar)这个词。
「化身」,通俗意义上讲,就是人们在虚拟世界里的形象。
元宇宙数字人头像技术公司Didimo完成715万美元A轮融资,Armilar Venture Partners领投:10月11日消息,元宇宙数字人头像技术公司Didimo宣布完成715万美元A轮融资,本轮融资由Armilar Venture Partners领投,Bright Pixel Capital、Portugal Ventures和Techstars参投。Didimo云平台可以将创建3D头像所需的时间从几天缩短到仅60秒,其合作伙伴包括日本电子巨头索尼和元宇宙公司CEEK V。[2022/10/11 10:31:18]
12月10号,「元宇宙」先锋Meta开放了自家的虚拟世界平台Horizon Worlds。
当用户进入Horizon Worlds后,就需要创建一个3D虚拟化身。
Blink Digital在Decentraland上建造元宇宙医院:7月5日消息,数字机构Blink Digital与印度Yashoda医院在Decentraland元宇宙中购买了一个地块,以建造一家医院。通过与Blink Digital的合作,Yashoda医院将能够在元宇宙中实现病患与医生之间的互动交流,为元宇宙用户提供医疗保健服务。[2022/7/5 1:52:36]
有了化身,用户就可以在这个自定义的世界中畅快玩耍。
不过,略显尴尬的是,这些avatar的表情都非常僵硬。
所以,虽然目前的3D虚拟化身也勉强能用,但离着科幻电影,比如「头部玩家」里那种逼真的化身形象,还有十万八千里。
而Codec Avatars项目便代表了Meta在虚拟化身领域所做的努力。
元宇宙不是PPT,Meta真在做
小扎改名Facebook的决心也不是闹着玩儿的。
北京市委书记蔡奇:积极发展元宇宙等场景应用:金色财经报道,据北京日报消息,3月19日上午,北京市委书记蔡奇到新首钢地区调查研究。蔡奇强调,坚持数字赋能,积极发展人工智能、云转播、自动驾驶、元宇宙等场景应用。[2022/3/20 14:07:32]
若想在元宇宙中实现真正的交互,虚拟化身可是打开元宇宙这道门的任督二脉。
Codec Avatars这一项目旨在实现一个能够捕获和表示用于XR的逼真头像的系统。
基于3D捕捉和AI技术,Codec Avatars可以让人们快速能够轻松地构建属于自己的虚拟化身,并使虚拟空间中的交互像在现实世界一样自然。
最初这个项目是以高质量的头像演示开始,后来逐渐实现构建全身的虚拟化身。
除了简单地扫描一个人的身体之外,一个主要的挑战是让它以现实的方式移动——更不用说让整个系统能够实时运行,以便化身可以在交互式环境中使用。
BBC:元宇宙平台Roblox出现违禁游戏,现已被强制下架:金色财经报道,据BBC消息,元宇宙平台Roblox出现违禁游戏“condos”, 玩家可以在其中谈论违禁话题,化身角色还可以在做一些违禁行为。据悉,这款游戏只维持很短暂的时间,通常不到30分钟,就被人检举或发现而被下架了,Roblox已经表示他将们利用人工和自动化系统随时维护平台规则,一旦发现违规立即下架。但是,Roblox也承认有极少数玩家刻意违规,该公司表示:“我们采取人工加上机器一起来侦测违规行为,每一个上传到Roblox平台的图像、录相和声音档案都会接受安全检验。”
此前,脸书的母公司Meta在其开发的虚拟现实“Horizon Venues”游戏中推出了新的“个人界限”功能,防止玩家角色靠近其他玩家化身。Roblox则表示:“我们的游戏平台上不允许任何与性有关的内容和行为,我们对任何违反规定的人采取迅速行动。”[2022/2/17 9:57:16]
在Connect 2021大会上,研究人员Yaser Sheikh展示了该团队最新的成果——全身视频编解码器(Full-body Codec Avatars)。
上汽荣威发布首款NFT数字艺术作品“荣威元宇宙”:1月15日消息,上汽荣威官方微博宣布首旗下首款 NFT 数字艺术作品「荣威元宇宙」将于 1 月 23 日在国拍进行公开拍卖。这标志着上汽荣威迈开了进军「元宇宙」的步伐,成为汽车圈层布局「元宇宙」的先锋品牌。[2022/1/15 8:51:42]
他表示现在Codec Avatars支持更复杂的眼部运动、面部表情、手部和身体姿势。
此外,Meta还展示了虚拟化身在对不同的光照条件和环境下实现头发和皮肤的真实渲染。
那么,衣服也可以在元宇宙中实现真实模拟。
扯一扯弹性不错,抖动一下也会有褶皱。
身体细节、衣服都能做到现实还原,还有高保真的虚拟空间。
Meta就建造了一个虚拟公寓,公寓中所有物品都是现实世界的映射。
这样用户在虚拟空间中移动物体或者交互都能与物理空间实现同步。
目前,这似乎是为公司构建一个映射的真实世界环境的最佳案例场景来进行实验。
进入元宇宙后,手动跟踪也同样重要。如果在物理世界中大甩手臂实现交互,不仅累,而且也不雅观。
为此,Meta一直在研究一种更加微妙自然的方法,即通过EMG腕带进行XR输入。
前段时间,Meta还推出了一款触觉启动手套,都是为了实现在元宇宙中的新交互所做的努力。
如何构建Codex Avatars?
Meta开始制作Codex Avatars的契机要追溯到7年前。
2014年,卡内基梅隆大学机器人研究所旗下的一家3D捕捉实验室Panoptic Studio的负责人Yaser Sheikh遇到了Oculus首席科学家Michael Abrash,两人聊得非常投机。
Michael Abrash
2015年,Yaser Sheikh加入了Facebook(现Meta),从那以后便一直领导着Codex Avatars研究团队。
Yaser Sheikh
要想打造一个逼真的化身,基础在于测量,Codex Avatars研究科学家托马斯·西蒙说。
化身要以假乱真靠的是精确的数据,这需要良好的测量。因此,构建真实化身的关键是找到一种方法来测量人类表情中的物理细节,比如一个人眯起眼睛或皱起鼻子的方式。
在匹兹堡实验室的Codec Avatars团队,使用了两个主要的模块来测量人类的表情:编码器和解码器。
首先,编码器使用摄像头来捕捉受试者正在做什么,然后将捕获的信息组装成一个唯一的编码,用来表示一个人的身体和环境状态,这个编码可以随时发送到任何需要的地方。
然后,解码器再将该编码转换为视频信号。
普通的智能手机摄像头也能拍摄生动的视频。不过,Codec Avatars可是海量物理数据和复杂软件的结合,比想象中要复杂得多。
Codec Avatars项目在捕捉人脸细节时,使用了数百个高分辨率相机,而每个相机又会以每秒1 GB的速度捕获数据。
这是什么概念呢?
打个比方,这些相机三秒钟的记录的数据就足以装满一个512GB的磁盘。
而Codec Avatars团队持续记录大约15分钟,这已经到达了他们现有硬件条件的极限,但尽可能多的数据也为创建最逼真的虚拟头像打下了基础。
Codec Avatars团队正在使用这些数据来训练AI系统,从而让AI可以从视频中快速构建虚拟头像。
Sheikh说:我们目前已经可以还原发型夸张的人的3D头像,甚至还原戴着脑电采集帽的人的头像也不在话下。
这是世界上最先进的能够自动生成人类的真实数字肖像的方法之一。它提供了一种虚拟的面对面交流的新方式,将来可以广泛推广。
而随着Codec Avatars的出现,人们对元宇宙社交的接受度会不会越来越高呢?
郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。