【新智元导读】Meta 昨夜的发布会,又给我们带来了亿点点震撼。Meta Quest 3 终于揭开神秘面纱,Llama 2 加持的 Meta AI 搬进了元宇宙,而智能眼镜的演示甚至比头显还要让人期待。
他来了他来了,小扎带着 Meta Quest 3 卷土重来了!
比起前几年相对安静的 Meta Connect 开发者大会,昨天深夜的这场大会相当震撼。
首先炸场的,就是今年六月就宣布的 Quest 3。等了三个月,实际细节终于公布了!而第二代眼镜的强大功能,也让现场观众在演示中不断发出阵阵惊呼。
去年,价格过高的 Meta Quest Pro 销量惨淡,6 月,苹果用 Vision Pro 给 VR 界树立了全新的标杆。
现在,Meta 已经被逼得箭在弦上了 —— 它必须拿出东西来,证明硅谷的虚拟现实界,仍有它的一席之地。
在演讲结束时,小扎总结道:MR+AI + 智能眼镜,这个组合就是未来。
在他看来,智能眼镜意味着终点 —— 把 AI 和头显都结合在了一起,硬件问题终于解决了。
世界上首款混合现实头显 Meta Quest 3,终于面世了!
10 月 10 日,Quest 3 将正式上架,现在已经开放预购。
128GB 版本起价 499.99 美元(当前约 3655 元人民币),512GB 版本 649.99 美元(当前约 4751 元人民币)。
最便宜的只要 3600 块,这个定价是把两万多块的 Vision Pro 按在地上摩擦。更不消说,Quest 3 还不需要外接电池包这类东西。
VR 带来的沉浸式体验,会把我们瞬间带到违反物理定律的奇幻世界。而 MR 带给我们的,则是与物理世界建立联结。
通过 Quest 3,你可以在 VR 和 MR 中随意切换。
而只要双击 Quest 3 的侧面,你就可以在 VR 体验和 MR 的混合环境之间无缝过渡,选择是完全身临其境,还是让虚拟元素叠加在周围的物理环境中。
从《行尸走肉》的比较视频中可以看出,它的视觉分辨率比 Quest 2 提高了 30%,音域提升了 40%,也比 Quest 2 更薄,重量分布更均衡,所以具有最大的舒适度。
我们可以在咖啡桌上弹奏虚拟钢琴。
可以在眼前玩大型乐高。
可以和朋友一起玩游戏。
也可以在客厅中打开一扇门,走进另一个世界。
与 Quest 2 相比,Quest 3 的高保真全彩直通像素增加了 10 倍以上,这样就能让物理环境始终保持在我们的视线范围之内。
在家里就能和在身处异地的朋友一起看 NBA。
在你的客厅中,你可以放置任何虚拟现实物品。比如在小扎客厅的照片墙上,就贴着他在冲浪的动图。
每当走过客厅的这一角,就会看到栩栩如生的户外风景。
Quest 3 是世界首款采用全新骁龙 XR2 Gen 2 平台的设备,后者由 Meta 和骁龙合作开发。它的图形处理能力,达到了 Quest 2 的两倍。
此外,这也是高通首次在 VR 头显芯片中,内置特征检测和 6DoF 跟踪功能。
它可以让 Quest 3 等头显将「最密集」的任务之一转移到专用芯片上,不仅让用户始终能够在 3D 环境中保持方向,同时还能将功耗和延迟降低一半以上。
说到延迟,高通表示,头显现在可以提供全彩直通视频,平均延迟仅为 12 毫秒—— 和苹果 Vision Pro 的定制 R1 芯片一样快。
由此,Quest 3 的加载时间也快如闪电,在沉浸式游戏中会呈现出令人难以置信的高清细节。
介绍到《刺客信条 Nexus VR》时,小扎还难掩激动地说,「终于讲到这儿了,我知道大家都在等这个,确实值得等待!」
在 Quest 3 中,Meta 采用了最先进的显示器和光学元件。与 Quest 2 相比,Quest 3 的 4K + 无限显示实现了近 30% 的分辨率大飞跃。
每度 25 像素,每英寸 1218 像素,让 Quest 3 实现了整个 Quest 系列的最佳分辨率。这也让 Quest 3 的视觉效果非常壮观,戴上它后,你简直想要伸手去触摸周围的世界。
此外,在新一代 Pancake 技术的加持下,Quest 3 不仅在光学剖面上比 Quest 2 减薄了 40%,而且还不会影响视觉的沉浸感。
在舒适度上,Quest 3 也比 Quest 2 有了提升。因为外形更薄,贴合度可以定制、重量分布更均衡,我们就可以在玩游戏时得到最舒服的体验。
另外,小扎还宣布了一个好消息:Xbox Cloud Gaming 将于 12 月登陆 Quest 3,解锁 100 + 款游戏。
其中就包括我的世界、Roblox、Rumble、XTADIU 等等,每月运行费用约为 16.99 美元(当前约 124 元人民币)。
有了 Quest 3,以后你就可以在虚拟世界办公了。
Word、Excel 等办公软件,都可以使用。
上班也会变得更加「有趣」。
接下来,就到了最重要的 AI 时刻。今年,Meta 还没有正式开过关于 AI 的发布会,都在默默地发布自己的开源模型。
先是,2 月 LLaMA 大模型开源,一石激起千层浪,AI 社区模型火炬彻底被点燃,壮大了「羊驼家族」。
紧接着,分割模型 SAM、语音模型 SeamlessM4T、多模态 AI 模型 ImageBind、Code llama、Llama 2 接连开源,已经打下了坚实的基础。
正如小扎所说,「这只是开始」。接下来,就是要把 AI 带入 Meta 全家桶,开启不一样的体验。
前几天,OpenAI 刚刚推出 DALL・E 3,文生图再次上升到一个新阶段,甚至有网友纷纷表示R.I.P. MidJourney。
今天,小扎也推出了自家的人工智能图像生成模型 ——Emu(Expressive Media Universe)。
Emu 最大的特点,只用简单的文字,5 秒即生图片。比如:「一只在彩虹森林中的神仙猫咪」。
「徒步旅行者和北极熊」。
「水下的航天员」。
「在花丛中的一位女士」。
「如果恐龙是一只猫咪」。
与其他文生图模型相比,Emu 最有趣的是,可以一键生成表情包。当你正和人聊天时,不用绞尽脑汁、甚至去翻找一个合适的表情包。
比如,和朋友约好了背包旅行,想要发一个生动的准备去旅行的表情包。
「一只快乐的刺猬骑着摩托车」
选择自己喜欢的一个,发送。
当然了,你可以生成各种各样的表情包,仅需要简单几个词。
很快,任何人都可以在 Ins 中进行图像编辑 —— 重换风格和背景,背后就是由 Emu 和分割模型 SAM 加持。
重换风格,可以根据你所描述的风格,重构想像输出图片。如下, 输入「水彩」,你的照片就立刻变成水彩画了。
或者,把扎克伯格小时候的照片变成「摇滚朋克风格」。
又或者给金毛换一个「长头发」,就得到了:
你甚至可以为图片更换背景。找到一张自己躺在草坪中的照片,输入「被小狗包围」,一群可爱的小狗就伴你左右了。
又或者,家庭合照,背景可以随意切换。
「我们每天,都会用不同的 AI 做不同的事」。
除了文生图,小扎正式官宣 Meta 自家的人工智能聊天机器人 ——Meta AI,可以称为 Meta 版的 ChatGPT。
Meta AI 是基于开源模型 Llama2 打造的,同时还连接了微软 Bing 搜索,能够获取实时信息。你可以直接与它对话,甚至自研 Emu 加持,能够聊天生图。
想象一下,您和您的朋友正在群聊中讨论去圣克鲁斯应该走哪条小路。Meta AI 会在聊天中快速给出回答。
如果徒步旅行结束后,你想用一种有创意的方式来纪念这一天,怎么办?Meta AI 可以帮你。
输入 @MetaAI /imagine + 描述性文本提示,比如 「创建一个带有徒步旅行者和红杉树的徽章」,就搞定了。
小扎介绍,Meta AI 很快就可以在 WhatsApp、Messenger、Instagram 上使用。
最重要的是,今天全新发布的硬件产品 Quest 3 和二代眼镜都将集成 Meta AI。
除此之外,你还可以在 Meta AI 上,玩转各种角色。也就是说,你可以得到 28 种不同的 AI「明星助手」,每个助手都有角色定义。
比如,当你想聊聊今天吃什么,或者怎么烹饪的时候。你就可以找经验丰富的厨师长 Max,由洛杉矶最火的韩国籍厨师 Roy Choi 扮演。
又或者,你想写一个 AI 人物的故事,你就可以找擅长创意写作的 Lily。
外出旅行,网红打卡地推荐,旅行专家 Lorena 可以为你提供建议。
美国说唱歌手「史努比狗狗」就是地下城主,引来台下观众一阵大笑。
小扎现场,还给亲自做演示。
看得出来,他玩得是真开心!
演示结束后,小扎又推出了一个支持创建人工智能的平台 AI Studio,让会编码,甚至不会编码的人都可用。
对此,企业可以通过这个平台,创建改善客户服务体验的 AI。
对于创作者来说,他们将能够构建专为元宇宙打造的 AI 应用。
另外,Meta 还在打造一个沙盒,将于明年发布,让任何人都可以尝试创造自己的人工智能。
随着人工智能宇宙不断发展壮大,Meta 预计将把这个沙盒带到元宇宙中,让每个人有机会创建更高水平的人工智能。
本次发布会上的另一大亮点,就是全新的 Ray-Ban Meta 智能眼镜了!
日常戴上它,你不用掏出手机就可以和朋友打电话。
戴上它,你还可以轻松实现第一视角的视频拍摄。随时随地能向粉丝展示自己的生活,简直是网红必备神器!
而且,只需双击两下眼镜上的按钮,即可在手机和眼镜的摄像头之间实现无缝切换。
甚至还能让你知道目前观看直播的人数,和最新的评论是什么。
功能这么炸裂的产品,卖多少钱呢?起价 299 美元(当前约 2186 元人民币),10 月 17 日上市。
这次,Meta 在摄像头、麦克风和扬声器上都进行了大幅的升级。
可以说,从 Ray-Ban Stories 的 500 万像素,升级到 Ray-Ban Meta 的 1200 万像素超宽屏摄像头,提升是非常明显的。
毕竟上一款配备 500 万像素后置摄像头的苹果手机,还是 2010 年推出的 iPhone 4……
拍摄方面,照片分辨率直接从初代的 2592 x 1984 像素,直接跃升到了 3024 x 4032 像素。同时,还可以实现 1080p 30 帧的视频录制。
不仅如此,Meta 还给眼镜搭载了高通最新的骁龙 AR1 Gen 1 芯片。
虽然,AR1 Gen 1 在性能上不是最强的,但它专门针对时尚、轻巧的智能眼镜进行了优化,不会有过热和烫伤脸部的风险。
具体来说,芯片采用了双 ISP 设计,可同时进行照片和视频拍摄,甚至可直接向社交媒体账户进行直播。而对 Wi-Fi 7 和蓝牙 5.3 的支持,也让用户可以更轻松地将素材分享到网上。
此外,AR1 Gen 1 还具有端侧 AI(on-device AI)功能,不仅可以增强图像和音频质量,而且还可以进行视觉搜索和实时翻译。
就芯片本身而言,AR1 Gen 1 理论上可以支持分辨率高达 1280 x 1280 的嵌入式屏幕。
但遗憾的是,Meta 并未在其智能眼镜中加入任何 AR 技术—— 录制的视频不是 3D 的,也不能添加任何 AR 效果,眼镜上也没有显示屏。
不过,在设计层面,新款的 Ray-Ban Meta 确实更加丰富了 —— 不仅有 Wayfarer 和 Headliner 两种镜框,而且还有一系列颜色可以自由搭配。
其中,透明的蓝色、黄色和黑色镜框,还可以显示出镜腿上电路的形状。
其他的升级还有:
多达 5 个麦克风的阵列(包括鼻梁上的 1 个),不仅可以让通话和语音指令更加清晰,而且还可以记录视频片段中的空间音频。
镜腿上搭载的开放式扬声器,音量和低音效果也比初代更好。
镜框更加轻薄,具备 IPX4 防水功能,充电后可持续使用 4 小时,在附带的皮套中充电可再使用 32 小时或大约 8 次充电。
然而,对于 AI 的升级,Meta 可以说是画了个大饼。也就是,今天全新发布的 Meta AI,要等到明年才能上机。
等到那个时候,具备有多模态能力的 Ray-Ban Meta,才算是一款完整的智能眼镜 —— 识别镜头拍摄到的物体、读取眼前的文字都不在话下,甚至还能给照片或视频配文。
如果你擅长给自家猫猫拍照,想分享给广大网友,却不擅长写文案怎么办?Meta AI 也给你包了!
如果你正在旅游,却不知道眼前的景观是什么,可以直接问 Meta AI。根据眼镜里实时呈现的镜像,它就能告诉你眼前是什么。
不过,目前还不清楚,在得到完整 AI 加持之后的 Ray-Ban Meta 眼镜,能不能充当一个智能助手的角色。与此同时,它又该如何成为一个「没有屏幕」的 AR 类产品,也还是个谜。
但无论如何,在生成式 AI 大爆发的这一年,Meta 也没有落下。这次发布会交出的答卷,可以说非常精彩,并不逊于苹果的 Vision Pro,而且后者目前还并未正式售卖。
这就更让人期待,硅谷巨头们的 VR 大战了。
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。