Meta 将依托 AR 智能眼镜数据探索机器人、汽车和医疗领域的新应用

就在 Meta 发布其 XR 教学解决方案并宣布一系列教育合作伙伴关系仅一周后,该公司再次强调与教育机构研究人员建立的一系列联盟,以新颖有趣的方式推动 XR 技术的发展。

在最新的合作中,Meta 与几所大学合作,推动对 Project Aria 的研究,Project Aria 是一款尚未开发的人工智能 AR 智能眼镜设备,也与 Meta Orion 项目保持一致。

与 Orion 设备一样,Project Aria 旨在进一步研究日常 AR 可穿戴设备和 AR 数据驱动服务。目前,Meta 正在通过 Ray-Ban 设备推出一款面向市场的 AR 产品。然而,与 Meta 的承诺相比,这款产品的 AR 可视化和 AI 集成相对基础,其面向未来的原型设备和框架提供了更深层次的技术集成和 BCI 功能。

Aria 框架似乎专注于如何将 AR 环境数据应用于机器人、医疗保健和汽车等一系列案例。最近的大学合作伙伴关系旨在通过与世界领先机构的研究部门合作,继续开展这项全公司范围的研究,这些机构利用 Aria 研究套件 (ARK) 来发现新形式的免提 XR 通信。

Meta 协助范式转换研究

首先,布里斯托大学(University of Bristol)正在与 ARK 合作,推进该团队在 Ego-Exo4D 方面的内部工作。该项目使用 Aria 传感器创建真实世界空间的 3D 模型。

Ego-Exo4D 希望利用 Meta 智能眼镜捕捉高技能人员(如运动员或厨师)与空间互动的方式,并将环境数据纳入机器人框架。

布里斯托大学计算机视觉教授 Dima Damen 博士解释说:

我创办研究实验室的初衷是纯粹地研究如何通过可穿戴相机、自我中心视觉和具有区域等多传感器的技术来理解行为,这些技术使我们能够进行更深入的感知。现在,自我中心相机拍摄的镜头正在成为我们所谓的预训练或准备设备的常态,然后机器人通过观看大量录像来理解这些录像,它们现在可以成功地复制动作。

Damen 指出,Aria“配备了一系列传感器,例如凝视传感器;它能让你了解人在环境中的位置。”这使研究人员能够对以人为中心的数据进行建模,为机器人项目等创造新的动力。

另一方面,爱荷华大学正在利用 Aria 框架为听力受损人群提供医疗保健服务。利用上述 Aria 环境数据,爱荷华大学的研究人员可以创建一种可以翻译声音来源的设备。

ARK 框架还帮助印度理工学院海得拉巴分校的研究人员开发驾驶员意图预测项目。该项目利用计算机视觉来预防汽车事故;通过使用 Aria 凝视数据(如布里斯托尔研究项目),印度理工学院海得拉巴分校的研究人员可以了解驾驶员正在寻找什么,以提高对机动车事故的认识。

印度海得拉巴理工学院计算机视觉专业博士生 Avijit Dasgupta补充道:

借助 Aria 眼镜,我们可以开发一个视频理解模型,帮助我们避免事故。Aria 的主要优势在于眼睛注视数据。您可以绘制出驾驶员注视的场景,看看他们是在注意前方的车辆,还是在转弯时看着后视镜。

Dasgupta 还指出,Aria 套件提供音频反馈,“这就是所有传感器协同工作的方式”,从而使数据收集“非常容易”。

“这大大提高了我们的工作速度;每年,有数百万人死于事故。如果我们能为此建立一个有效的模型,我们就能挽救数百万人的生命,”达斯古普塔评论道。

此外,Meta 还与卡内基梅隆大学机器人研究所合作,协助开发 Navcog,这是一款智能手机医疗保健应用程序,为视障人士提供音频寻路服务。

此次合作使研究人员能够减少对蓝牙的依赖,并利用 Aria 框架更有效地响应新的在线环境。

在 Meta 寻求提高 AR 数据在智能眼镜硬件之外的新用例的可转移性之际,国际大学研究合作伙伴关系应运而生。

值得注意的是,Meta 补充说,Aria 可应用于 具身人工智能、情境化人工智能、人机交互 (HCI) 和机器人等研究主题。 

尽管 Meta 在 Connect 2020 上宣布了 Aria,但 Aria 项目仍处于早期阶段,官方网站也处于起步阶段。随着 XR 技术在硬件之外的应用越来越广泛,即在有价值的空间数据的应用方面,其用例也将会增加。

Meta 为美国/英国教育机构带来 VR/MR 头显和元宇宙

Meta 还宣布推出 Meta for Education 测试版计划,这是一款专为高校设计的新产品,于 4 月首次亮相。该解决方案旨在通过 Quest 的 VR 和 MR 头戴设备产品组合,为教师、培训师和管理人员提供教育专用的 XR(扩展现实)服务。

该测试版本正在美国和英国各地的高校推出,包括亚利桑那州立大学、休斯顿社区学院、伦敦帝国理工学院、迈阿密戴德学院、莫尔豪斯学院、新墨西哥州立大学、圣地亚哥州立大学、萨凡纳艺术设计学院、格拉斯哥大学、爱荷华大学、利兹大学、迈阿密大学和密歇根大学。

参与的大学将与 Meta 合作,在测试版发布时提供反馈,以帮助在更广泛发布之前完善和改进 Meta for Education 产品。该产品旨在支持各种学科,例如科学、医学、历史和语言艺术。

与去年推出的 Meta Quest for Business 模型一样,新的教育解决方案旨在通过专为学术环境设计的 XR 应用程序和管理功能为教师、培训师和管理员提供支持。

更新后的管理功能允许教师在课堂环境中同时使用多台 Quest 设备。此外,先进的设备管理工具使教师无需单独更新每台设备,从而简化了入职流程。

有趣的是,Meta 强调教育套件包括 Metaverse 功能,这可能会重振其曾经被大肆宣传的技术承诺。Meta 解释了这些 Metaverse 解决方案如何通过数字实地考察和培训机会来增强课堂效果。

Meta 称早期成果“前景光明”,值得注意的是,伦敦帝国理工学院帝国理工 IDEA 实验室执行董事 Monica Arés也表示,“这是一个伟大的时刻,任何一家机构或一家公司都需要联合创作者、开发者、教育机构、研究组织和科技公司共同构建这个新的学习生态系统,因为它将使每个个人和行业受益。”

在首次发布和反馈期之后,Meta 计划在 2024 年的最后几周扩展其解决方案。该公司专注于 Quest 产品组合的教育和培训应用。几个月前,Meta Quest 3S 在 Connect 活动期间刚刚发布,该设备旨在作为将混合现实 (MR) 集成到各个领域的可访问切入点。

猜你喜欢

np古代p精彩故事(传说中的英雄):揭示古代英雄背后的传奇!
np古代p精彩故事(传说中的英雄):揭示古代英雄背后的传奇!

古代文化中的英雄故事,常常以其动人的情节和丰富的象征意义吸引着人们的关注。这些故事不仅仅是人们的娱乐消遣,更是深刻的文化根基,承载

疯狂一家亲短篇合集作文600字:趣谈家庭之乐,展现亲情温暖多样性
疯狂一家亲短篇合集作文600字:趣谈家庭之乐,展现亲情温暖多样性

疯狂一家亲短篇合集作文600字于此,述家庭之乐,诸多故事汇成欢愉图景,令人莞尔。此合集乃为亲情之缩影,各种奇妙生活瞬间,恍若一幅壮丽

第八十届威尼斯电影节重拾经典:转变视角,回首光影历程
第八十届威尼斯电影节重拾经典:转变视角,回首光影历程

节节攀高的住宿城市税,妨碍不了报复性消费的游客挤满水城的大小街巷;涨到9 5欧一次的公交船票,也不会让乘客能在班次频繁的渡轮占据哪怕

国庆档有实力IP和众多明星加盟,票房表现究竟如何?
国庆档有实力IP和众多明星加盟,票房表现究竟如何?

截至9月11日,今年国庆档,已有10部影片官宣定档,分别是《前任4:英年早婚》《坚如磐石》《莫斯科行动》《志愿军:雄兵出击》《我是哪吒2

海角国精产品一:浦江飞跃,探寻海角国精产品一的时尚与风味交融之美
海角国精产品一:浦江飞跃,探寻海角国精产品一的时尚与风味交融之美

海角国精产品一者,乃海角之地所产之精华,承载着独特的地域文化与深厚的历史底蕴。其所涵盖之产品,涵盖美食、工艺及特产,多元而丰富,既

精品无人区卡一卡二卡三乱码免费卡:探寻无人区宝藏之旅的乐趣与挑战
精品无人区卡一卡二卡三乱码免费卡:探寻无人区宝藏之旅的乐趣与挑战

精品无人区卡一卡二卡三乱码免费卡 者,乃一稀有之资源,通往未知之领域,使人们得以探索神秘的无人区。此卡不仅仅是通行证,亦是探险者与自

药玉为什么要放在身体里:药玉的神秘力量与保健效用探索
药玉为什么要放在身体里:药玉的神秘力量与保健效用探索

药玉为什么要放在身体里,其源于古代中医学之理念,认为药玉蕴含诸多药用成分,能通过经络入体,调和阴阳,达至增进健康、延年益寿之效。药

два+26美国留学生活经验分享:提升学术与社交能力的秘诀
два+26美国留学生活经验分享:提升学术与社交能力的秘诀

留学美国是许多学生梦寐以求的经历,这不仅是学术提升的机会,还是个人成长的重要阶段。对于刚踏上美国土地的留学生来说,面对新的环境、文

爱奇艺发布二季度财报:营收达78亿元,广告收益同比增加25%
爱奇艺发布二季度财报:营收达78亿元,广告收益同比增加25%

8月22日,爱奇艺发布2023年第二季度财报,财报显示爱奇艺二季度实现营收78亿元人民币,同比增长17%;净利润为3 652亿元,而上年同期净亏损2

《雨血前传:蜃楼——深度解析18分钟体验视频,探寻未知世界的神秘面纱》
《雨血前传:蜃楼——深度解析18分钟体验视频,探寻未知世界的神秘面纱》

在古老的传说中,有一种神秘的建筑,被称为“蜃楼”。它矗立在现实与幻想之间,连接着两个不同的世界。近日,一款名为《雨血前传:蜃楼》的