随着加强实际(AR)技能的发展,将物理天下与数字信息融合的需求日益增长。为了探索这一范畴的大概性,谷歌推出了一项名为“加强对象智能”(Augmented Object Intelligence, AOI)的新交互范式,并发布了一个开源原型体系——XR-Objects。该体系旨在通过及时对象分割和多模态大模子的支持,将一样平常物品厘革为可交互的数字流派,为用户提供更加天然、直观的信息获取方式。
研究配景
目标
XR-Objects 的核心目标在于冲破实际天下作为被动配景的传统观念,利用户可以或许直接与四周情况中的物体互动,以获取相干数据或实行特定操纵,从而实现物理对象与数字实体之间的无缝毗连。
重要概念
AOI 是一种创新的交互模式,它让物理对象在扩展实际(XR)情况中变得具有功能性,而无需预先注册这些对象或举行复杂的设置过程。这种厘革使得任何被辨认的对象都能成为通向更深条理内容和服务的桥梁。
技能实现
对象检测
借助于MediaPipe提供的强大工具集,XR-Objects可以精确地对80种差别范例的常见物品举行分类和边界分割。这一步调是整个流程的根本,确保了后续全部功能的有用性。
定位与锚定
利用Google ARCore平台的技能,体系可以或许在3D空间内追踪并固定选定的目标,包管无论从哪个角度观看,附加在其上的捏造菜单都会
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!qidao123.com:ToB企服之家,中国第一个企服评测及软件市场,开放入驻,技术点评得现金 |