Apple的RealityKit 2允许开发人员使用iPhone照片创建AR的3D模型

2021-06-09 01:30:16

Apple在开发人员地址期间注意到制作伟大AR应用的最困难部分之一是创建3D模型的过程。这些可能需要数小时和数千美元。

使用Apple的新工具,开发人员将能够使用一系列使用iPhone(或iPad或DSLR,如果他们更喜欢)以捕获来自所有角度的对象的2D图像,包括底部。

然后,在麦斯科斯镜头上使用对象捕获API,它只需要几行代码来生成3D模型,Apple解释说。

首先,开发人员将在RealityKit中开始新的摄影测量会话,该会话指向他们捕获图像的文件夹。然后,他们将调用过程函数以期望的详细级别生成3D模型。对象捕获允许开发人员为AR快速外观生成优化的USDZ文件 - 让开发人员在iPhone和iPad上的应用程序或网站中添加虚拟,3D对象的系统。 3D模型也可以将3D模型添加到Xcode中的现实作曲器中的AR场景中。

Apple表示,像Wayfair,Etsy和其他人这样的开发人员正在使用对象捕获来创建现实世界对象的3D模型 - 这是一个迹象,即在线购物即将获得大型AR升级。

例如,Wayfair正在使用对象捕获来为其制造商开发工具,因此它们可以创建其商品的虚拟表示。这将允许Wayfair客户能够在今天的AR中预览更多产品。

此外,Apple注意到包括Maxon和Unity的开发人员正在使用对象捕获来在3D内容创建应用程序中创建3D内容,例如Cinema 4D和Unity Mars。

RealityKit 2中的其他更新包括自定义着色器,使开发人员更加控制渲染管道以微调AR对象的外观和感受; 资产的动态装载; 构建自己的实体组件系统的能力,以组织AR场景中的资产; 以及创建玩家控制的角色的能力,因此用户可以在基于RealityKit的游戏中跳跃,规模和探索AR世界。 一位开发人员Mikko Haapoja of Shopify,一直在尝试新技术(见下文)并分享一些现实世界测试,他通过Twitter使用iPhone 12 Max拍摄对象。 想要测试它的开发人员可以利用Apple的示例应用程序,并在他们的Mac上安装蒙特利以尝试一下。 Apple' S对象捕获在菠萝上。 我的一个最喜欢测试摄影测量的东西。 这是使用原始细节设置处理的。 Apple'对象捕获是真正的交易。 我印象深刻。 很高兴看到@shopify商家可以接受这个