Comprar con realidad aumentada es un sueño cuando se usa la API RoomPlan de Apple

Las compras de realidad aumentada se llevan a un nuevo nivel gracias a una nueva característica introducida en iOS 16. La nueva API de Apple RoomPlan utiliza el escáner LiDAR en los últimos modelos de iPhone Pro para crear un plano de habitación en 3D, y una nueva e impresionante demostración muestra de lo que es capaz. Shopify creó una prueba de concepto que escanea una habitación y luego te permite vaciarla virtualmente para ver cómo se verían los muebles nuevos en la habitación. Alternativamente, puede eliminar ciertos elementos, como un sofá, y luego agregar otros nuevos a la habitación… Si esto le suena familiar, es porque Ikea ya ha hecho lo mismo en una forma más tosca, pero nos dimos cuenta en ese momento que RoomPlan probablemente lo haría Deje que las empresas de muebles creen aplicaciones más sofisticadas. Shopify Russ Maschmeyer dice que ha habido mucho interés en la habilidad. Se refiere a la función como un botón de reinicio para una habitación y explica lo que puede hacer.

AR facilita probar nuevos sofás, pero el sofá que ya está en su espacio puede interferir. ¿Qué pasaría si cada habitación tuviera un botón de reinicio? Space Eraser modela espacios en alta fidelidad, capturando objetos que definen el espacio, su tamaño, posición y orientación. Los datos de píxeles en vivo se combinan con los datos de profundidad de LiDAR para habilitar un gemelo digital realista de su espacio que se puede superponer en su espacio real con AR y luego editarse digitalmente. Cuando una habitación está vacía, los compradores ahora pueden deslizarse a través de conjuntos de habitaciones que utilizan la orientación de los muebles existentes para organizarse automáticamente. Con un gemelo digital de su habitación y muebles, simplemente puede borrar su sofá original para explorar opciones que se adapten mejor al resto del espacio.

Aquí puede ver el proceso de reinicio: Y aquí la eliminación de objetos individuales de la habitación:

Los datos de píxeles en vivo se combinan con los datos de profundidad de LiDAR para habilitar un gemelo digital realista de su espacio que se puede superponer en su espacio real con AR y luego editar digitalmente… [3/12] pic.twitter.com/3Nu1ph0aXz
— Russ Maschmeyer (@StrangeNative) 13 de julio de 2022

Maschmeyer habla sobre cómo lo crearon y algunos de los desafíos que enfrentaron.

RoomPlan genera un modelo USDZ sin textura de cubos unitarios; uno para cada puerta, ventana, pared y objeto que define el espacio, ¡pero sorpresa! Los modelos no incluyen elementos de piso o techo. Hacemos coincidir el modelo con el mundo real usando ARWorldMap. Dado que RoomPlan exporta modelos sin textura, buscamos formas en las que podríamos texturizarlo automáticamente. La mejor manera sería ubicar y mapear la textura a medida que se captura, pero estamos contentos con un modelo alineado y una transmisión de cámara en tiempo real. Invertimos la tubería de gráficos: en lugar de tomar muestras de una textura y escribir en la pantalla, tomamos muestras de la cámara y escribimos en una textura. RealityKit hizo esto difícil, así que usamos SceneKit en su lugar. Este enfoque crea problemas cuando los muebles cubren una superficie. En el video sobre nuestro sofá, la pared se oscurecía. RoomPlan proporciona referencias de cuadros delimitadores para objetos que definen habitaciones. Con esto podemos determinar qué partes de la textura deben ennegrecerse. Ahora podemos usar técnicas de pintura para rellenar la textura editada. Nos sorprendieron gratamente los resultados obtenidos con herramientas estándar como Photoshop y theinpaint.com. AR y #RoomPlan son herramientas interesantes para el comercio minorista. La capacidad de seleccionar y eliminar objetos del mundo real de una escena nos acerca un paso más a una realidad totalmente editable.

Soy un gran admirador de las compras de realidad aumentada, que te da una buena idea de cómo se vería algo en tu hogar sin ser tan bárbaro como visitar una tienda en persona. ¿Qué piensas? Por favor comparta sus pensamientos en los comentarios. FTC: Utilizamos enlaces de afiliados automáticos que generan ingresos. Más.

---

Visite 9to5Mac en YouTube para obtener más noticias de Apple: