Snapchat Los sueños de realidad aumentada podrían comenzar a parecer un poco más realistas.
La compañía ha estado mejorando sutilmente sus lentes con AR cada año, mejorando las posibilidades técnicas y fortaleciendo su plataforma de desarrollo. El resultado es que hoy, más de 170 millones de personas, más de tres cuartos de Snap’s usuarios activos diarios: acceden diariamente a las funciones de realidad aumentada de la aplicación, dice la compañía. Hace dos años, Snap compartió que los creadores habían diseñado más de 100,000 lentes en la plataforma; ahora Snap dice que se han creado más de 1 millón de lentes.
Los filtros tontos están atrayendo a los usuarios a la aplicación y la compañía está construyendo lentamente una plataforma más interconectada en torno a la realidad aumentada que comienza a parecer cada vez más prometedora.
Hoy, en el evento anual de desarrolladores de Snap, la compañía anunció una serie de actualizaciones, incluida la búsqueda por voz de Lens, una actualización del modelo de aprendizaje automático para Lens Studio y un sistema AR específico para la geografía que convertirá los Snaps públicos en datos espaciales que la compañía puede usar para mapear tridimensionalmente grandes espacios físicos.
Una Alexa para AR
El carrusel de lentes de Snapchat fue suficiente para deslizar entre los filtros cuando solo había un par de docenas para pasar, pero con un millón de lentes y contando, siempre ha sido claro que las ambiciones AR de Snapchat estaban sufriendo debido a problemas con la capacidad de detección.
Snap se está preparando para implementar un nuevo método de clasificación a través de lentes, a través de la voz, y si pueden lograrlo, la compañía tendrá un camino claro para la transición de AR solo para entretenimiento a una plataforma basada en la utilidad. En su formato actual, la nueva búsqueda por voz de la aplicación permitirá a los usuarios de Snapchat pedirle a la aplicación que le ayude a crear filtros que les permitan hacer algo único.
Si bien es fácil ver hacia dónde podría ir una característica como esta si los usuarios se unieran, los ejemplos resaltados en una sesión informativa previa a la prensa no indican exactamente que Snapchat quiere que esto se sienta como un asistente digital desde el principio:
- “Hola Snapchat, hazme el cabello rosado”
- “¡Hola, Snapchat, dame un abrazo!
- “Hola Snapchat, llévame a la luna”
Será interesante ver si los usuarios acceden a esta funcionalidad desde el principio cuando las capacidades de los lentes están por todas partes, pero solo construir esta infraestructura en la aplicación parece poderosa, especialmente cuando se miran las asociaciones de la compañía para la búsqueda visual con Amazon y búsqueda de audio con Shazam dentro de su función de escaneo. No es difícil imaginar pedirle a la aplicación que te permita probar el maquillaje de una compañía específica o pedirle que te muestre cómo se vería un televisor de 55 “en tu pared.
La compañía anunció nuevas asociaciones para su búsqueda visual, en equipo con PlantSnap para ayudar a los usuarios de Snapchat a identificar plantas y árboles, Dog Scanner para permitir que los usuarios de Snap apunten con su cámara a un perro y determinar su raza, y más tarde este año con Yuka para ayudar a dar calificaciones nutricionales en alimentos después de escanear la etiqueta de un artículo.
“Hoy, la realidad aumentada está cambiando la forma en que hablamos con nuestros amigos”, dijo el cofundador y CTO de Snap, Bobby Murphy, en una conferencia de prensa. “Pero en el futuro, lo usaremos para ver el mundo de formas completamente nuevas”.
BYO[AI]
Snap quiere que los desarrolladores traigan sus propios modelos de redes neuronales a su plataforma para permitir una clase de lentes más creativa y de aprendizaje automático. SnapML permite a los usuarios traer modelos entrenados y permitir a los usuarios aumentar su entorno, creando filtros visuales que transforman las escenas de formas más sofisticadas.
Los conjuntos de datos que los creadores cargan en Lens Studio permitirán que sus lentes vean con un nuevo conjunto de ojos y busquen nuevos objetos. Snap se ha asociado con la startup AR Wannaby para darles a los desarrolladores acceso a su tecnología de seguimiento de pies para permitir lentes que les permitan a los usuarios probarse zapatillas virtualmente. Otra asociación con Prisma permite que la cámara Lens filtre el mundo al estilo de los estilos artísticos familiares.
Snap espera que al emparejar la comunidad de aprendizaje automático y la comunidad creativa, los usuarios puedan obtener acceso a algo completamente nuevo. “Esperamos ver un tipo de lentes completamente nuevo que nunca antes hayamos visto”, dijo el ejecutivo de Snap AR, Eitan Pilipski, a TechCrunch.
Snapchat comienza a mapear el mundo
Uno de los grandes anuncios del año pasado de Snap en el frente AR fue una característica llamada Landmarkers, que permitió a los desarrolladores crear lentes más sofisticados que aprovecharon modelos geométricos de grandes estructuras populares como la Torre Eiffel en París o el Edificio Flatiron en Nueva York para hacer geografía. lentes específicos que jugaban con el mundo real.
La tecnología fue relativamente fácil de lograr, aunque solo sea porque las estructuras que eligieron eran tan ubicuas y los archivos 3D de sus exteriores estaban fácilmente disponibles. El próximo esfuerzo de RA de la compañía es un poco más ambicioso. Una nueva característica llamada Lentes locales permitirá a los desarrolladores de Snapchat crear lentes específicos de geografía que interactúen con una muestra más amplia de ubicaciones físicas.
“[W]Estamos yendo un paso más allá, al permitir la realidad aumentada compartida y persistente en áreas mucho más grandes, para que pueda experimentar AR con sus amigos, al mismo tiempo, a través de manzanas enteras “, dijo Murphy.
¿Cómo obtendrá Snapchat todos estos datos 3D en primer lugar? Están analizando instantáneas públicas que los usuarios compartieron con el feed público Our Story de la compañía, extrayendo datos visuales sobre los edificios y estructuras en fotos y usándolos para crear mapas 3D de ubicaciones más precisos.
Las empresas que están interesadas en la realidad aumentada compiten cada vez más para recopilar datos 3D. El mes pasado, el fabricante de Pokémon GO, Niantic, anunció que iban a comenzar a recopilar datos 3D de los usuarios en forma voluntaria.
Source link