Tripp presenta guía de meditación AI Kōkua XR en Meta Quest.

Tripp lanza la guía de meditación AI Kōkua XR en Meta Quest

Tripp, una empresa de tecnología enfocada en el bienestar, ha anunciado el lanzamiento de su experiencia beta de meditación AI Kōkua XR, que ahora está disponible en la aplicación Tripp en la plataforma de realidad virtual Meta Quest.

Entrenada a través de más de 11 millones de sesiones de bienestar a nivel global, la versión beta de Kōkua XR aprovecha los datos de estado de ánimo de Tripp para ofrecer reflexiones meditativas individualizadas basadas en feedback en tiempo real de los usuarios.

Inicialmente disponible en la aplicación móvil de Tripp, la oferta se expande a la realidad virtual para satisfacer la demanda de experiencias de bienestar personalizadas en XR. Tripp en sí es el nombre de la aplicación de meditación de la empresa y está disponible en varios dispositivos VR, AR y móviles, incluyendo Meta Quest, Apple Vision Pro, HTC Vive Flow, Pico 3 y 4, PSVR 2, PSVR y Rift/Rift S, iOS y Android.

Sin embargo, Kōkua XR comienza como una experiencia AI en la aplicación Tripp en Meta Quest y se expandirá a otras plataformas más adelante. Al ingresar a la aplicación Tripp, los usuarios encontrarán un catálogo de ofertas entre las que pueden elegir. Kōkua XR representa una nueva categoría de experiencia.

Nombrado en honor al concepto hawaiano de cuidado y apoyo desinteresado, Kōkua XR utiliza el arsenal de datos de estado de ánimo de Tripp para generar reflexiones interactivas hiperpersonalizadas impulsadas por AI en tiempo real. Desde su lanzamiento beta en móviles en febrero, Kōkua XR ha aumentado la participación en sesiones en más del 100%, demostrando un sólido interés por experiencias de bienestar personalizadas y el poder de la AI para desbloquear la hiperpersonalización con generación de experiencias en tiempo real.

Nanea Reeves, CEO de Tripp, comentó en una entrevista con GamesBeat: «Esta es una evolución rápida. El equipo está realmente energizado por ello. Todos se sienten muy orgullosos de este trabajo. Creo que para todos en nuestra empresa, se siente como uno de los productos más revolucionarios en los que han trabajado. Hemos dotado de mucha analítica y estamos emocionados de ver cómo la gente interactúa con ello. Ahora, habrá una gran etiqueta beta por todas partes. Pero sí, es emocionante. Lo hemos tenido en vivo en móviles durante un tiempo en una forma rudimentaria. Nuestro público de VR es mucho más activo. Así que para mí, es un momento definitorio para nosotros porque siempre he tenido esta visión de este estado de ánimo bajo demanda. Ser capaz de adaptarse a ti en tiempo real».

Kōkua XR, una AI de meditación de Tripp, se lanza en la plataforma de realidad virtual Meta Quest hoy. Con Tripp, puedes comunicarte con él y hacer una solicitud. Puedes revisar la respuesta y tener una conversación para centrarte y escuchar el apoyo. La aplicación te ofrece visualizaciones tranquilas y pacíficas con iluminación colorida. Puedes pedirle que te cuente un chiste y lo hará.

La tecnología patentada permite a la aplicación conectarse a grandes modelos de lenguaje (LLMs) y así está conectado a ChatGPT4, Gemini, Claude y más. También habrá una integración de Llama. Responde con la voz de Reeves.

Tripp utiliza un método de puntuación basado en la solicitud para determinar cuál LLM devolverá la mejor respuesta para el usuario. OpenAI definitivamente ha estado teniendo más éxito que los demás, según Reeves.

Toma unos segundos en responder, dada la latencia en la red. Reeves le pidió una meditación para ayudarla a dormir. También puede crear una historia para dormir.

«Imagínate a ti mismo en esa pantalla para nosotros. Rodeado de altos árboles y la suave naturaleza. Respira hondo», respondió Kōkua XR.

La aplicación tiene varios entornos para que elijas.

«Sin ningún código rígido, si cambio el entorno a un entorno submarino, me dirá que note los peces o note los corales», dijo Reeves.

Tripp está trabajando con GGWP para asegurarse de que la comunidad esté adecuadamente moderada y de que la AI se comporte con los pasos de seguridad adecuados. Lo hace de una manera que protege la privacidad, según Reeves.

«Es un mundo nuevo fascinante», dijo Reeves. «Es un caso de uso realmente genial usar la tecnología para ayudar a alguien a sentirse mejor. No tenemos que intentar ser todo para todos. Simplemente nos inclinamos hacia el apoyo y cómo apoyamos al usuario en el momento».

Tripp ha tenido mucho éxito con su aplicación de meditación que ahora se está expandiendo con una expansión de AI.

Tripp ha estado en este viaje durante años.

«Desde el inicio de la empresa hace años, el equipo de Tripp ha estado imaginando experiencias personalizadas, dinámicas e inmersivas que aprenden y se adaptan al estado de cada usuario en tiempo real», dijo Tim Chang, socio de la empresa Mayfield que lideró la ronda inicial de Tripp en 2017, en un comunicado. «Tripp siempre ha sido metódico en la construcción de una base de datos y tecnología anticipando las capacidades emergentes de AI para adaptar y optimizar mindfulness y experiencias de expansión de la conciencia a niveles sin precedentes».

Chang agregó: «Los modelos de detección de respiración de Tripp, ahora emparejados con sus meditaciones generadas en tiempo real por AI, muestran el poder de cómo las experiencias hiperpersonalizadas pueden usarse para un impacto positivo, así como para el bienestar mental y emocional».

La detección de respiración de Tripp se puede experimentar hoy en la categoría «Respirar” de Tripp que está impulsada por AI y se enfoca únicamente en ejercicios de respiración. Actualmente está disponible en la aplicación Tripp en varias plataformas de VR. La tecnología de detección de respiración utiliza un giroscopio del auricular para identificar tu patrón de respiración.

Construido sobre 11 millones de sesiones

Nanea Reeves es la CEO de Tripp.

Kōkua XR es un enfoque único para el bienestar que utiliza AI no solo para ofrecer reflexiones individualizadas, sino que sigue evolucionando con cada sesión para brindar un mejor apoyo a sus usuarios. La oferta se basa en datos de estado de ánimo de más de 11 millones de sesiones de Tripp, donde a los usuarios se les pide que informen cómo se sienten antes y después de cada experiencia.

El resultado es la interfaz AI de Kōkua XR, construida a partir del entorno de datos de bienestar patentado y exclusivo de Tripp diseñado para ofrecer experiencias beneficiosas para las personas que utilizan las aplicaciones de Tripp en múltiples plataformas. Kōkua XR y la plataforma AI de Tripp están verdaderamente impulsadas por la comunidad de Tripp.

La tecnología de Tripp está respaldada por varios patentes. En este lanzamiento, la empresa destaca dos patentes específicas: la primera «adaptando una experiencia de realidad virtual para un usuario basándose en una puntuación de mejora de estado de ánimo» (patente aquí) y la segunda «adaptación de contenido multimedia al estado detectado de un usuario» (patente aquí), estas patentes son para adaptar experiencias personalizadas de bienestar basadas en el estado de ánimo y datos cinemáticos como la frecuencia cardíaca y los patrones de respiración del usuario.

Con cada interacción, Kōkua XR aprende a cómo apoyar mejor a sus usuarios, individualmente y en conjunto en toda la comunidad de Tripp. Disponible primero en móviles y Meta Quest, Kōkua XR se expandirá a través de las plataformas de Tripp en los próximos meses.

«Las personas que usan Tripp han desempeñado un papel único en la creación de esta tecnología al compartir sus sentimientos con nosotros. Cada sesión permite a nuestros miembros encarnar el espíritu colaborativo y desinteresado de Kōkua, mejorando el apoyo para sí mismos y para otros», dijo Reeves. «Ningún camino hacia el bienestar es igual, y con Kōkua nos aseguramos de que tu viaje para apoyar tu bienestar mental y emocional sea tan único como tú. No es solo una actualización; piénsalo como una nueva forma de abordar el bienestar… personal y capaz de ser accedido y compartido en múltiples plataformas».

Tripp utiliza dos patentes establecidas para personalizar dinámicamente experiencias de bienestar, respondiendo inmediatamente a los cambios en el estado de ánimo de un usuario e indicadores físicos clave como patrones de respiración recopilados del auricular.

El sistema recopila datos de estado de ánimo, datos de movimiento de respiración y genera puntajes a partir de encuestas de usuarios antes y después de las sesiones para construir una base de datos de vectores de estado de ánimo y emociones, permitiendo que la AI genere meditaciones personalizadas.

Gracias a las patentes pendientes, Tripp garantiza una entrada precisa del usuario con un sistema de interacción único que permite correcciones, cancelaciones e interrupciones, y ofrece respuestas rápidas y ricas en contexto tratando la voz como líneas de diálogo en lugar de una secuencia de audio mediante un método de entrega atómico patentado.

El enfoque único permite a Tripp refinar continuamente sus ofertas, brindando a los usuarios el contenido más efectivo y relevante para su bienestar.

«No es un secreto que la AI generativa ha cambiado profundamente nuestra experiencia con interacciones y experiencias cotidianas, y nuestro enfoque hacia el bienestar no es una excepción», dijo Malte Barth, socio fundador de Bitkraft, quien lideró la ronda Serie A de Tripp en 2022, en un comunicado. «Nanea y el equipo de Tripp han pasado los últimos 5 años construyendo uno de los motores más poderosos para ofrecer experiencias de meditación y bienestar que es incomparable en su toque personalizado y compromiso con los usuarios. Su visión ha estado muchos años por delante de la mayoría».

El anuncio llega tras varios hitos, incluidos ser nombrado entre los Mejores en Computación Espacial en Apple Vision Pro, y la Fundadora y CEO, Nanea Reeves, reconocida como finalista en los Premios Women that Build 2024.

Tripp también ha recibido más de 2.6 millones de calificaciones de cinco estrellas en la aplicación en sus experiencias y es también la aplicación de mindfulness más revisada en la plataforma Meta Quest.

Mejoras futuras

Kōkua de Tripp es una AI que puede tener conversaciones calmantes con los usuarios.

Basándose en los comentarios hasta ahora, los usuarios están creando indicaciones pra hacer frente a desafíos de comunicación y problemas de amistad (constituyen el 20% de las indicaciones), ansiedad y sentimientos de preocupación, sentimientos positivos y participación social, relajación y atención plena, y sentirse estresado y abrumado.

«Kōkua XR se construyó a partir de millones de sesiones en las que las personas compartieron sus sentimientos, así que siento que nuestros usuarios nos han ayudado a crear Kōkua XR, que son parte de la creación de ello», dijo Reeves. «La contribución de un individuo al simplemente decir cómo se siente en el momento realmente ayuda a Kōkua XR a mejorar en el apoyo a toda la comunidad. Y esto es realmente no hablado mucho sobre muchos AI y motores impulsados por AI. La AI no es algo separado. Está siendo co-creado por las personas que usan nuestra aplicación».

Reeves dijo que el equipo encontrará recompensas para los usuarios en el futuro por ayudar a la empresa a evolucionar la tecnología. También habrá enfoques más gamificados para esas recompensas.

«También quiero que se sientan parte de ello cuando les preguntamos a las personas en nuestra aplicación Tripp VR sobre la recopilación de datos de respiración (para el Apple Vision Pro en el futuro)».

Hasta el momento, hay aproximadamente un 70% de aceptación para compartir datos para ayudar a entrenar los modelos. La IA ha tenido algún impacto en Tripp. Como ejemplo, los ingenieros de sonido están liberados para trabajar en música en las experiencias, en lugar de limpiar archivos de audio. Se produce una reorientación del trabajo que resulta de la asistencia de la AI para los desarrolladores.

«Había miedo en la empresa en torno al herramientas de IA. Ahora hemos visto que realmente expande la creatividad en la empresa. Estamos haciendo algo de generación de imágenes, y proporciona una cantidad de trabajo fundacional en solo un par de minutos en lugar de días. Puedes dedicar tiempo a hacer la experiencia más interactiva. Estamos encontrando que nos está ayudando a producir audio de mayor calidad».

Orígenes de la AI

Reeves dijo que Kōkua ha estado en proceso desde el inicio de la empresa, ya que el objetivo original siempre ha sido crear experiencias que alteren el estado de ánimo de manera personalizada para un individuo. Para la primera fase, Tripp necesitaba recolectar un entorno de datos para construir el motor para Kōkua XR.

Al inicio de cada sesión, Tripp le preguntaba a las personas cómo se sentían al principio de cada sesión. Tripp consultó a Walter Greenleaf, un asesor y neurocientífico en la Universidad de Stanford, así como al Centro Nacional de Innovación en Salud Mental. Esto se convirtió en las 11 millones de sesiones para el feedback de los usuarios.

«Los investigadores han analizado esos datos y nos dimos cuenta de que ahora teníamos una buena base y podríamos construir un motor que inicialmente solo comenzaría a recomendar contenido para el individuo», dijo Reeves. «Y luego empezamos a trabajar con algunos de los laboratorios para generar nuestro contenido de meditación. Y luego, en última instancia, creamos el avatar de voz», usando la voz de Reeves para el avatar femenino y la de un ejecutivo de la empresa para la voz masculina.

Eventualmente, quedó claro que Tripp podía sostener una conversación en tiempo real, tomando la entrada semántica del usuario, traduciéndola en sentimiento y luego pasándola por un LLM, y luego produciendo texto de salida. Eso podría convertirse en una respuesta por voz. En caso de que uno de los LLM no funcione, pasa a otro que proporciona la respuesta. La colección de LLMs se llama «el consejo», según Reeves. Para reducir la latencia, Tripp creó una solución alternativa a la que patentó con «componentes atómicos» que se pueden almacenar en caché para que se transmitan a los bits del cliente por vez.

«Todo está sucediendo en tiempo real», dijo Reeves. «Acabamos de poner una gran capa analítica para que los temas suban hasta nosotros sin mirar los datos reales enviados por razones de privacidad. Podemos ver cómo está respondiendo Kōkua XR y qué le están pidiendo las personas. Puede haber casos especiales que no anticipamos».

Tripp tiene algunos datos predefinidos que pueden activarse si alguien dice que quiere hacerse daño a sí mismo o a otros. Tripp puede interceptar esas afirmaciones con un mensaje de apoyo y redirigir a la persona a las líneas de ayuda. Esto ya se ha probado en la aplicación móvil. La aplicación Kōkua XR ha estado en pruebas desde febrero con un grupo de clientes que es 59% masculino. Las respuestas han evolucionado con el tiempo.

«Con el tiempo, la confianza de la persona se acumula y las solicitudes pueden volverse más personales», dijo Reeves. «A partir de los datos iniciales en móviles, aprendimos que muchas personas son buenas para explicar cómo se sienten en el momento. Así que solo tener una interfaz donde puedes empezar a desarrollar un poco más ese lenguaje y ser alentado y apoyado a través del uso de esta tecnología, creo que beneficiará a las personas para poder decir de manera más concisa y clara cómo se sienten en el momento».

Tripp ha sido muy popular hasta la fecha. Es la aplicación de bienestar líder en la lista más popular en Meta.

«Esta es una gran evolución para nosotros al tener experiencias más adaptables que ahora se muestran en tiempo real», dijo Reeves. «Un usuario subió imágenes de su madre, a quien perdió, a Tripp, y eso lo ha estado ayudando. Encontramos que las personas que personalizan la aplicación están un 400% más involucradas que aquellos que no lo hacen».

Muchas aplicaciones de bienestar ven una gran deserción en los primeros 30 días, pero la personalización ha ayudado a impulsar el éxito de Tripp, dijo Reeves. Con Kōkua Mobile, Tripp ha visto aproximadamente un aumento del 100% en el uso de sesiones, incluso sin ningún marketing.

La esperanza es que la visión por computadora se vuelva útil en algún momento dadas las imágenes personales que las personas pueden subir, nuevamente con una capa de privacidad para protección. Si alguien dice algo inapropiado, Tripp guiará a esa persona de regreso