Proceso de diseño y UX de iSpeakVR: aprender idiomas de manera inmersiva

Intro

Este es el proceso de diseño y UX del proyecto final de curso Virtual Reality Design Inmmersive realizado en UXER School. Es un proyecto totalmente ficticio que toma como base un proyecto real apoyado por Oarsis, incubadora de startups de realidad virtual. No existe otra relación que el apoyo y conocimiento que nos han brindado.

Pese a ser ficticio, se han utilizado todas los herramientas y pasos necesarios tanto desde el punto de vista del UX como de la gestión de equipos, proyectos, protitipado, desarrollo… para la creación de una aplicación VR profesional que hemos ido aprendiendo y poniendo en práctica durante el curso.

Let’s start!

Aprender idiomas siempre ha sido una tarea tediosa. Requiere disciplina, práctica y continuidad en el tiempo. La realidad virtual es una tecnología que gracias al gran poder de inmersión que ofrece es capaz de crear experiencias que sean más intensas y motivadoras.

Con respecto al VR actualmente el público está a la expectativa no sólo de dispositivos más accesibles, si no de un contenido de calidad, que aporte valor.

De esta combinación surge el proyecto iSpeakVR una aplicación VR que busca ayudar a aprender idiomas utilizando la inteligencia artificial, el storytelling y la gamificación, con la voz como única herramienta de interacción.

Nuestro equipo sería el encargado de validar esta idea y desarrollar un prototipo en base a un pequeño briefing, explicando todo el proceso de desarrollo.

Un proceso vivo

Para el proceso de desarrollo de la aplicación seguimos la estructura puesta en práctica por Virtual Voyagers adaptándola a las necesidades del proyecto.

Debido a los objetivos y limitaciones del curso la idea era llegar hasta el punto 5 generación de assets y prototipado.

El desarrollo de aplicaciones VR sigue un modelo tipo technology push.Básicamente se trata de tomar una tecnología y aplicarla a diferentes áreas para entender el valor que aporta y ver su potencial. Esto sumado a los continuos cambios (nuevas olas) que se producen cada 6 meses hace que los procesos de diseño estén vivos. Por lo que fuimos conscientes desde el principio que para aplicar metodologías de diseño previas había que hacerlo con flexibilidad.

UX al principio de todo proceso

Al proceso le añadis un paso de investigación y validación.

El primer cambio que realizamos fue el ampliar el proceso con etapas previas de investigación y exploración. Para luego pasar a la ideación, prototipado y testeo. Siempre teniendo en cuenta que muchos de los procesos podían solaparse y realizarse en paralelo.

El proyecto debido a limitaciones de tiempo y recursos, se planteó que llegase hasta la fase de prototipado y testeo.

Herramientas y metodología

El proceso de realizó con equipo en remoto. Con reuniones de trabajo presencial de aproximadamente 45 minutos dos veces a la semana al final de las clases.

Herramientas

Las herramientas utilizadas para el desarrollo del proyecto han sido:

Todas las herramientas son gratuítas con algunas limitaciones.

• Google Drive: para la creación, organización y acceso de los archivos. Algunos ejercicios se realizaron en dinámicas presenciales con papel, rotuladores y post-it pero luego fueron trasladados a un documento online utilizando las herramientas que incluye Google Drive.
• Slack: para la comunicación entre el equipo y los profesores.
• Trello: para la gestión de las tareas.
• Unity: para el prototipado de la aplicación VR

Metodología

La metodología se dividió en 3 pasos:

• Investigación y exploración: para validar el briefing, hacernos preguntas y entender las necesidades de los usuarios.
• Ideación: búsqueda de ideas y creación de soluciones.
• Prototipado y testeo: creación de prototipo semi funcional con el que probarlo con usuarios.

Nota: aunque parezca que todo el proceso ha sido lineal no ha sido así. Algunos procesos se han hecho en paralelo. Cada proyecto tenía unas características únicas que encajaban mejor o peor con el calendario de las clases.

Primeros pasos: validar el briefing

En el documento del proyecto se explicaban las diferentes características necesarias:

• Interacción por voz exclusivamente. Con Inteligencia artificial. Para la gestión y comprensión del lenguaje natural y los comportamientos.
• Storytelling. Es decir, contar una historia.
• Gamificación. Utilizar las mecánicas de los juegos para aumentar el engagement.
• Público objetivo. De 8 a 18 años.

Como se puede ver los requerimientos hacen del proyecto algo muy completo. Narrativa, juego, inteligencia artificial y aprendizaje de idiomas. La investigación se centró en entender si estos requerimientos mejorarían la experiencia de aprender idiomas y en caso de ser válidos, entender cómo deberían trabajarse para extraer de ellos el máximo valor.

Entender el entorno

Realizamos un ejercicio de mapeo para entender los actores, lugares y dinámicas que existían entre el universo del VR y el aprendizaje de idiomas.

Mapeo de los actores principales entorno al VR y el aprendizaje de idomas.

Gracias a un rápido stakeholders map pudimos crear una conversación que nos hizo ver que había más actores y lugares. Y sobretodo la dinámica entre estos actores.

Público infantil

Los niños son un gran mercado para el VR. No tienen barreras ni prejuicios de experiencias previas. Su entendimiento y desenvoltura con las interacciones, las escenas y las experiencias es muy fluída. Siendo un público con mucho potencial nos dimos cuenta de que aunque su poder de decisión estaba subordinado a los padres, existía una dinámica más sutil. Para ello nos ayudó con la siguiente reflexión:

• ¿Quién decide la compra del Cola-Cao? ¿Los padres o el hijo?Nos dimos cuenta que los padres deciden que en casa se toma cacao con leche, pero la elección de si es Cola-Cao o Nesquik la hacen los niños.

Esto nos ayudó a enfocar la investigación en los padres y de cómo estos quieren que sus hijos aprendan idiomas. Buscar formas de hacerles ver a los niños y padres el valor de nuestra aplicación gracias a estar en los puntos de contacto donde ahora se ofrecen experiencias de VR. Además nos dimos cuenta que las escuelas de idiomas también eran un mercado potencial para la aplicación.

Poco a poco íbamos acumulando hipótesis que validar con la investigación.

Edades recomendadas para el uso de VR

Un aspecto importante en el VR es la seguridad. Tener una pantalla a escasos centímetros de los ojos puede tener efectos adversos en la vista de personas que aún están desarrollándose. Aunque es una tecnología con muchísimo potencial para un público infantil, por ahora los proveedores han decidido curarse en salud y coinciden en que la edad mínima para el uso de la VR es a partir de los 12/13+ años.

PlayStation VR explica que no es para uso de niños menores de 12 años. Por su parte Oculus Rift no recomienda su uso para menores de 13 años.

Esto nos condujo a reducir el público objetivo desde los 12 a los 18 años. En lugar de los 8 a 18 planteados en el briefing. El impacto que tiene este cambio es importante ya que el rango de edad era muy amplio (niños a adultos) y complicaba bastante el ofrecer una experiencia común de storytelling y gamificación que se adaptara bien a todos los públicos. Ahora era más sencillo.

Exploración

Una vez teníamos una idea de los stakeholders decidimos realizar entrevistas para validar el resto de requerimientos del briefing. Para ello hicimos dos entrevistas a expertos:

• Profesor de idiomas
• Madre con hijos estudiando inglés

Con el profesor queríamos descubrir qué retos se encontraban a la hora de enseñar idiomas a nuestro rango de edad. También qué métodos, dinámicas y ejercicios eran los más adecuados. Por último su relación con las tecnologías.

Los padres están muy preocupados porque sus hijos aprendan idiomas. Esto les produce bastante estrés.

Por otro lado la madre nos ayudaría a entender qué problemas y puntos de vista encuentra actualmente a la hora de enseñar a sus hijos idiomas.

Resultados de las entrevistas

Tras las entrevistas descubrimos que desde el punto de vista del profesor:

• Que existe una necesidad de fomentar la atención y el interés para las clases. Algo que es muy complicado por la variedad de los alumnos y el interés cambiante.
• Que los elementos interactivos funcionan muy bien como complemento de refuerzo y para mantener el interés
• Que se aprende por repetición
• Que el escuchar y hablar son las partes más complicadas de aprender

Desde el punto de vista de los padres descubrimos que:

• El aprender idiomas es un esfuerzo de tiempo y dinero para los padres que causa estrés
• Que están dispuestos a hacer el esfuerzo si se les aseguran resultados
• Que es muy difícil que los niños tengan interés por ir a clases
• Ven la tecnología como un complemento al método tradicional

Primeras conclusiones

En general y con ciertos matices nos dimos cuenta que la aplicación VR de idiomas era la herramienta adecuada.

La profunda inmersión y el efecto wow! ayudados de una buena historia gamificada podría ser la solución a la necesidad de mantener la atención y el interés. También que la interacción con voz reforzaría uno de los aspectos más complicados a la hora de aprender un nuevo idioma: el escuchar y el hablar.

Sin embargo aún había ciertos aspectos en los que teníamos que conocer. Pero ya estábamos preparados para tener a nuestro primer usuario imaginario.

Persona-jes

Una vez validadas parte de las hipótesis del briefing creamos un persona-je. El persona-je es una herramienta alternativa a la persona. Cuando no se tienen datos suficientes para crear un persona lo mejor es crear un persona-je, un arquetipo con el que empatizar.

El personaje responde a un cliché (el listo, el tonto, etc.) aunque son igual de falsos que las personas, son estereotipos estandarizados que nos ayudan a respaldar las decisiones de una manera más sólida y emocional.

El personaje tenía que responder a 4 premisas:

1. Por qué se acercaría al VR
2. Tres cosas que lo definan
3. Por qué usarían nuestro producto
4. Qué les haría odiarlo

Personaje: Milhouse

Milhouse nos acompañaría durante todo el proceso como soporte empático.

Ver el archivo con el persona-je en Google Drive

Conclusiones

• Lo usaría por recomendación de sus padres o profesores
• Lo usaría con miedo
• Es muy sensible a mareos y agobios
• Lo haría para divertirse
• Dejaría de usarlo si no tiene aprobación social (sus amigos piensan que es estúpido)

Entender la experiencia del VR

Queríamos entender el proceso de adoptar una nueva tecnología como es el VR. Saber qué puntos de contacto, pensamiento, emociones y puntos de dolor encuentra un usuario. Eso nos ayudaría a ver los bloqueos y oportunidades.

Para ello utilizamos 3 herramientas:

• Diario: donde un usuario iba describiendo en un documento su experiencia desde que decide buscar alternativas a las clases de inglés tradicionales hasta que prueba con sus hijos una aplicación de aprendizaje de idiomas en VR.

Ver el documento Diario en Google Drive

En base a los datos del diario creamos:

• Mapa de empatía
• User Journey map

Ver el documento de Mapa de empatía en Google Drive

Ver el documento User Journey Map en Google Drive

Ideas y conclusiones

• El usuario está muy abierto a probar nuevos métodos de aprendizaje en base a una nueva tecnología.
• Elegir un modelo de gafas ante tanta variedad, opciones y requerimientos es una gran molestia.
• Hay poca familiaridad con su uso. Además hay cosas que mejorar de la experiencia. Colocar el teléfono, conexiones Bluetooth para el mando, salirse por error, sacar teléfono, volver a ponerlo, navegación, fallos de micro y voz…
• La experiencia con las niñas es un éxito. Les encanta. El efecto WOW es inmediato. Entienden rápidamente los controles incluso con el mando.
• Hay que ofrecer experiencias que indiquen que se está sentado o quieto, ya que los niños creen que pueden caminar olvidando el mundo real.
• Dignidad. En casa se toma con humor que otras personas te oigan pronunciar palabras extrañas en otro idioma mientras estás con el visor.
• Estamos limitados a que ciertos aspectos de la tecnología mejoren. Visores independientes a precios accesibles por ejemplo. Los actuales son económicos pero requieren de un teléfono de alta gama.
• Peligro de juicios demasiado rápidos. Una mala experiencia hace pensar que esto es muy difícil, no funciona, etc. por lo que se descarta el producto inmediatamente.

Benchmark

Por último realizamos un estudio de benchmark para conocer las opciones que actualmente existen para aprender idiomas. Lo importante no es sólo conocer a tu competencia directa, si no las alternativas que existen a la tecnología. En nuestro caso ya conocíamos cómo lo hacían las escuelas pero decidimos incluir a las aplicaciones para móviles y las experiencias VR.

Ver el documento Benchmark en Google Drive

Ideas y conclusiones del benchmark

Hay mucha diferencia entre aplicaciones móviles y VR. Las primeras tienen un modelo de interacción y diseño más sólido. Con un contenido extenso y buena gamificación.

La usabilidad es una tarea pendiente en las aplicaciones VR de idiomas.

En VR las experiencias están verdes en muchos aspectos ya que aún no se han desarrollado sistemas de interacción validados, buenas prácticas… se sigue más un modelo de prueba-error. También su contenido es más reducido sospechamos que es porque una aplicación requiere de muchos recursos para funcionar por lo que las experiencias tienden a ser más cortas.

En general lo que entendimos con este proceso es que las aplicaciones se enfocan en base a dos objetivos:

• Como introducción a un idioma
• Como refuerzo a uno que ya se conoce

La metodología de aprendizaje

• Lecciones cortas pero constantes. Es decir, conseguir que la utilicen 5 a 10 minutos pero todos los días.
• La gamificación es imprescindible. Generalmente con un sistema PBL (points, badges and leaderboards). También utilizan los mini retos.
• Se basan mucho en el feedback.
• Siguen un modelo del tipo ayuda progresiva. Tras cada error se van dando ayudas, tips, etc.

Las interacciones

• Procuran reducir al máximo la introducción de texto.
• Los ejercicios de escucha y pronunciación son opcionales o de pago.
• Son tolerantes con las inexactitudes pequeñas.
• Cuando se ofrecen personajes 3D realistas hay cierto efecto de uncanny valley

La interacción por voz

• El usuario está bloqueado en tu conversación, no puede hacer otra cosa que hablar con el personaje.
• La conversación aunque es tipo comandos, tiene cierta flexibilidad. Esto varía dependiendo de la inteligencia de la aplicación.
• En general no sabes qué puedes hacer con la voz: qué hablar, preguntar, etc.

Puntos importantes

• La interacción por voz es un problema y un reto. Tanto desde el apartado de experiencia de usuario “estar en un lugar donde poder hablar o escuchar” hasta los aspectos técnicos: la aplicación no recibe bien el audio o no lo entiende, requiere de varios segundos para procesarlo…
• La usabilidad tiene que mejorarse. Esto es exclusivo de la VR. Los caminos son rígidos y no se pueden deshacer. Inexistencia de navegación u oculta, salir, pausar, opciones, dónde estoy… es un caos.
• Las experiencias VR tienen una gamificación muy básica o inexistente.

La tecnología adecuada

Fuimos conscientes desde el principio que existen diferentes opciones para ofrecer experiencias en VR. Cada una tiene unos puntos fuertes y otros débiles. En base a nuestra investigación realizamos un estudio comparativo de tecnologías actuales para el VR para así decidir con cual construiremos nuestra experiencia.

La pregunta fue:

¿Qué tecnología nos ayudaría a crear la experiencia que queremos accediendo a un público mayor?

No fue muy complicado decidir que el soporte elegido fue Gear VR tipo Daydream y Samsung Gear VR en base a un teléfono de alta gama. Con el ojo puesto a corto a plazo (menos de 4 meses) a sistemas standalone (sin teléfono) como Oculus Go.

Los dispositivos standalone funcionan sin cables lo que ofrece una experiencia más cómoda.

Este sistema aunque ofrece experiencias más reducidas y de menor calidad pero sus requisitos de adopción son más sencillos.

• Es standalone, no requiere cables. Ni depende de un ordenador de alta potencia.
• Es más económico.
• Tienen un mando que ayuda mucha a la interacción.

Fortalezas y debilidades

Ahora conocíamos a los usuarios, su universo y también éramos conscientes de nuestras limitaciones técnicas. Por lo que realizamos un esquema FODA que se centró en sólo dos aspectos. Fortalezas y debilidades.

El requerimiento de inteligencia artificial era un reto importante

Dentro de nuestras fortalezas destacan:

• Tecnología novedosa
• Una experiencia muy inmersiva
• Gamificación
• Narrativa
• Usabilidad e interacciones

Por otra lado nuestras debilidades:

• Límites técnicos en cuanto a calidad de la experiencia
• Los requisitos de la interacción por voz son muy exigentes
• Necesidad de una inteligencia artificial
• Falta de experiencia en la enseñanza de idiomas

Ideación

Una vez teníamos toda la investigación completada nos pusimos manos a la obra. Realmente ya teníamos muchas soluciones habladas y abocetadas pero necesitábamos darle un orden, una prioridad y ver realmente su impacto de valor no sólo en el resultado ideal final si no en base a nuestras capacidades y limitaciones.

Agrupación

El primer paso que realizamos fue el agrupar todo el feedback de la investigación realizada por categorías.

• Aprendizaje
• Tecnología
• Interacción
• Personal

Emoción

A cada elemento se le asignó una emoción que iban desde el odio al amor pasando por un modo neutral. Esto nos ayudaría a ver qué partes de la experiencia producían menos satisfacción y cuales producían mayor satisfacción.

• Odio
• Tristeza
• Neutro
• Feliz
• Amor

¿Cómo podríamos?

Una vez categorizado todo y asignado una emoción, iniciamos una dinámica de “¿Cómo podríamos?” mejorar las emociones negativas hasta un nivel neutro sin perder las positivas.

Ver el documento ¿Cómo podríamos? en Google Drive

Lo hicimos bajo dos premisas:

• Queríamos generar una conversación de valor
• Las soluciones se someterán a votación tipo Scrum

Soluciones generales

Pudimos ver que el reto estaba en:

• Enfocar el producto desde una perspectiva de refuerzo para aprender un idioma
• Ofrecer una narrativa gamificada abierta con diferentes caminos en base a la calidad
• Creación del usuario único para su posterior seguimiento, evaluación y feedback de su aprendizaje
• Gamificación con funciones sociales
• Necesidad de testear con un nivel de usabilidad al detalle ya que el usuario es muy nuevo a la tecnología VR y su frustración produce un abandono rápido y una condena de por vida
• Ofrecer alternativas (fallbacks) a un más que probable fallo a la tecnología de interacción por voz y la inteligencia artificial

Selección de soluciones

Con la mente puesta en el prototipo que había que presentar lo completamos con una dinámica de selección de ideas en base a su deseabilidad y viabilidad.

Prioridades

Nos dimos cuenta que nuestra fuerza y posibilidades a la hora de desarrollar un prototipo estaba en:

• La narrativa
• Usabilidad
• Sistema gamificado básico
• Las interacciones

Estas serían nuestras prioridades.

Deseables

Estas funciones menos viables se dejarían a un segundo plano. Se plantearían como ejemplos que simularán la funcionalidad, en caso de tener tiempo de sobra. Pese a todo se planteará el camino a seguir y la solución adecuada.

Lo menos viable para el prototipo sería:

• Interacción por voz
• Inteligencia artificial
• Diferentes niveles y número de ejercicios
• Funciones sociales

Definición

Hecha toda la investigación y con las soluciones en nuestra mano, la siguiente fase constó en definir todos los elementos de la experiencia.

Guión y narrativa

Este es el elemento clave de todo el proyecto ya que sería el soporte para toda la experiencia. Somos conscientes de que el ser humano se nutre de historias. Son el motor de su realidad, la razón por la que realiza unas cosas u otras, las historias hacen la vida algo por lo que vale la pena vivir.

Desde el punto de vista de la narrativa y el aprendizaje sabíamos que era importante tener en cuenta varios aspectos:

• Héroe. Involucrar al usuario
• Misión. Darle una razón para completar los retos
• Mi mundo. Hablar de su realidad, de cosas que le importan
• Potenciar. Motivar la fantasía dentro de lo cotidiano

Nuestra historia

El protagonista desde su casa realiza una inmersión en diversos mundos donde, a través de la interacción con personajes (inteligencias artificiales), se profundice en el conocimiento del idioma. Lo hace a través de una máquina del tiempo que lo lleva a diferentes momentos de la historia: piratas, edad media, espacio, jungla, desierto… la ideas es rescatar a un hermano gemelo. En nuestro prototipo sólo se desarrollará el mundo pirata.

Conceptualmente son una serie de acciones, retos a superar y experiencias que conducen al personaje de la niñez a la madurez. La idea principal es que pierda el miedo escénico a hablar en otro idioma mientras lo aprende y practica.

Ejercicios de idiomas

La estructura de aprendizaje se mezcla con la dinámica de juego de la siguiente manera:

• Onboarding: utilizado para introducir la historia, los personajes y las circunstancias. También sitúa al usuario en un lugar seguro desde donde familiarizarse con la experiencia y los controles.
• Escenario 1: listening and comprehension. Planteamiento del reto.
• Escenario 2: speaking and reading. Desarrollo.
• Escenario 3: speaking and comprehension. Solución.

En cada escenario deberás cumplir una serie de objetivos correctamente.

Pero si no consigues superar las pruebas, pasado un tiempo, avanzarás en la historia, en beneficio de la “inmersión”.

Al final de cada aventura, recibirás una explicación detallada de tus logros y de los puntos a mejorar en futuras aventuras.

Una vez completados todos los escenarios (mundos) del juego, se podría hacer una última prueba de nivel para ver la evolución.

Esta sería la estructura básica para todas las aventuras.

Escenarios

Los que diseñan para realidad virtual es un lugar. Un lugar donde sucede una experiencia inmersiva. En este apartado se trata de diseñar esos lugares donde el usuario iba a vivir la nueva realidad que le planteamos.

Ejemplo de escenario para el nivel de la taberna

Los escenarios se desarrollan en base a un centro donde está el usuario y un mundo a su alrededor situados a ciertas distancias que explican su naturaleza. La distancia y colocación indican su importancia ya que los movimientos del usuario están limitados.

Se buscarían experiencias que sugieren al usuario que está sentado. Esto ayudará a poder jugarla desde una silla sin tener que girar o moverte mucho. Lo que evitaría también posibles mareos.

Gamificación

Para el aspecto de las mecánicas de juego desarrollamos un documento de diseño de juego donde definimos entre otros los siguientes aspectos:

• Mecánicas
• Jugabilidad
• Flujos
• Modos de juego
• Premios y castigos
• Personajes
• Control del jugador
• Interfaz
• Arte
• Sonido
• etc.

Ver el documento de diseño de juego en Google Drive

Concept art

Desde una investigación temprana supimos que el arte de la aplicación estaría definida por los requisitos técnicos. En nuestro caso, con un mundo 3D, animación, interactivo a través de la voz y con inteligencia artificial todo soportado por un teléfono de alta gama nos empujaba a un arte que consumiera los menos recursos posibles.

La calidad del pixel no está reñinada con la narrativa. Imagen perteneciente a Minecraft.

Por lo que optamos por una estética low poly, donde las mallas 3D tienen pocos polígonos. Perdíamos detalle, pero ganábamos en rendimiento. También la estética low poly nos ayuda a que las historias sean más expresivas y complejas, ya que no hay sobresaturación de estímulos: visuales, narrativos, etc. Esto se explica muy bien en el libro de Scott McCloud Understanding comics.

Interacciones

Aunque este contenido está más desarrollado en el documento de diseño de juego podemos resumir la interacción dentro de la experiencia de la siguiente manera.

Se basa personajes que al hacer click sobre ellos comienzan a hablarnos y contarnos una historia. Se nos indicará que los elementos son clicables:

• cambio de color y luminosidad
• sonido
• movimiento

Dentro de esa conversación pueden pedir que les respondamos a alguna pregunta (planteamiento del ejercicio de idioma).

Boceto de interacción con un personaje con el que podemos conversar.

En caso de no poder resolver el reto a través del habla se añadirán nuevas capas de soporte e interacción por texto.

Storyboard

También desarrollamos un storyboard como guía para entender el desarrollo de la historia, sus animaciones e interacciones. De esta manera todo el equipo entendería de una manera rápida cada apartado de la aplicación.

PRD

El documento de requerimientos de proyecto (PRD en sus siglas en inglés) se crea para explicar al cliente el qué, cómo, cuándo, etc. del desarrollo de nuestra aplicación. Sirve de guía y testimonio durante el proceso. También es la referencia en caso de sugerir cambios, mejoras, etc. que pueden tener impacto en las diferentes áreas.

En nuestro caso, sería un proyecto largo en el tiempo (2 años), con requisitos técnicos amplios. Básicamente es un videojuego en realidad virtual con inteligencia artificial con el que se aprenden idiomas. Aunque hay mil factores a tener en cuenta debido al amplio abanico de profesionales, consultores y colaboradores necesarios.

Prototipado

Aunque hay muchas herramientas que permiten crear prototipos decidimos utilizar Unity. Ya que contiene toda una serie de herramientas e interacciones que una vez dominadas permiten un prototipado rápido y escalable.

Modelado 3D y audio

Un aspecto importante para el prototipo fue que decidimos utilizar modelos 3D predefinidos. Esto nos ahorraría tiempo y esfuerzo a la hora realizar cambios y actualizaciones.

La asset store de Unity contiene una gran cantidad de elementos predefinidos para poder realizar un prototipado rápido.

Esto también se aplicaría a la biblioteca de sonidos.

Inteligencia artificial

Uno de los aspecto más complicados de la aplicación serían los diálogos. Normalmente para estos casos se utiliza un distema de Dialog tree donde unas respuestas te llevan a diferentes circunstancias.

Ejemplo de interacción en base a dialog tree

Sin embargo nos dimos cuenta en los test de usario y el benchmark que la experiencia que producen es muy límitado ya que al final funcionan como una base de comandos.

Por lo que decimos introducir en el prototipo la SDK de inteligencia artificial de IBM Watson en base a conversaciones de audio y texto. Sería más complicado pero el resultado sería más natural y la experiencia más flexible.

UX: arquitectura

Para definir la arquitectura de navegación creamos un flow de pantallas.

Ver el documento con el flow de pantallas en Google Drive

La idea es que antes de entrar en la experiencia VR tienes que logearte bajo un sistema clásico de aplicación web con:

• Registro y Login de usuarios
• Dashboard

Este aspecto se solucionó de una manera clásica al no haber un solución de calidad para VR a la hora de introducir textos y teclados. No queríamos que la primera interacción con la experiencia fuese un teclado VR.

Demo

Para el prototipo de demostración decidimos desarrollar el primer escenario. Es la primera escena, donde el usuario se familiariza con la experiencia. Allí aprende a situarse en el espacio, conocer las interacciones y se le introduce en la aventura.

Los elementos interactivos al pasar sobre ellos cambian de color.

El casco es el inicio de la experiencia. Gracias a su colocación podremos conversar, interactuar e ir a las diferentes aventuras.

Interacción por voz

La retícula funciona como sorporte en caso de que el habla falle.

La interacción por voz utiliza la inteligencia artificial de IBM Watson. Se inicia al interactuar con los iconos de micrófono junto al personaje. Pu

Ayudas de texto

La interacción por voz ses siempre apoyada con una ayuda de texto en caso de que el usuario no pueda entender lo que se le dice. La ayuda de texto aparece en el idioma a aprender y al lado su traducción en el idioma del usuario.

La idea es que las primeras interacciones con los personajes nos lleven a acciones que en realidad sirvan como tutorial de la aplicación.

Escenarios

El movimiento por las diferentes escenas se realiza con teleport. Unos lugares clave que al ser seleccionados te teletransportas.

Equipo y agradecimientos

Por último queremos agradecer a UXer school y a los profesores todo el apoyo prestado durante el proceso. Su conocimiento y ganas de trasnmitirlo es algo envidiable.

En el equipo de iSpeakVR han trabajado:

Rafael Cobo
Álvaro Millán
Alvaro Bonilla
Elías Mas
Raúl Redondo