Mistika VR a tool of choice at Foren Project, a revolutionary neurological VR rehabilitation method

Published On: January 19th, 2022

[SPANISH BELOW]

Foren Project is a revolutionary treatment that innovatively applies immersive technology to neurological rehabilitation. Their tool of choice for optical flow stitching is SGO’s virtual reality-focused solution, Mistika VR.

Charo Ortín, founder and CEO at Foren Project, explains that this groundbreaking method is based on mirror neurons that are triggered by imitation. “It is not necessary for the patient to perform a movement;  observation and imitation of the exercise make the mirror neurons grow and this is their true power.” 

Based on that principle, the team designed a novel treatment, using ‘real’, not virtual reality, explains Charo. “When the patient puts on the VR headset, we do not wish to transfer them to a virtual, fantasy world. What we wanted was for the patient to see himself in the environment where he actually is.”

Executing and successfully delivering Charo’s idea from the content generation point of view was quite complex and demanding, says Rafa Naveiro, VR creator in Foren Project. “At first we were going to shoot all the exercises at each clinic with two cameras with 8 mm fisheye lenses. This process turned out to be tedious and extremely time consuming, so we had to find a better solution.”

Looking for camera alternatives, the team came across the Insta360 Pro 2, recording in 8K stereo. “Suddenly we didn’t have to carry two cameras, we didn’t have to worry about calibration and it really sped up the whole onset process.”

Another challenge that the Foren team wanted to overcome was to avoid having to go to record all the exercises at each clinic separately. “Therefore we decided to first shoot all the exercises in a 360º chroma and then only record the empty rooms of each clinic. Once we had both parts, the idea was to simply merge everything together.”

In addition, Rafa and his colleagues also wanted to improve the overall post-production workflow. “The stitching program that we used at the beginning was very slow and the results were not optimal. This changed dramatically when we started to use Mistika VR, allowing us to do the whole process almost automatically and just in a few clicks. Improving the stereo alignment, almost automatic optical flow stitching with the integrated Pro 2 template and other tools incredibly facilitated the process throughout. Integrating Insta360 Pro 2 and Mistika VR into our workflow cut the time of the whole process in half,” shared Rafa.

“Apart from being pioneers in applying VR technology for neurological rehabilitation, the most important thing is the fact that this real-life VR stimulation really works. After having carried out several clinical trials and verifications, we have obtained very good results,” concludes Charo Ortín.

Foren Project elige Mistika VR como herramienta principal para su método de rehabilitación neurológica basado en tecnología VR

Foren Project es una compañía madrileña que de manera novedosa aplica la tecnología inmersiva en tratamientos neurológicos. Su herramienta de stitching elegida es Mistika VR, la solución dedicada a la post-producción de realidad virtual, desarrollada por la empresa española SGO.

La fundadora y CEO de Foren Project, Charo Ortín explica que su método innovador se basa en el estudio de neuronas espejo, las que actúan por imitación. “Su poder es que no hace falta que el paciente realice el movimiento, sino que viéndolo en un tercero e imitándolo se consigue que las neuronas crezcan.”

Basándose en ese concepto, el equipo diseñó un tratamiento novedoso, usando la realidad real, no virtual, explica Charo. “Cuando el paciente se pone las gafas, no le trasladamos a una realidad virtual. Lo que queríamos era que el paciente se viera a sí mismo en ese mismo entorno, que es donde de verdad está.”

Realizar esa idea a nivel de producción y también de post-producción fue bastante complejo, dice Rafa Naveiro, Realizador VR en Foren Project. “Al principio íbamos a grabar todos los ejercicios a cada clínica con dos cámaras con lentes de ojo de pez de 8 mm. Este proceso resultó tedioso y consumió muchísimo tiempo. Por lo tanto teníamos que encontrar una solución mejor.” Buscando alternativas de cámara, encontraron la Insta360 Pro 2, que graba en 8K y estereoscópico. “De repente no teníamos que llevar al set las dos cámaras, no teníamos que preocuparnos por la calibración y nos agilizaba el proceso de grabación”. 

Otro reto que el equipo Foren quería sobrepasar era evitar el hecho de tener que ir a grabar todos los ejercicios a cada clínica por separado. “Por lo tanto decidimos rodar primero todos los ejercicios en un chroma de 360º y luego solamente grabar las salas vacías de cada clínica. Así, una vez obtenidas las dos partes, simplemente fusionar todo.”

Solventados los problemas de grabación, Rafa y sus compañeros querían optimizar también la postproducción. “El programa de stitching que usábamos al principio nos restaba mucho tiempo y los resultados no eran óptimos. Esto cambió cuando conocimos Mistika VR, que con unos pocos clicks nos permitió hacer todo el proceso de manera casi automática. Corregir el paralelo de la estereoscopía, stitching automático con la plantilla de la Pro 2 integrada y otras herramientas que agilizaron todo el proceso de una manera increíble. La integración de Insta360 Pro 2 y Mistika VR a nuestro flujo de trabajo acortó todo el proceso a la mitad,” compartió Rafa.

“Aparte de ser pioneros aplicando la tecnología VR para la rehabilitación neurológica, lo más importante es el hecho que esta estimulación con realidad real de verdad funciona. Tras haber realizado los ensayos clínicos y comprobaciones, hemos obtenido muy buenos resultados,” concluye Charo Ortín.