Ona, la cantant virtual catalana

Modelado, animación y la captura en movimiento en tiempo real de personajes.

<a href=”http://davidinlines.files.wordpress.com/2013/09/clarabrunoona.png”><img id=”i-519″ src=”http://davidinlines.files.wordpress.com/2013/09/clarabrunoona.png?w=650″ alt=”Image” /></a>

Ona, bruno y Clara son tres personaje virtuales 3D preparados para animar y para moverlos en Real Time, allí en el escenario. Mientras Ona, renderizada previamente, canta y baila, en directo Clara o Bruno está siendo movido por un participante en tiempo real. O también, si Bruno baila y canta, Clara está siendo movida en tiempo real por otra/o participante.También puede estar cantando Clara y mover a Bruno u Ona.
Resumiendo, mientras un render está funcionando, junto a el, hay un personaje que está siendo movido por un humano, es decir, captura de movimiento en tiempo real.

Todo ese proyecto audiovisual en el que nos hemos sumergido ha sido ideado por <strong>VoctroLabs</strong>, la tercera empresa derivada, o Spin-Off surgida del Grupo de Tecnología Musical (GTM) de la Universidad Pompeu Fabra.
Trabajan en un software llamado <strong>Vocaloid</strong>, dicho software une letra y música, escribimos una letra, la colocamos en las notas que le corresponden y ¡A cantar! (O algo así, son unos genios).

Nuestra parte fue el modelado, animación y la captura en movimiento en tiempo real de los personajes; Inés Campos creó una cantante virtual ilustrándola con unos pantalones verdes y una camiseta estampada con el arte de Gaudí, el <em>Trencadís</em>, una cinta en el pelo y un gran aro en la oreja izquierda, unos ojos saltones con una gruesa sombra y un estilo único que solo Ona podía tener. Le quedó muy sexy.
A partir de este modelo que nos entregó, creamos el modelo en 3D de Ona, le animamos los gestos faciales y la pusimos a bailar.
Teníamos “algo” de Bruno y Clara, unos modelos en 3D que tuvimos que modificar para poder hacerles el Rigging, animarles los gestos faciales y crearles una coreografía acorde con las canciones que <strong>VoctroLabs</strong> habían creado, estas canciones las cantan Bruno, Clara y Ona mediante la tecnología <strong>Vocaloid</strong>.

Lo complicado fue la captura de movimiento en tiempo real y mezclarlo con los renders, pues bien, todo esto lo solucionamos con un sensor kinect. Gracias a él, pudimos mover los personajes que quisimos en tiempo real y de forma rapidísima, el sensor detectaba a la gente en cuestión de segundos, el personaje que era movido lo enviaba a través de VNC hasta el ordenador que mezclaba la información de MoCap, el render y lanzaba el mix a la pantalla de led.

La escuela de informática ESPAI de Barcelona, nos dejó al “Peke” un servidor equipado con una NVIDIA Quadro 4000, doble Xeon y 32 Gb de Ram para poder capturar el movimiento en tiempo real y realizar los renders, unos renders de los personajes estilo videojuego, ni realista ni muy digital. Gracias <strong>ESPAI</strong>, sin vosotros, nada de esto hubiera sido posible.

He formado equipo con Aleks, mi profesor de 3D. Me ayudó con la animación, modelado de los personajes y la caracterización de cada personaje para poder controlarlos mediante el sensor kinect, sin él, no me hubiera atrevido a hacer este reto, porque ha sido un reto.

Ha sido le proyecto más ambicioso que he hecho hasta ahora, ha sido una mezcla de todo lo que he aprendido hasta ahora, Creación de un personaje + Animación 3D + Captura de movimiento en tiempo real + Vjing.
Ha sido el proyecto más difícil en el que me he metido y el que más “miedo” me ha dado, pero las ganas, la ilusión, y el cariño que les he cogido al equipo de <strong>VoctroLabs</strong> ha podido con todo eso, ha salido todo perfecto!

Gracias Oscar por tu gran paciencia en mi y estar a mi lado los 5 directos. Gracias Jordi Janer por motivarme durante el directo diciéndome que estaba quedando bien y te gustaba. Gracias Merlijn por transmitirme esa tranquilidad de confianza que te envuelve y transmitírmela. Gracias Jordi Bonada, gracias por pegarme caña el primer día que tuvimos el encontronazo allí en el escenario, para demostrarte que “sí, podía”, lo hice!
Gracias Inés por crear a un personaje que nos ha unido a grandes personas con ganas de mirar al futuro con proyectos pioneros como el que hemos hecho con Ona y sus dos grandes amigos, Bruno y Clara.
Gracias a todos los “Voctros” por confiar y no perder la paciencia ni la confianza en nosotros dos, Aleks y yo!

He conocido a grandes personas del mundo del espectáculo, a Sergi Ots, a Eugeni, a Barbara a nuestra bailarina Anabel y a todo el equipo de luz, vídeo y sonido que han hecho posible el espectáculo! 😉

NOTICIAS

http://www.voctrolabs.com/onavirtual/

http://www.ara.cat/barcelona/Neix-primera-cantant-virtual-catalana_0_994700761.html

http://www.btv.cat/btvnoticies/2013/09/21/merce-2014-ona-robots-virtual

http://videos.lavanguardia.com/mon-barcelona/20130917/54386695660/ona-primera-cantant-virtual-catalana.html

FACEBOOK

https://www.facebook.com/OnaVirtual?directed_target_id=0

https://www.facebook.com/VocaloidBrunoClara?fref=ts

VÍDEOS

___________________________________________

ACTUALIZACIÓNES

Jueves 3 de octubre de 2013, 23:20h

El Señor Jasper Brekel nos ha incluido en su blog, una satisfacción enorme poder ver este trabajo en su web. Gracias Jasper! 😉

<a href=”http://davidinlines.files.wordpress.com/2013/09/onainbrekel.png”><img class=”alignnone size-medium wp-image-529″ src=”http://davidinlines.files.wordpress.com/2013/09/onainbrekel.png?w=300″ alt=”OnaInBrekel” width=”300″ height=”193″ /></a>